Datahaseo

[아이티윌 빅데이터 52기] LAB 12 | 웹 데이터 수집하기 | 카카오 개발자 API | 책 검색 결과 수집 2 | 반복문으로 전체 데이터 가져오기

[아이티윌 빅데이터 52기] LAB 12 | 웹 데이터 수집하기 | 카카오 검색 결과 수집 카카오의 도서 검색 결과를 모두 가져오기 위해서는 어떻게 해야할까?요청 url 에서 page 파라미터를 통해 도서 검색 결과 페이지의 쪽수를 컨트롤 할 수있었는데,이 값들을 최대치인 50까지 모두 다 가져오기 위해서 반복문을 결합해보자 STEP 1. 라이브러리 참조하기STEP 2. 요청 정보 확인STEP 3. 웹 데이터 요청하기STEP 4. 데이터 저장하기 STEP 1. 라이브러리 참조하기import requestsfrom pandas import DataFrame STEP 2. 요청 정보 확인#요청 URLurl ="https://dapi.kakao.com/v3/search/book"#QueryString 요청..

[아이티윌 빅데이터 52기] LAB 12 | 웹 데이터 수집하기 | 카카오 개발자 API | 책 검색 결과 수집

[아이티윌 빅데이터 52기] LAB 12 | 웹 데이터 수집하기 | 카카오 검색 결과 수집 카카오 검색 결과 데이터 가져오기 | 사전 준비STEP 1. 카카오 개발자 사이트에 들어와 로그인 한다STEP 2. 키 발급을 위해 앱 생성창에 필요한 정보를 입력STEP 3. 메뉴 > 앱 > 일반에서 REST API 키를 확인STEP 4. 대카테고리 메뉴 > 문서 > REST API > 검색 에서 검색 결과 데이터를 가져올 수있는 REST API 관련 명세서 확인 STEP 1. 카카오 개발자 사이트에 들어와 로그인 한다 STEP 2. 키 발급을 위해 앱 생성창에 필요한 정보를 입력 STEP 3. 메뉴 > 앱 > 일반에서 REST API 키를 확인 STEP 4. 대카테고리 메뉴 > 문서 > REST ..

[아이티윌 빅데이터 52기] LAB 12 | 웹 데이터 수집하기 | 영화 진흥 위원회 API | 박스 오피스 데이터 수집

#모든 자료 저작권은 아이티윌 이광호 강사님[아이티윌 빅데이터 52기] LAB 12 | 웹 데이터 수집하기 | 박스 오피스 데이터 수집 웹 데이터 수집 코드 작성 전 사전 준비1. 영화 진흥 위원해 Open api 사이트 접속우선 데이터 수집할 방식은 OPEN API를 활용하는 것Open API 는 다른 서비스의 데이터를 주고 받게 해주는 표준화된 창고로, 외부 데이터를 가져오는 통로 2. OPEN API 접근을 위한 키 발급받기 3. OPEN APU 설명서를 확인 기본 요청 URL 로 확인시에는 키값이 없어 아무 JSON 데이터도 없는 형태(GET 요청 방식이기 때문에 웹 브라우저에서 데이터 확인 조회가 가능하다)http://www.kobis.or.kr/kobi..