안녕하세요. 블로그웍스입니다.
기존에 사용하던 구글 크롤링 로직은 구글측에서 업데이트를 하여 더 이상 사용하지 못하게 되었습니다.
때문에 구글에서 제공하는 API를 활용한 방식으로 크롤링을 진행해야 합니다.
구글 API 등록 절차
1. Google Cloud Console 설정
2. 새 프로젝트 생성 또는 기존 프로젝트 선택
3. “API 및 서비스” → “라이브러리” 이동
4. “Custom Search API” 검색 후 활성화
5. “API 및 서비스” → “사용자 인증 정보” 이동
6. “사용자 인증 정보 만들기” → “API 키” 선택
7. 생성된 API 키 복사
2. Google Custom Search Engine 설정
1. https://cse.google.com/ 접속
2. “새 검색 엔진 추가” 클릭
3. 전체 웹 검색
4. 검색 엔진 이름 입력
5. “만들기” 클릭
6. 생성된 검색 엔진에서 “설정” → “기본” 이동
7. “검색 엔진 ID” 복사

복사한 API KEY, Search Engine ID를 각각 입력하시면 Google 크롤링 기능을 다시 사용하실 수 있습니다.



