나는 우리가 더 이상 삶과 일에서 검색 엔진 없이는 살 수 없다고 믿습니다. 국가에 따라서는 Google, Yahoo, Naver, Baidu 등이 몸의 일부가 되었습니다. 모든 코인에는 양면이 있습니다. 마케터로서 우리는 시장과 경쟁사 정보를 조사하기 위해 검색 엔진을 과도하게 사용하는 데 어려움을 겪고 있을 수 있습니다. 우리는 직장에서 긴 하루 동안 노트북 앞에서 화면을 보고 있으면 어지러움을 느낍니다.
이번 장에서는 Python, Pandas, Google 맞춤 검색 API, CSE(맞춤 검색 엔진)를 사용하여 모든 검색 결과 정보를 스크랩하는 방법에 대해 설명하겠습니다. 이 Python 튜토리얼이 끝나면 키워드만 추가하면 됩니다. 그런 다음 잠재적인 게시자, 블로거, 경쟁업체 및 인기 콘텐츠를 찾고, 이미지를 다운로드하는 등의 작업을 할수 있습니다. 또한 제목, 랜딩 URL 등과 같은 정보를 로컬 CSV 파일에 저장할 수 있습니다.
목차: Google 검색 및 Easy2Digital API를 사용하여 SERP 데이터를 스크랩하는 Google SERP 봇
- Google 맞춤 검색 API
- 맞춤검색 엔진
- 서비스 개체 빌드 및 CSE 기능 사용
- For 루프 함수, 목록 함수 및 인수
- 무료 맞춤형 Google API의 한계
- Easy2Digital API – Google SERP 스크레이퍼
- Google SERP Scraper의 전체 Python 스크립트
- 자주하는 질문
- GOOGLE 최신 트렌드 API 엔드포인트 권장사항
Google SERP 봇 – Google 검색 API
Google 맞춤 검색 엔진 API는 개발자가 웹 또는 이미지 검색 결과 데이터를 JSON 또는 Atom 형식으로 가져올 수 있는 RESTful API입니다. API를 사용하면 개발자는 웹 사이트, 블로그 또는 웹 사이트 모음에 웹 검색 및 사이트 검색 기능을 추가할 수 있습니다. 또한 API를 통해 마케팅 담당자는 키워드 쿼리 결과 정보를가져와 CSV 파일에 저장할 수 있습니다. 이를 통해 블로거, 게시자, 경쟁업체 등의 파트너를 쉽게 찾을 수 있습니다.
앞서 Youtube API 글에서 언급했듯이 Google API 콘솔 라이브러리에서 Google API를 검색하여 프로젝트에 설치할수 있습니다. Google API 프로젝트를 만드는 방법에 대해 자세히 알아보려면 여기에서 다른 문서를 참조하세요.
5장 – Youtube 및 Easy2Digital API를 사용하여 인기 동영상을 스크랩하는. Youtube Bot 구축
사용자 정의 검색 API를 설치한 후 자격 증명에서 찾을 수 있습니다. 그리고 Python 스크립트에서 사용할 API 키를 클립보드에 복사해 주세요.
Google SERP 봇 – 맞춤 검색 엔진
CSE는 맞춤 검색 엔진의 약어이며 프로그래밍 가능한 검색 엔진이라고도 합니다. 기본적으로 웹사이트에 검색 엔진을포함시켜 방문자가 원하는 정보를 찾는 데 도움을 줄 수 있습니다. 프로그래밍 가능한 검색 엔진은 Google의 핵심 검색 기술을 기반으로 하기 때문에 사용자가 고품질의 관련성 있는 결과를 얻고 있다고 확신할 수 있습니다. 웹사이트에 애드센스 네트워크 광고를 게재하는 경우 검색창 광고도 CSE에서 가져온 것이므로 CSE에 대해 잘 알고 있어야 합니다.
Python을 통해 검색 결과를 스크랩하려면 기본적으로 데이터는 CSE API에서 가져온 것이므로 ID가 필요합니다. CSE와 Google.com의 SERP 색인 생성은 일부 결과 스니펫 형식과 실시간 순위가 다를 수 있다는 점을 제외하면 동일합니다.
서비스 개체 빌드 및 CSE 기능 사용
YouTube 기사에서와 마찬가지로 Google API 클라이언트에서 build() 함수를 가져옵니다. 발견. 또한 데이터를 추가하고 로컬 파일에 저장하기 위해 팬더를 가져옵니다.
사용자 정의 검색 API 키를 연결하고 빌드 기능을 생성합니다. 여기서 우리가 주목해야 할 두 가지 사항이 있습니다. 먼저 빌드 기능의 매개변수를 따르고 사용자 정의 검색 값을 연결해야 합니다. 둘째, CSE API에서 데이터를 호출하므로 이 개체에 CSE() 함수를 추가해야 합니다.
For 루프 함수, 목록 함수 및 인수
각 SERP에는 10개의 정보가 있으므로 루프를 생성해야 하므로 다른 페이지 매김 정보를 스크랩하는 루프 코드를 추가합니다.
사용자 정의 검색 API JSON 구문 및 인수에서 SERP 데이터를 가져오려면 함수를 나열하고 최소한 q, cx 및 start 인수를 사용해야 합니다. CSE 프로젝트의 고유 ID를 CX에 연결해야 합니다. 결국, 함수를 활성화하려면 Execute()가 필요합니다.
print(result) 시도하면 JSON 형식의 SERP 데이터 세트를 볼 수 있습니다. 스니펫과 이름 지정은YouTube JSON 데이터세트와 거의 동일합니다. 주어진 JSON 데이터 세트를 기반으로 스크랩하려는 데이터 세트를 선택할 수 있습니다.
호출할 페이지 매김 설정 및 데이터 세트 필터에 대해서는 여기에서 다른 문서를 참조할 수 있습니다.
무료 맞춤형 Google API의 한계
Google 맞춤 검색 API는 현재 검색어당 결과를 100개, 하루에 무료 검색어를 100개로 제한합니다. 계정에서 결제를활성화하면 일일 쿼리 한도가 없습니다(Google은 하루에 추가 쿼리 1,000개당 5달러를 청구합니다).
Easy2Digital API – Shopify 제품 스크레이퍼
스크립트가 복잡하고 스크립트를 업데이트하고 버그를 수정해야 하는 경우 Easy2Digital Google SERP 스크래퍼 API를 활용할 수 있습니다. 다음은 토큰 엔드포인트입니다.
https://www.buyfromlo.com?token=&=&googleKey=&keyword=&totalPage=이 API 엔드포인트를 사용하면 다음만 수행하면 됩니다. Easy2Digital 토큰, Google 검색 키, 스크랩하려는 특정 키워드 및 전체 SEPR 페이지를 추가하세요. . 긁힌 결과는 위에 표시된 것과 동일합니다.
마케팅 API에 대한 자세한 내용은 이 페이지를 확인하세요.
Easy2Digital 무료 토큰 및 Google SERP Scraper의 전체 Python 스크립트
무료 Easy2Digital API 토큰과 Google SERP 스크래퍼의 Python 스크립트 정식 버전을 갖고 싶다면, Python Tutorial 11 메시지를 추가하여 뉴스레터를 구독 하세요 . 우리는 즉시 귀하의 사서함으로 스크립트를 보내드립니다.
참 쉽죠? 11장: Google 검색 및 Easy2Digital API를 사용하여 SERP 데이터를 스크랩하는 Google SERP 봇을 재미있게 읽어보시기 바랍니다. 그렇게 했다면 아래 나열된 일 중 하나를 수행하여 우리를 지원해 주세요. 이는 항상 우리 채널에 도움이 되기 때문입니다.
- PayPal( paypal.me/Easy2digital ) 을 통해 채널을 지원하고 기부하세요.
- 내 채널을 구독하고 Easy2Digital Youtube 채널 알림 벨을 켜십시오 .
- 내 페이지 Easy2Digital Facebook 페이지를 팔로우하고 좋아요를 누르세요.
- 해시태그 #easy2digital을 사용하여 소셜 네트워크에 기사를 공유하세요.
- Easy2Digital 10% 할인 코드로 제품 구매( Easy2DigitalNewBuye. rs2021)
- Easy2Digital의 최신 기사, 비디오 및 할인 코드를 받으려면 주간 뉴스레터에 가입하세요.
- Patreon을 통해 월간 멤버십을 구독하여 독점적인 혜택을 누리세요( www.patreon.com/louisludigital )
