Instant Indexing for Google 플러그인: 구글 색인 속도, 정말 빨라질까?

최근 개설한 워드프레스 블로그의 게시글들이 3개월이 지나도 구글에서 크롤링은 되었지만 색인이 생성되지 않는 현상이 발생하고 있어 유명한 SEO 플러그인인 Rank Math SEO를 개발한 업체에서 만든 Instant Indexing for Google 플러그인을 설치하여 며칠 동안 테스트해 보았습니다. 구글 색인 속도가 빨라진다는 통계가 있기는 하지만 초기 단계의 사이트에서는 구글 색인에 큰 영향을 미치지 않는 것으로 보입니다. 구글에서 색인이 잘 안 되는 경우 이 플러그인을 설치하여 효과가 있는지 시간을 충분히 두고 모니터링하면 좋을 것 같습니다.

구글 서치 콘솔: '크롤링됨 - 현재 색인이 생성되지 않음' 문제

이 워드프레스 블로그에서는 글이 발행되면 1시간 이내에 구글에 색인이 되고 있습니다. 하지만 3개월 전에 신규로 개설한 워드프레스 블로그의 경우 구글 서치 콘솔에서 '크롤링됨 - 현재 색인이 생성되지 않음' 문제로 인해 색인이 전혀 되지 않고 있습니다.

구글 검색 콘솔에서 '크롤링됨 - 현재 색인이 생성되지 않음' 상태는 구글이 페이지를 크롤링했으나 색인을 우선순위에서 제외한 경우로, 신규 워드프레스 사이트에서 흔히 발생한다고 합니다. 이는 콘텐츠 품질(퀄리티) 부족, 중복 문서(유사 문서), 낮은 도메인 점수 등으로 구글이 "지금 색인할 가치가 없다"고 판단하는 경우입니다.

구글에는 (구글에서는 공식적으로 인정하지 않지만) 소위 '샌드박스'라는 것이 존재하여 초기 3~6개월 동안은 유입이 거의 없을 수 있습니다. 하지만 사이트의 콘텐츠 품질이 낮은 경우에는 샌드박스가 풀리지 않을 수도 있다고 합니다.

경우에 따라 색인이 1년 넘게 안 되다가 그 이후에는 금방 색인이 되는 경우도 있다고 하므로(참고) 포기하지 않고 존버하는 것이 중요하지 않나 생각됩니다.

저는 워드프레스닷컴(WordPress.com)에서 가입하여 워드프레스 사이트를 운영하는 가입형 워드프레스의 개인 플랜에 가입하여 심플하게 정보성 블로그를 시작했습니다. 네이버에는 색인 요청을 하면 색인이 생성되고 방문자도 조금씩 있습니다만, 유독 구글에서만 색인조차 생성이 안 되고 있습니다.😥

참고로 챗GPT나 제미나이(Gemini) 등 AI를 사용하여 콘텐츠를 생성하거나 네이버 블로그 또는 티스토리에 이미 발행한 글을 그대로 올리는 경우(중복 문서, 유사 문서), 콘텐츠 품질이 낮은 경우에는 구글에 색인이 되지 않거나, 색인이 생성되어도 순위가 뒤로 밀려날 수 있습니다.

Rank Math에서 만든 Instant Indexing for Google 플러그인을 설치하여 설정하면 글이 공개될 때 자동으로 구글에 색인 요청을 하여 색인 생성에 도움이 된다고 하여 설치하여 세팅해보았습니다.

워드프레스 Instant Indexing for Google 플러그인

Instant Indexing for Google 플러그인은 Google Indexing API를 이용하여 신규 글을 발생하거나 기존 글을 수정할 때 크롤링 요청을 자동으로 구글에 보내 색인 속도를 앞당겨 주는 워드프레스 플러그인입니다.

이 플러그인은 현재 30만 개가 넘는 사이트에 설치되어 활성화되어 있습니다. 사용자 후기를 살펴보면 잘 작동한다고 하는 사용자가 있는 반면 작동하지 않는다고 하는 사용자들도 제법 있습니다. 초기 세팅이 조금 복잡하기 때문에 설정을 제대로 하지 않으면 플러그인이 제대로 작동하지 않을 수 있습니다.

구글에서는 공식적으로는 JobPosting 또는 BroadcastEvent 페이지에만 Indexing API 사용을 권장하고 있지만, Rank Math는 테스트 결과 모든 사이트에 대하여 효과가 있는 것을 확인하여 이 플러그인을 만들게 되었다고 합니다.😄

플러그인 개요

Rank Math 팀이 개발한 무료 워드프레스 플러그인으로, 게시물을 발행하거나 수정(업데이트)할 때 Google Indexing API로 크롤링(색인 요청)을 구글로 전송합니다.
자동 및 수동 URL 제출, 최대 100개까지의 대량 제출(IndexNow는 최대 10,000개), URL 제거 요청, 인덱스 상태 확인 등의 기능을 제공합니다.

장점

신규 글이나 업데이트된 글에 대하여 구글봇(Googlebot) 크롤링을 빠르게 유도해 발행 후 노출까지 걸리는 시간을 줄일 수 있습니다.
빠르게 노출되어야 하는 뉴스, 이벤트, 한시적 프로모션 페이지 등은 빠른 색인으로 인해 혜택을 볼 가능성이 있습니다.
한 번 설정해두면 발행 시 자동 제출이 가능하므로 매번 서치 콘솔에서 수동으로 색인 요청을 하는 번거로움을 줄입니다.

단점·리스크

구글 공식 문서에 의하면 Indexing API는 JobPosting과 VideoObject 웹사이트에 임베드된 BroadcastEvent 페이지에만 사용할 것을 권장하고 있습니다. (하지만 Rank Math는 테스트한 결과 모든 사이트에 큰 효과가 있다는 것을 확인했다고 합니다.)
크롤링을 요청한다고 해서 색인이 되다는 보장은 없기 때문에, 요청을 많이 보내도 콘텐츠 품질 및 사이트 신뢰도에 문제가 있으면 색인이나 순위가 개선되지 않습니다.
대량 자동 제출 시 구글이 스팸성 요청으로 인식할 리스크가 있기 때문에 무차별적으로 대량으로 색인 요청을 하는 것은 오히려 역효과가 발생할 수 있습니다.

구글 색인 속도가 정말로 빨라질까?

워드프레스 블로그에서 글을 발행하면 구글에서 빠르게 색인이 된다면 이 플러그인은 굳이 사용할 필요가 없습니다. 색인이 잘 안 되는 경우에는 이 플러그인을 설치하여 테스트해 볼 수 있을 것입니다.

저는 개설한지 얼마 안 된 블로그에 이 플러그인을 설치하여 테스트하고 있습니다만, 며칠이 지나도 여전히 구글에서 색인이 안 되고 있습니다. 몇 주 정도 더 사용해보고 효과가 있는지에 대해 추후 공유해보겠습니다.

플러그인 설치 및 사용 방법

워드프레스 관리자 페이지의 플러그인 » 플러그인 추가에서 "Instant Indexing for Google"로 검색하여 플러그인을 설치합니다.

플러그인을 활성화한 후에 Rank Math SEO » Instant Indexing으로 이동하여 Google API Settings 탭을 클릭합니다.

Google JSON Key에 JSON 키 파일을 업로드하거나 코드를 입력해야 합니다. Read our setup guide를 클릭하여 매뉴얼의 설명에 따라 Google Cloud Platform(구글 클라우드 플랫폼)에 접속하여 새 프로젝트를 만들고 Google Indexing API 키를 설정하시기 바랍니다.

매뉴얼이 조금 복잡합니다. 순서대로 차근히 따라해 보세요.

한번 세팅하면 동일한 JSON 키 파일을 여러 사이트에 사용할 수 있는 것 같습니다.

JSON 키 코드를 Google JSON Key 섹션에 추가하고 아래의 "Submit Posts to Google"에서 게시글이 발행, 편집 또는 삭제될 때 자동으로 구글에 요청을 전송하려는 글 유형을 선택합니다.

Console 탭에서 수동으로 URL을 입력하여 색인 요청을 전송할 수 있습니다.

대량으로 색인 요청을 하는 것도 가능합니다. 한 번에 100개의 URL(한 라인에 한 개의 URL)을 입력하여 요청을 제출할 수 있습니다.

하루 전송 가능한 API 할당량이 있는 것 같습니다. 글 공개/업데이트 요청은 하루 200건까지 가능하며, 오른쪽에 남은 할당량 개수가 표시됩니다.

이렇게 설정을 하면 글을 발행하거나 업데이트하면 자동으로 색인/업데이트 요청이 전송됩니다.

글 » 모든 글에서 글 제목 위에 마우스를 올린 다음, "인스턴트 인덱싱: 페이지 제출"을 클릭하여 인덱싱 요청을 제출할 수 있습니다.

인스턴트 인덱싱 요청을 제출하면 Rank Math SEO » Instant Indexing » Console 탭으로 이동하면서 요청 결과가 표시됩니다.

위의 그림과 같이 Success가 표시되면 성공적으로 요청이 제출된 것입니다.

만약 실패로 나오는 경우에는 매뉴얼을 참고로 구글 클라우드 콘솔에서 API 설정을 체크하여 다시 API 키를 설정해보시기 바랍니다.

저는 최초 구성 후에 테스트하니 에러가 발생했습니다. 세팅을 처음부터 체크해보니 저는 Indexing API를 활성화하지 않아서 API를 활성화하니 문제가 해결되었습니다.

마치며

큰 희망을 품고 새로 블로그를 오픈했지만 몇 달 동안 구글에서 개미 한 마리 안 들어올 수 있습니다. 구글에서 색인이 안 되고 있다면 이 글에서 소개하는 플러그인을 설치하여 테스트해볼 수 있을 것입니다.

인덱싱 생성을 요청한다고 해서 색인이 되라는 보장은 없지만, 한 번 시도해보는 것이 낫지 않을까 생각됩니다.

다만, 구글에서의 세팅이 복잡하여 초보자에게는 세팅이 어렵게 느껴질 수도 있습니다. 오류가 발생하면 처음부터 다시 매뉴얼을 참고하여 하나씩 짚어가면서 문제의 원인을 찾아 해결할 수 있을 것입니다.