페이지 색인 생성되지 않는 오류 해결하기

구글 색인 생성 관련하여 운영하고 있는 사이트의 페이지가 색인 생성되지 않은 이유 세부 항목들에 대하여 서치 콘솔 도우미를 통하여 사이트 페이지가 색인 생성되지 않는 이유는 무엇이며 색인 생성되지 않는 오류를 해결하기 위하여 어떻게 검토 조치를 해야 하는가에 대하여 알아보겠다.

 

사이트 규모가 커짐에 따라 색인이 생성된 유효 페이지 수가 점진적으로 증가되는 것은 정상일 것이므로 페이지 색인이 생성되지 않는 이유를 안다는 것은 개선할 오류를 해결할 수 있으므로 사이트 운영에 도움이 될 수 있기 때문이다.

 

반응형

 

페이지 색인 생성되지 않는 오류 해결하기

 

색인 생성이 되지 않았다고 하여 반듯이 오류는 아니라고 하고 있으므로 해결할 오류인지를 알기 위해서는 각 항목에 대한 이해가 필요할 것이다. 이에 대하여 페이지 색인 생성 페이지 항목에 대하여 좀 더 알아보겠다.

 

사이트의 규모가 커지면 색인이 생성된 유효한 페이지가 점진적으로 늘어나야 하며 급격한 변화가 있으면 문제 해결 섹션을 참조하여 중요 페이지가 표준 버전의 색인이 생성되도록 하고 중복 대체 페이지가 색인 생성되지 않도록 하라고 주문하고 있다.

 

소스(출처) 표시는 문제 원인이 구글 시스템인지 웹사이트인지를 보여주는 것으로 웹사이트로 표시된 것을 해결할 수 있으며, 유효성 검사 상태가 실패 또는 시작되지 않음의 문제에 대하여 우선 해결하라고 하고 있다.

 

[구글 시스템 문제]

1. 크롤링됨-현재 색인이 생성되지 않음

→ 크롤링했으나 색인 생성이 되지 않은 것으로 이후 색인이 될 수도 있고 안될 수도 있으며 크롤링을 위해 다시 url 제출할 필요는 없다고 한다.

 

2. 발견됨-현재 색인이 생성되지 않음

→ 페이지가 발견되었으나 사이트 과부하 등의 이유로 크롤링 일정을 변경하여 아직 크롤링되지 않은 것이다.

 

3. 중복 페이지, google에서 사용자와 다른 표준을 선택함

→ 구글에서 다른 Url을 더 나은 표준으로 보아 색인 생성한 것으로 해당 페이지가 표준 Url의 중복임을 명시적으로 표시하는 것이 좋다고 한다.

표준 페이지 확인은 url 검사도구를 사용하여 확인할 수 있다.

 

*표준 페이지 지정 관련 도움말을 참조하면 될 것이다.

(*https://developers.google.com/search/docs/advanced/crawling/consolidate-duplicate-urls?visit_id=21665118039719-5177640350976650941&rd=1)

 

중복 대체 페이지가 생기면 구글에서 표준 페이지를 발견하고 색인을 생성했다는 의미로서 구글 입장에서는 좋은 결과라고 한다. 사이트 운영자 입장에서는 페이지가 중복되는 글들이 발행되지 않도록 주의가 필요할 것이다

 

위 3가지 항목은 누구나 해당되는 문제로 보인다. 색인이 안되면 노출도 없을 것이므로 신경이 쓰이는 문제이어서 가끔 검사 도구를 이용하여 색인 생성 재 요청을 하고 있으나 결과에 대해서는 자연스럽게 색인이 된 것인지 색인 요청을 다시 한 결과로 색인이 된 것인지는 알 수 없었지만 시간이 경과되면 색인이 됨을 알 수 있었다.

 

[웹사이트 문제]

1. 적절한 표준 태그가 포함된 대체 페이지

→ 구글에서 표준으로 인식하는 페이지와 중복된 페이지로 표준 페이지로 연결되므로 별도 조치할 필요는 없다고 한다.

 

2. 사용자가 선택한 표준이 없는 중복 페이지

→ 중복된 페이지가 있지만 표준으로 표시된 페이지가 없는 것으로 표준으로 지정해야 한다. Url을 검사하면 구글에서 선택한 표준 Url이 표시된다.

 

3. robots.txt에 의해 차단됨

→ *robots.txt 테스터로 차단 여부를 확인 후 색인 생성 차단을 하려면 robots.txt 차단을 삭제하고 'NOINDEX' 명령어를 사용하여 차단한다.

*robots.txt 테스터

 

4. 찾을 수 없음(404)

→ 다른 사이트를 통하여 발견되었거나 이전에 있던 페이지가 삭제된 경우로서 404 응답이 의도적인 경우 문제가 되지 않으며 페이지가 이동된 경우면 새 페이지로 3xx로 리디렉션을 반환하라고 한다.

 

5. 다른 4xx문제로 인해 차단됨

→ Url 검사도구를 사용하여 페이지를 디버깅해 보라고 하고 있다.

 

오류 또는 경고의 모든 사례를 수정한 후 수정 결과 확인을 클릭하여 구글에 문제 확인하였음을 알리면 된다.

 

크롤링은 되었으나 색인이 생성되지 않았거나 페이지가 발견되었음에도 색인이 생성된 것이 아니라면 시간을 두고 기다렸다가 필요하면 다시 Url 검사 도구를 사용하여 색인 생성을 요청함이 필요할 것이라고 판단된다.

 

[사진=구멍]

 

google의 표준 인식 페이지와 중복되어 있는 페이지의 경우는 별도 조치가 필요 없다는 것과 색인 생성을 원하지 않는 경우에는 robots.txt를 이용하여 차단할 것이 아니라 NOINDEX를 이용하여 차단하는 것이 올바른 방법임을 알 수 있다.

자세한 설명과 문제 해결방법은 색인 생성 도움말을 통하여 해결하기 바란다.