Google Search Console URL 검사 도구 활용: 색인 요청 에러 해결 가이드

날짜:
Google Search Console URL 검사 도구 활용: 색인 요청 에러 해결 가이드

Google Search Console URL 검사 도구 활용: 색인 요청 에러 해결 가이드

Google Search Console의 URL 검사 도구는 웹마스터가 웹사이트의 특정 URL에 대한 Google의 색인 상태를 확인하고, 문제를 해결하는 데 유용한 도구입니다. 특히 색인 요청이 거부되거나 에러가 발생하는 모든 상황을 다루고, 성공적인 색인 생성을 위한 실질적인 솔루션을 제공합니다.

1. URL 검사 도구 활용 방법

URL 검사 도구를 사용하는 방법은 간단합니다. Google Search Console에 접속하여 다음 두 가지 방법 중 하나를 선택하면 됩니다.

  1. 검색창 사용: Search Console 화면 상단의 검색창에 검사할 URL을 입력합니다. URL은 현재 열려 있는 속성에 포함되어 있어야 합니다.
  2. 링크 클릭: 대부분의 보고서에는 페이지 URL 옆에 "검사" 링크가 있습니다. 이 링크를 클릭하면 URL 검사 도구가 열립니다.

2. URL 검사 보고서 해석

URL 검사 도구를 통해 확인할 수 있는 정보는 다음과 같습니다.

  • 전체 페이지 상태: Google 검색 결과에 URL이 표시될 수 있는지에 대한 일반적인 평가를 보여줍니다. (예: URL이 Google에 등록되어 있음, URL을 Google에 등록할 수 있지만 문제가 있음, URL을 Google에서 이용할 수 없음)
  • 색인 생성 가능 여부: Google에서 페이지의 색인을 생성할 수 있는지에 대한 정보를 제공합니다.
  • 동영상 색인 생성: 페이지의 동영상에 대한 색인 생성 상태를 보여줍니다.
  • 개선사항: AMP, 리치 결과 등의 개선사항을 제시합니다.
  • 추가 응답 데이터: 렌더링된 페이지의 스크린샷, 반환된 HTML, HTTP 헤더, JavaScript 콘솔 출력, 로드된 페이지 리소스 등을 제공합니다.

3. URL 검사 도구에서 발생하는 에러 및 해결 방법

URL 검사 도구를 사용하다 보면 다양한 에러 메시지가 발생할 수 있습니다. 각 에러에 대한 원인과 해결 방법은 다음과 같습니다.

3.1. 색인 생성 문제

3.1.1. URL이 Google에 등록되어 있지 않음

원인: Google이 아직 해당 URL을 크롤링하지 않았거나, 크롤링 과정에서 문제가 발생했을 수 있습니다.

해결 방법:

  • 사이트맵 제출: Google Search Console에서 "색인 생성 > 사이트맵" 메뉴를 통해 사이트맵을 제출합니다. 사이트맵은 Google이 웹사이트의 구조와 콘텐츠를 파악하는 데 도움을 줍니다.
  • URL 색인 생성 요청: URL 검사 도구에서 "색인 생성 요청" 버튼을 클릭하여 Google이 해당 URL을 크롤링하도록 요청합니다.
  • robots.txt 파일 확인: robots.txt 파일에서 해당 URL이 Googlebot에 의해 차단되지 않았는지 확인합니다.
  • 기술적 오류 해결: 웹사이트에 404 오류, 잘못된 리디렉션 등 기술적 오류가 있는지 확인하고 수정합니다.

3.1.2. URL을 Google에 등록할 수 있지만 문제가 있음

원인: Google이 URL의 색인을 생성할 수 있지만, 몇 가지 문제로 인해 구현하려고 했던 개선사항이 표시되지 않을 수 있습니다. (예: 연결된 AMP 페이지에 문제가 있거나, 페이지에 있는 구조화된 데이터 형식이 잘못된 경우)

해결 방법:

  • URL 검사 도구의 경고 또는 오류 정보 확인: 도구에 표시된 경고 또는 오류 정보를 읽고 설명된 문제를 해결합니다.
  • AMP 페이지 문제 해결: AMP 페이지가 제대로 구현되었는지 확인하고, Google Search Console의 AMP 보고서에서 오류를 확인합니다.
  • 구조화된 데이터 검증: 구조화된 데이터가 제대로 구현되었는지, Google의 구조화된 데이터 테스트 도구를 사용하여 검증합니다.

3.1.3. URL을 Google에서 이용할 수 없음

원인: URL이 중대한 문제로 인해 Google 검색 결과에 표시될 수 없습니다. 이 경우, Google Search Console에서는 "페이지가 잘못되었거나 Google에서 인덱싱할 수 없습니다" 라는 메시지와 함께 "문제 해결 방법"을 제시합니다.

해결 방법:

  • 문제 해결 방법 확인: Google Search Console에서 제공하는 "문제 해결 방법"을 자세히 읽어 봅니다. 마치 그림책을 보듯이 그림을 보면서 설명을 읽으면 쉬울 거예요!
  • NOINDEX 태그 또는 robots.txt 규칙 확인: 페이지에 NOINDEX 태그가 있는지, 또는 robots.txt 파일에서 Googlebot이 페이지를 크롤링하지 못하도록 설정했는지 확인합니다.
  • 중복 콘텐츠 확인: Google이 다른 URL을 표준 URL로 인식하여 해당 URL의 색인을 생성하지 않을 수 있습니다. 중복 콘텐츠를 제거하거나, canonical 태그를 사용하여 표준 URL을 지정합니다.
  • 웹사이트 보안 문제 해결: 웹사이트에 해킹 또는 악성 코드 감염 문제가 있는지 확인하고 해결합니다.

3.2. 크롤링 문제

3.2.1. 크롤링 허용 여부

원인: robots.txt 파일에서 Googlebot이 페이지를 크롤링하지 못하도록 설정했을 수 있습니다.

해결 방법:

  • robots.txt 파일 수정: robots.txt 파일에서 Googlebot이 해당 URL을 크롤링할 수 있도록 허용합니다.

3.2.2. 페이지 가져오기 실패

원인: 서버 연결 오류, 서버 오류, SSL 인증서 문제 등 다양한 이유로 Googlebot이 페이지를 가져오지 못할 수 있습니다.

해결 방법:

  • 서버 설정 확인: 웹 호스팅 업체에 문의하여 서버 설정을 확인하고 문제를 해결합니다.
  • SSL 인증서 확인: SSL 인증서가 유효한지 확인하고, 필요하다면 갱신합니다.
  • 웹사이트 속도 개선: 웹사이트 로딩 속도가 느리면 Googlebot이 크롤링하는 데 어려움을 겪을 수 있습니다. 웹사이트 속도를 개선합니다.

4. 사이트 설정 수정 방법

URL 검사 도구에서 발생하는 에러를 해결하기 위해서는 웹사이트 설정을 수정해야 할 수도 있습니다. 몇 가지 중요한 설정 수정 방법을 알려드리겠습니다.

4.1. robots.txt 파일 수정

robots.txt 파일은 Googlebot이 웹사이트의 어떤 페이지를 크롤링할 수 있는지 설정하는 파일입니다. robots.txt 파일을 수정하여 Googlebot이 해당 URL을 크롤링할 수 있도록 허용해야 합니다. robots.txt 파일은 웹사이트의 루트 디렉토리에 위치하며, 다음과 같은 형식으로 작성됩니다.

User-agent: *
Disallow: /admin/
Disallow: /private/

위 예시에서 Disallow: /admin/ 및 Disallow: /private/는 Googlebot이 해당 디렉토리의 페이지를 크롤링하지 못하도록 설정한 것입니다. 해당 URL이 robots.txt 파일에서 차단되지 않았는지 확인하고, 필요하다면 Disallow 지시어를 제거합니다.

4.2. NOINDEX 태그 제거

NOINDEX 태그는 Google이 페이지의 색인을 생성하지 않도록 설정하는 태그입니다. 만약 해당 URL이 NOINDEX 태그로 설정되어 있다면, Google Search Console의 "색인 생성 가능 여부" 섹션에 "색인 생성 허용 여부: 아니오"로 표시됩니다. NOINDEX 태그를 제거해야 합니다. NOINDEX 태그는 다음과 같은 형식으로 작성됩니다.

4.3. canonical 태그 설정

canonical 태그는 중복 콘텐츠가 있는 경우 Google이 어떤 페이지를 표준 URL로 인식해야 하는지 알려주는 태그입니다. canonical 태그는 다음과 같은 형식으로 작성됩니다.

위 예시에서 https://www.example.com/standard-page.html은 표준 URL입니다. 중복 콘텐츠가 있는 경우 canonical 태그를 사용하여 Google이 표준 URL을 정확하게 인식하도록 설정합니다.

4.4. 리디렉션 확인 및 수정

잘못된 리디렉션은 Googlebot이 페이지를 크롤링하는 데 어려움을 겪게 만들 수 있습니다. URL 검사 도구를 사용하여 리디렉션이 제대로 작동하는지 확인하고, 필요하다면 수정해야 합니다. 리디렉션이 잘못 설정된 경우, Google Search Console의 "색인 생성 가능 여부" 섹션에 "사이트 전체 문제로 인해 이용 불가" 또는 "잘못된 서버 응답"과 같은 오류가 발생할 수 있습니다.

5. 추가적인 색인 문제 해결 팁

  • 웹사이트 속도 개선: 웹사이트 로딩 속도가 느리면 Googlebot이 크롤링하는 데 어려움을 겪을 수 있습니다. 웹사이트 속도를 개선하면 색인 생성 속도를 높일 수 있습니다.
  • 웹사이트 보안 강화: 웹사이트에 보안 문제가 있으면 Googlebot이 크롤링하는 것을 꺼릴 수 있습니다. 웹사이트 보안을 강화합니다.
  • 콘텐츠 품질 향상: Google은 품질이 높고 사용자에게 유용한 콘텐츠를 선호합니다. 콘텐츠 품질을 높이면 색인 생성 가능성이 높아집니다.
  • 사이트맵 제출: 사이트맵을 정기적으로 업데이트하고 Google Search Console에 제출합니다.
  • Google Search Console 모니터링: Google Search Console의 "색인 상태" 보고서를 정기적으로 확인하고, 색인 생성에 문제가 있는 URL을 파악하여 수정합니다.

6. 마무리

Google Search Console의 URL 검사 도구는 웹사이트의 색인 상태를 점검하고, 다양한 에러를 해결하는 데 유용한 도구입니다. URL 검사 도구는 웹사이트의 검색 엔진 최적화(SEO)를 개선하는 데 유용한 도구입니다. 웹마스터는 URL 검사 도구를 적극적으로 활용하여 웹사이트의 검색 성과를 향상시킬 수 있습니다.

댓글

댓글 쓰기