Search Console ‘발견됨’·‘크롤링됨’·‘색인됨’ 차이와 진단 순서
발견되었으나 미색인과 크롤링되었으나 미색인의 차이를 이해하고 소규모 사이트에서 크롤 예산을 과잉 진단하지 않도록 기술·중복·가치 신호를 순서대로 확인하는 가이드입니다.
Search Console의 ‘발견됨’, ‘크롤링됨’, ‘색인됨’은 합격 점수가 아니라 Google이 URL 처리 과정에서 어디까지 진행했는지를 보여 주는 상태입니다. 상태 문구 하나만 보고 콘텐츠 저품질, 페널티 또는 크롤 예산 부족으로 단정하지 마세요. 마지막 크롤 시각과 라이브 URL, 대표 URL 선택을 함께 확인해야 합니다.
세 상태의 결정적 차이
| 상태 | 의미 | 먼저 확인할 것 |
|---|---|---|
| 발견됨, 현재 색인이 생성되지 않음 | URL은 알려졌지만 아직 크롤되지 않았을 수 있음 | 발견 경로·서버 안정성·URL 낭비 |
| 크롤링됨, 현재 색인이 생성되지 않음 | 응답을 가져갔지만 현재 색인에 포함되지 않음 | canonical·중복·본문 가치·렌더링 |
| 색인됨 | 검색 결과 후보로 저장됨 | 검색어·노출·클릭과 대표 URL |
‘색인됨’도 특정 검색어 노출을 보장하지 않습니다. URL 검사 상단 결과는 마지막 색인 데이터이며 라이브 테스트는 현재 접근 가능성을 확인하는 별도 검사입니다.
1단계: URL 자체가 대표 주소인지 확인합니다
- 200 상태인지, 불필요한 리디렉션 체인이 없는지
- 메타 robots와 HTTP 헤더에
noindex가 없는지 - 작성자 canonical이 현재 URL 또는 의도한 대표 URL을 가리키는지
- Google 선택 canonical이 다른 페이지라면 중복 이유가 무엇인지
- 쿼리 파라미터·태그·인쇄·첨부 페이지가 같은 내용을 복제하지 않는지
2단계: 발견 경로와 내부 링크를 봅니다
사이트맵에만 존재하고 어느 페이지에서도 연결되지 않는 URL은 사용자와 검색 시스템 모두에게 중요도를 이해시키기 어렵습니다. 홈, 카테고리, 주제 허브와 관련 문서에서 설명적인 링크로 연결합니다. 사이트맵의 URL은 canonical 형식과 정확히 일치시킵니다.
3단계: 서버와 렌더링을 확인합니다
| 검사 | 문제 신호 | 조치 |
|---|---|---|
| HTTP | 간헐적 5xx·429·느린 응답 | 로그·가용성·캐시 점검 |
| robots | Googlebot 또는 필수 리소스 차단 | 규칙과 렌더링 비교 |
| JavaScript | 초기 HTML에 본문·링크가 없고 렌더링 실패 | 서버 렌더링·리소스 오류 수정 |
| 모바일 | 모바일 버전에서 콘텐츠가 축소·누락 | 모바일 결과를 기준으로 일치 |
4단계: 크롤링됨 미색인은 중복과 해결 가치를 봅니다
같은 질문에 답하는 문서가 여러 개면 새 URL을 더 만들기보다 대표 문서로 병합하거나 역할을 구분합니다. 도입부에서 질문에 직접 답하고, 공식 근거·실제 절차·예외·검증 방법을 추가합니다. 단순 분량 확장은 해결책이 아닙니다.
5단계: 발견됨 미색인은 사이트 규모를 고려합니다
크롤 예산 고급 문제는 주로 수만~수백만 URL 또는 매우 빠르게 변하는 사이트에서 중요합니다. 작은 사이트는 먼저 사이트맵, 내부 탐색, 서버 오류, 파라미터·태그·검색 결과 페이지처럼 불필요한 URL 생성을 점검하는 편이 낫습니다.
수정 후 검증 순서
- 라이브 URL 테스트로 현재 접근·렌더링을 확인합니다.
- 페이지 소스와 헤더에서 canonical·robots를 확인합니다.
- 사이트맵과 내부 링크를 대표 URL로 통일합니다.
- 중요한 변경 뒤 한 번 색인 생성을 요청합니다.
- 보고서의 마지막 크롤 날짜와 상태 변화를 주간 단위로 기록합니다.
색인 제외가 의도된 URL인지 먼저 분류합니다
필터·검색 결과·로그인·장바구니·중복 인쇄 페이지처럼 검색에 필요하지 않은 URL은 색인되지 않는 것이 정상일 수 있습니다. 모든 미색인 URL을 0으로 만드는 목표보다 색인되어야 하는 대표 페이지가 빠짐없이 포함되는지를 확인합니다. 의도된 제외와 수정할 오류를 별도 목록으로 관리하세요.
상태 변화보다 대표 URL의 일관성을 봅니다
리디렉션, canonical, 내부 링크와 사이트맵이 서로 다른 URL을 가리키면 Google이 대표 주소를 다시 판단하는 시간이 길어질 수 있습니다. HTTP와 HTTPS, www 유무, 끝 슬래시, 대소문자와 파라미터 규칙을 한 가지로 정하고 모든 신호를 통일합니다.
새 글의 ‘발견됨’ 상태를 즉시 저품질로 판정하지 마세요
Google은 URL을 발견했어도 아직 내용을 가져오지 않았을 수 있습니다. 반대로 크롤링이 완료됐다는 뜻이 곧 검색 색인에 포함됐다는 뜻은 아닙니다. Google 공식 크롤링·색인 FAQ도 URL의 크롤링·색인 시점을 보장할 수 없다고 설명합니다.
진단할 때는 해당 URL이 사이트맵에 있는지만 보지 말고 정상적인 내부 링크로 연결되는지, 같은 내용을 가진 URL을 또 제공하지 않는지와 서버가 반복해서 오류를 내지 않는지 확인해야 합니다. 자신이 지정한 canonical이 Google이 선택한 대표 URL과 다를 수도 있습니다.
특정 URL이 제외됐다는 이유만으로 전체 도메인이 제재를 받았다고 결론 내릴 수 없습니다. 상위 페이지의 실제 색인 상태와 검색 실적, 제외된 페이지의 목적을 나누어 살펴봐야 합니다.
공식 확인 자료
진단의 핵심은 상태 문구를 번역하는 데서 끝나지 않고 URL 발견, 접근, 렌더링, 대표 URL과 콘텐츠 역할 중 어느 단계가 막혔는지 확인하는 것입니다.
Search Console의 ‘발견됨’과 ‘크롤링됨’ 상태는 모두 아직 색인되지 않았다는 결과를 나타낼 수 있지만 관찰한 단계가 다릅니다. 먼저 대표 URL이 정상 응답을 반환하는지, robots 설정이 접근을 제한하는지, 중복 문서와 canonical이 존재하는지 확인하세요. 보고서 갱신은 실시간이 아니므로 수정 직후 상태가 그대로여도 즉시 차단이나 제재가 확정됐다고 판단해서는 안 됩니다.