수집과 색인의 어느 단계인지 읽기
서치어드바이저에서 수집 현황을 읽을 때에는 수집제한, 색인제외, SEO를 같은 실패로 묶지 않습니다. 네이버 사이트 진단은 검색 로봇이 콘텐츠를 수집하고 검색엔진이 색인을 만드는 과정의 문제를 제공하는 보고서입니다. 어느 단계의 상태인지 나누고 해당 URL의 실제 응답과 공개 의도를 대조해야 수정 대상을 정할 수 있습니다.
사이트 진단의 색인은 정상적으로 수집해 색인된 문서의 개수입니다. 수집제한은 페이지 상태 때문에 수집 과정에서 제한된 문서의 수이며, 색인제외는 수집은 정상적으로 처리됐지만 색인 단계에서 제외된 수입니다. SEO는 수집된 문서 중 검색엔진 최적화가 필요한 문서의 개수입니다. 이 정의를 먼저 읽으면 수치가 많다는 이유만으로 같은 작업을 모든 문서에 적용하는 판단을 피할 수 있습니다.
| 사이트 진단 유형 | 정보가 가리키는 단계 | 개별 주소 자료 |
|---|---|---|
| 색인 | 수집 후 색인 처리 | 진단에서 개별 URL 제공하지 않음 |
| 수집제한 | 검색 로봇의 수집 과정 | 유형별 URL 세부정보 |
| 색인제외 | 수집 뒤 색인 과정 | 유형별 URL 세부정보 |
| SEO | 수집된 문서의 최적화 요소 | 유형별 URL 세부정보 |
수집제한에는 개발자가 의도한 robots.txt, 3xx, 4xx 상태도 포함될 수 있다고 네이버는 안내합니다. 공개하지 않으려는 주소를 차단한 것인지, 공개하려는 진료 안내에 접근 문제가 생긴 것인지 구별해야 합니다. 리포트에 있다는 사실만으로 모든 차단을 해제하지 않습니다. 기존 주소를 이동시키거나 삭제하려는 의도와 실제 동작이 일치하는지 읽습니다.
색인제외의 대표 유형으로는 대표 URL 문제, HTML 내용이 없거나 소프트 404인 페이지가 소개됩니다. 네이버는 이 단계에서 HTML 마크업의 문제 외에도 내부 정책에 따라 스팸 문서와 불용 문서를 제외한다고 설명합니다. 특정 병원의 제외 원인이 스팸이라고 단정할 자료는 이 일반 설명에 없습니다. 해당 유형과 실제 URL의 콘텐츠를 대조해야 합니다.
URL 검사의 세 정보 구간을 대조하기
사이트 진단에서 유형별 주소를 읽은 뒤 개별 문서의 상태는 URL 검사로 대조할 수 있습니다. 네이버의 URL 검사에는 색인, Meta, SEO가 분리된 테이블로 제공되며 각 항목의 데이터가 있을 때만 해당 테이블이 표시됩니다. 구간을 선택하면 하단에 상세 내용이 나타난다는 설명입니다. 정보가 표시되지 않는 상태를 별도 자료 없이 문서가 정상이라는 뜻으로 해석하지 않습니다.
색인 구간은 URL 상태 코드와 수집 여부, 색인 가능 여부, 색인 여부를 제공합니다. 실제 진료 문서의 응답 상태와 수집 처리, 색인 처리를 나누어 읽습니다. 페이지가 브라우저에서 열린다는 사실만으로 네이버가 수집한 상태를 대신할 수 없습니다. 로봇이 읽은 URL과 지금 대조하는 URL이 같은 문서인지, 이전 주소에서 이동한 것은 아닌지도 실제 주소를 기준으로 검토합니다.
Meta 구간은 HTML에 삽입된 메타 정보를 제공하고 제목과 설명문의 추출 가능 여부를 표시합니다. 이는 색인 여부와 다른 질문입니다. 화면에 원하는 제목이 보인다는 사실만으로 HTML에서 같은 제목이 제공된다고 판단하지 않고 추출된 내용과 실제 소스를 대조합니다. 제목이나 설명을 고치는 선택은 현재 문서가 안내하는 내용과 맞는지 함께 검토해야 합니다.
SEO 구간은 수집과 색인에 영향을 주는 최적화 요소를 다룹니다. 네이버는 중요도를 반드시 수정, 수정하면 좋음, 유지해도 좋음으로 구분해 표시한다고 안내합니다. 상태 아이콘과 각 요소의 내용을 읽어 실제 작업 대상을 정합니다. 색이 표시된다는 사실만 보고 모든 항목을 같은 긴급 오류로 정하지 않고 요소별 의미를 대조합니다.
사이트 진단에서 SEO의 대표 유형은 제목·설명문 문제와 리소스 접근 문제입니다. 문장의 작성 상태와 파일에 접근할 수 있는 상태는 수정 방법이 다를 수 있습니다. 진료 설명을 길게 추가하는 작업이 누락된 리소스의 접근을 해결하는지 판단하려면 그 리소스의 실제 응답을 읽어야 합니다. 문제의 이름을 내용 부족이라는 하나의 원인으로 바꾸지 않습니다.
색인 수가 특정 시점에서 줄면 네이버는 수집 문서 수의 감소, 로봇 메타태그의 noindex, 콘텐츠 가이드라인 준수 여부를 고려하도록 안내합니다. 수집 문서가 이전보다 급격하게 줄면 색인 대상 자체도 줄어들 수 있다는 설명입니다. 이 조건은 색인 단계만 고치는 작업으로 해결할 문제인지 판단하는 근거가 됩니다. 실제 감소가 있는 사이트라면 이전 수집량과 현재 마크업을 각각 대조하며, 세 원인이 모두 발생했다고 주장하지 않습니다.
수집제한의 대표 유형은 리디렉션 문제, robots.txt 문제, HTTP 프로토콜 문제로 나뉩니다. 유형별 진단 정보를 클릭하면 개별 유형의 추이와 URL 목록을 함께 읽을 수 있다는 안내입니다. 전체 수의 증가를 읽은 뒤에는 어떤 유형의 추이가 달라졌는지와 그 목록이 가리키는 주소를 연결해 원인 후보를 좁힐 수 있습니다. 수집제한 전체를 하나의 설정 오류로 묶어 고치지 않고 보고서에 제공된 분류부터 적용합니다.
보고서의 분석 기간과 요청 시점을 구분
사이트 진단은 최근 90일 동안 수집된 페이지로 분석하며 수집과 분석이 완료되어야 페이지 업데이트 결과가 반영된다고 안내합니다. 웹사이트를 수정한 시각과 리포트가 그 내용을 보여 주는 시각은 다를 수 있습니다. 원고나 설정을 바꾼 직후에도 이전 상태가 남아 있다면 해당 URL이 다시 수집됐는지와 분석이 끝났는지를 구별해 읽습니다.
진단 이력은 기간 동안 네이버가 일별 스냅샷으로 저장해 분류한 URL의 변동량입니다. 색인량은 선 그래프, 수집제한과 색인제외는 막대그래프로 표현된다는 설명입니다. 기간 중 색인량이 바뀌는 흐름과 특정 유형의 주소가 어떤 문제를 갖는지는 다른 정보입니다. 그래프의 감소만으로 하나의 진료 페이지가 검색에서 사라졌다고 단정하지 않습니다.
| 시간 자료를 대조할 질문 | 읽을 기준 |
|---|---|
| 수정 내용이 진단에 반영됐는가 | 수집·분석 완료 이후의 결과 |
| 기간 중 어떤 상태 수가 달라졌는가 | 진단 이력의 일별 스냅샷 |
| 검색 화면과 진단의 수가 같은가 | 현재 노출 결과와 통계 추출 시점 |
| 수집 요청을 하면 즉시 방문하는가 | 우선순위에 따른 처리 |
| 요청 처리 외 경로에서 수집됐는가 | 요청 결과와 실제 수집 정보의 구별 |
네이버는 URL 검색이 현재 색인 결과만 보여 주므로 기간별 색인 수의 증감을 알 수 없다고 설명합니다. 기간 변화는 사이트 진단으로 읽고, URL 검색 결과와 통계가 서로 다를 수 있다는 조건을 함께 적용합니다. 진단은 검색엔진이 주기적으로 색인할 시점에 통계를 추출하기 때문입니다. 서로 다른 시점의 숫자를 같아야 하는 값으로 정해 오류를 만들지 않습니다.
수집 요청은 검색 로봇이 미처 방문하지 못한 주요 웹페이지의 URL을 수집 시스템에 전달하는 기능입니다. 네이버는 우선순위에 따라 동작하므로 요청해도 로봇이 실시간으로 방문하지 않는다고 설명합니다. 시스템에 전달된 뒤 최소 하루에서 몇 주까지 걸릴 수 있으며 동일 URL을 매일 반복 제출할 필요가 없다고 안내합니다. 이를 모든 주소가 정해진 날짜에 처리된다는 기한으로 단정하지 않습니다.
처리 결과가 수집보류로 바뀌어도 로봇이 다른 경로로 해당 URL을 수집할 수 있다고 네이버는 설명합니다. 이 경우 수집요청 결과에는 반영되지 않는다는 조건이 있습니다. 요청 화면의 상태만으로 실제 수집이 전혀 없었다고 보고하지 않습니다. URL 검사에서 읽는 수집 정보와 요청한 경로의 결과를 각각 구분해야 합니다.
수집요청은 제한된 범위에서 실행할 수 있고 요청 URL의 방문·수집 과정에는 큰 비용이 발생한다고 공식 문서는 설명합니다. 네이버는 사이트 품질과 다른 사이트의 콘텐츠 인용을 통해 로봇이 자연스럽게 방문하는 수집을 권장합니다. 사이트의 모든 주소를 반복 요청하는 작업을 진단 개선의 필수 과정으로 정하지 않습니다. 중요한 변경이 있는 문서와 실제 필요한 요청을 구별합니다.
수집 현황 해석의 추가 질문
사이트 진단 리포트가 비어 있으면 어디부터 읽나요?
네이버는 소유확인 후 어뷰징 이력이 없고 활성화돼 다수 콘텐츠를 보유한 사이트라도 보고서 생성에 최소 일주일 정도 걸린다고 안내합니다. 최소 한 개 이상의 콘텐츠가 수집돼야 한다는 조건도 있습니다. 화면이 비었다는 사실만으로 사이트의 모든 콘텐츠가 제외됐다고 단정하지 않습니다.
세부 URL을 내려받으면 모든 주소가 포함되나요?
사이트 진단은 최신일 기준 최대 2,000개의 URL 목록을 다운로드할 수 있다고 안내합니다. 해당 범위와 기준일을 읽고 내려받은 목록을 사이트의 전체 주소로 간주하지 않습니다. 목록에 특정 주소가 없다는 사실만으로 그 문서의 수집 상태를 확정하지 않고 개별 자료를 대조합니다.
수집성공이면 검색에 반드시 표시되나요?
네이버는 수집성공이어도 검색결과 노출을 보장하지 않는다고 명시합니다. 수집 과정의 성공과 검색어에 적합한 결과로 표시되는 것은 서로 다른 질문입니다. 성공한 요청의 수를 검색에 노출된 진료 페이지 수나 실제 방문자 수로 바꾸어 보고하지 않습니다.
검색에서 제외하려는 주소도 다시 수집 요청하나요?
네이버의 검색 제외는 특정 콘텐츠를 색인에서 제외하는 별도 기능이며 재색인을 거쳐야 해 실시간으로 반영되지 않습니다. 안내는 원본 삭제와 로봇 접근 시 404 응답을 먼저 검증한 뒤 삭제 대상 URL을 입력하도록 설명합니다. 공개 의도와 필요한 기능을 구분하며 단순히 리포트 숫자를 줄이려고 삭제하지 않습니다.
수집 요청 기능이 제한되는 별도 조건도 있나요?
네이버는 대량의 스팸 사이트 등록과 요청 악용을 막기 위해 모니터링을 강화하고 자체 알고리즘으로 스팸으로 판단된 사이트의 요청을 제한한다고 설명합니다. 이는 수집 요청 기능의 악용 대응 조건입니다. 병원의 요청이 지연된다는 사실만으로 이 제한을 받은 사이트라고 판정할 수는 없습니다.