네이버 미수집 문의 전에 정리할 URL과 진단 자료

문의 문서와 검색 관측 자료

문의 대상은 ‘우리 홈페이지가 안 나온다’는 사이트 전체의 표현보다 실제로 조사할 문서 주소에서 시작하는 편이 명확합니다. 홈페이지 주소와 하위 진료 안내의 주소를 구분하고, 네이버에서 찾으려 했던 주소를 그대로 기재합니다. 같은 내용을 다른 주소로 제공하고 있다면 그 주소도 별도 대상으로 연결합니다. 네이버는 중복 문서가 다른 URL이나 통합검색의 다른 검색 DB에 반영되어 있을 가능성을 안내하기 때문입니다.

공식 미노출 안내의 출발점은 site 검색입니다. 네이버 검색창에서 site: 뒤에 사이트 URL을 붙여 조회했을 때 사이트가 표시되면 네이버가 사이트를 인식하고 페이지를 수집해 색인을 진행했다는 뜻으로 설명합니다. 표시되지 않는 경우에는 아직 문서를 수집하지 못했거나 수집·색인이 어려운 문서일 가능성이 있습니다. 이 구분을 사용해 관측을 적되, 보이지 않는 결과만으로 원인을 하나로 정하지 않습니다.

새 사이트라면 생성 시점도 조사 맥락에 포함할 수 있습니다. 네이버는 인터넷의 문서 수에 비해 수집 로봇이 제한되어 갱신이 충분하지 못할 수 있으며, 새 사이트의 존재를 아직 알지 못하는 경우도 있다고 설명합니다. 사이트 등록과 소유권 절차는 존재를 알리는 데 도움이 될 수 있지만 특정 문서가 언제 검색에 들어갈지 정한 일정은 아닙니다. 생성 날짜와 요청 날짜를 서로 다른 시간 정보로 제시해야 합니다.

검색창에 일반 검색어를 넣은 결과와 site 검색 결과를 섞지 않는 것도 필요합니다. 문의 문장에서 어느 방식으로 찾았는지 빠지면 상대방이 관측을 재현하기 어렵습니다. 원래 입력한 식과 표시 화면을 함께 제시하는 방법은 이 차이를 줄이기 위한 편집 제안입니다. 실제로 조회하지 않은 상태를 ‘검색되지 않음’으로 채우지 않고 자료가 없는 항목은 그 상태를 명시합니다.

차단 설정과 응답 자료의 적용 대상

미노출 안내에는 robots.txt의 수집 비허용, 문서의 noindex 메타태그, 서버 응답의 X-Robots-Tag가 원인 후보로 제시되어 있습니다. 문의 전에 각 설정이 어디에서 반환되는지 자료를 구분하면 좋습니다. robots.txt 원문, 해당 문서의 HTML, 응답 헤더는 서로 다른 자료입니다. 화면에서 보이는 본문만 보내는 것으로 서버가 전달한 지시까지 설명할 수는 없습니다.

핵심 HTML 문서에 접속할 수 있어도 페이지의 주요 리소스를 가져오지 못하면 노출에 지장이 있을 수 있습니다. 따라서 진단에서 문제가 된 자바스크립트나 CSS 주소가 있다면 대상 문서와 연결된 자료로 준비합니다. 네이버는 현대적인 검색로봇이 이러한 리소스를 허용된 웹 문서의 일부로 간주한다고 안내합니다. 어떤 파일이 차단됐는지 자료가 없는데 사이트의 구현 방식만으로 원인을 정하는 것은 피해야 합니다.

서버의 접근 제한이 검색로봇의 접속을 제한할 가능성도 공식 안내에 포함됩니다. 사람이 브라우저에서 접속한 결과와 검색로봇의 서버 접근은 구분할 필요가 있습니다. 병원의 화면 캡처만으로 검색로봇의 접속 가능 여부를 판정하지 않고, 실제 접속 진단이나 응답에서 얻은 자료를 문의에 첨부하는 방법을 권합니다. 적용한 제한과 관측한 실패가 서로 연결되는지는 원본 설정과 요청 자료에서 조사해야 합니다.

위 표는 robots.txt 파일에 검색로봇이 접근했을 때의 동작입니다. 진료 안내 문서의 오류 응답에 그대로 적용하는 표가 아닙니다. 어느 주소에서 나온 응답인지 함께 제시해야 네이버의 규칙 처리와 실제 본문 접속을 분리할 수 있습니다. 또한 HTML이나 자바스크립트를 통한 robots.txt 리디렉션은 해석하지 않는다는 조건이 있으므로 브라우저의 이동 결과만으로 파일 제공 상태를 설명하지 않습니다.

robots.txt는 사이트의 루트 위치에서 text/plain으로 접근할 수 있어야 합니다. 규칙은 동일한 호스트·프로토콜·포트 아래 페이지에만 유효합니다. 예를 들어 다른 호스트나 HTTP와 HTTPS 주소의 규칙을 같은 파일로 취급하면 문의의 대상이 달라질 수 있습니다. 실제 사이트 구성을 자료에 적는 이유는 설정을 많이 나열하려는 것이 아니라 그 규칙이 문제의 주소에 적용되는지 판단하기 위해서입니다.

수집요청 경과와 다른 반영 경로

수집요청은 네이버 수집 시스템에 URL을 전달하는 보조 기능입니다. 사용자가 제출한 개별 주소도 우선순위에 따라 처리되며 요청과 동시에 로봇이 방문하지 않습니다. 공식 안내의 최소 1일에서 몇 주라는 설명은 시스템 전달 뒤 수집에 소요될 수 있는 시간입니다. 문의 답변이 도착하는 기한이나 노출 완료 날짜로 바꾸어 적을 수 없습니다.

‘수집보류’라고 표시된 뒤에도 다른 경로를 통해 해당 URL이 수집될 수 있습니다. 이 경우 수집요청 결과에 반영되지 않는다고 네이버는 설명합니다. 그러므로 화면의 상태 변화와 실제 수집 관측이 다르다면 둘의 자료를 함께 제시해야 합니다. 요청 결과만으로 이후의 모든 로봇 방문을 부정하거나, 방문 자료 없이 처리 상태를 방문 완료로 해석하지 않습니다.

같은 URL을 매일 다시 제출할 필요는 없다는 안내도 있습니다. 반복 횟수를 늘렸다는 설명 대신 처음 전달한 주소와 시점을 명확히 하는 편이 문의의 경과를 이해하기 쉽습니다. 수집성공도 검색결과 노출을 보장하지 않습니다. 네이버는 사이트의 품질을 높이고 다른 사이트에서 콘텐츠가 인용되어 로봇이 자연스럽게 인식하고 방문하는 방향을 권장하며 인위적인 요청 처리를 우선하지 않습니다.

웹 표준에 맞지 않는 구현과 대표 URL 설정 역시 네이버가 제시한 조사 방향입니다. 현재 대표 주소를 선언한 자료가 있다면 다른 반영 주소와 함께 대조할 수 있도록 준비합니다. robots.txt에 사이트맵의 위치를 기재해 로봇이 사이트 콘텐츠를 수집하는 데 도움을 줄 수도 있다고 공식 안내는 설명합니다. 따라서 제공하는 목록의 위치를 조사 자료에 포함할 수 있습니다. 다만 사이트맵 파일 자체의 주소와 목록에 들어 있는 본문 URL은 역할이 다르므로 하나의 문의 대상으로 합치지 않습니다.

사이트 게시판의 스팸 문서나 콘텐츠 품질도 미노출 안내에서 다룹니다. 이 항목은 서버에 접근할 수 있는지를 검사한 결과와 별개의 질문입니다. 또 네이버는 수집요청을 악용하는 스팸 사이트에 대응하기 위해 요청 모니터링을 강화하고 자체 알고리즘으로 요청을 제한한다고 설명합니다. 기술 진단 결과가 정상이라는 이유로 이 별도 정책까지 충족했다고 판단하지 않습니다. 현재 게시된 콘텐츠를 읽지 않고 특정 병원을 스팸 사이트라고 표현해서도 안 됩니다.

이어서 읽을 주제

수집 상태를 조사한 뒤 어느 검색 영역에 문서가 표시되는지 구분하려면 병원 네이버 통합검색 주제를 이어서 읽을 수 있습니다.