의료진 상세페이지를 로그인 뒤로 옮길 때 검색 접근의 변화

공개 소개와 제한 정보를 구별하기

공개 범위를 정하는 일은 병원의 실제 자료와 책임자의 판단이 필요한 편집 업무입니다. 의료진 페이지라는 이름만으로 모든 내용을 공개하거나 모두 제한하도록 정할 수는 없습니다. 실제 소개에서 어떤 정보를 검색 이용자에게 제공할지 결정한 자료가 없다면 경력이나 진료 안내를 임의로 추가하지 않습니다. 인증이 필요한 정보를 공개 소개의 분량을 늘리는 데 사용하는 방식도 피해야 합니다.

검색 대상 소개를 별도 공개 페이지에 남기는 편집안이라면 그 문서만 읽고 이해할 수 있는 설명 범위를 정해야 합니다. 로그인 뒤의 내용을 검색 이용자도 이미 읽었다고 가정한 짧은 제목만으로는 실제 공개한 소개를 판단하기 어렵습니다.

비밀번호 보호와 크롤링 규칙의 역할

robots.txt는 크롤러가 접근할 URL을 알리는 파일이며 주로 크롤러 요청으로 서버가 과부하되는 일을 방지하는 데 사용됩니다. Google은 이를 웹페이지를 검색에서 숨기는 수단으로 사용하지 말라고 안내합니다. 병원이 인증을 요구하도록 바꾼 정보의 보호 목적과 검색로봇의 요청 관리 목적을 같은 설정으로 설명하지 않는 조건입니다.

robots.txt 규칙은 강제할 수 없으며 이를 따르는 크롤러가 접근하지 않도록 요청하는 방식이라고 Google은 설명합니다. 다른 크롤러가 규칙을 무시할 수도 있으므로 기밀 정보를 보호하려면 비밀번호 등 다른 방법을 사용하도록 안내합니다. 의료진 소개의 어느 부분이 제한 정보인지는 병원이 정하되, 크롤링 차단만 적용하고 그 정보가 비공개가 됐다고 결론 내리지는 않습니다.

상태 코드와 실제 받은 내용을 함께 읽기

로그인 전의 응답을 조사할 때는 상태 코드와 함께 실제 반환한 본문을 읽어야 합니다. 성공 응답이 왔다는 사실만으로 의료진의 원래 소개가 공개된다고 해석할 수는 없습니다. Google은 200 응답에서 수신한 내용을 다음 처리 단계로 전달한다고 설명합니다. 서버가 전달한 내용이 인증 화면이라면 조사 대상은 그 화면이며, 계정으로 들어간 뒤 읽은 소개를 같은 응답의 내용으로 바꿔 설명하면 안 됩니다.

Google은 접근할 수 없지만 검색결과에 표시하려는 페이지를 조사할 때 Search Console의 페이지 색인 생성 보고서와 크롤링 통계 보고서를 모두 사용하도록 안내합니다. 보고서마다 URL 정보가 다를 수 있다는 설명도 있습니다. 의료진 상세페이지의 공개 접근을 조사할 때 개별 응답을 읽는 일과 보고서에서 접근 문제의 범위를 찾는 일을 연결할 수 있습니다. 한 보고서의 표시를 다른 보고서에도 동일하게 제공되는 정보라고 가정하지 않습니다.

Google의 HTTP 안내는 성공 응답이라도 내용이 빈 페이지나 오류 메시지라면 소프트 404로 보고할 수 있다고 설명합니다. 따라서 성공 코드와 충분한 문서 내용은 별개의 조사 대상입니다. 인증 화면이 모두 소프트 404라는 결론도 이 안내에서 나오지 않습니다. 병원 주소의 실제 응답과 Search Console이 제공한 상태를 읽어야 어떤 내용이 처리됐는지 판단할 수 있습니다.

인증과 빈 응답을 구별하는 코드

제한 응답의 내용을 검색 소개로 계산하지 않기

Google은 4xx 응답으로 받은 콘텐츠를 사용하지 않으며 해당 응답의 내용을 무시한다고 설명합니다. 인증 과정에서 이런 응답을 반환했다면 본문에 의료진 소개 문장을 함께 넣었다는 이유만으로 그 내용이 색인될 것이라고 판단할 수 없습니다. 병원 시스템이 어떤 응답을 실제로 반환하는지 조사한 뒤 해당 조건을 적용해야 합니다.

이전에 사용하던 URL이 4xx를 반환하면 Google 시스템은 시간이 지남에 따라 그 URL 사용을 중지한다고 HTTP 문서는 설명합니다. 이미 색인된 주소도 삭제될 수 있는 처리 조건입니다. 인증 제한으로 바꾸는 순간 기존 검색 결과가 즉시 사라진다는 시간표를 이 설명에서 만들지는 않습니다. 실제 검색 화면의 관측 시점과 문서를 다시 처리한 결과는 구별할 필요가 있습니다.

같은 문서는 크롤링 속도를 제한하려고 401이나 403을 사용하지 말라고 안내합니다. 병원의 공개 범위 결정에 따라 인증을 요구하는 일과 검색로봇의 방문 빈도를 조절하는 일은 목적이 다릅니다. 요청이 많다는 이유로 권한 응답을 도입한 뒤 이를 정상적인 속도 관리 조치라고 설명할 수는 없습니다. 이 조건은 특정 병원의 서버 과부하를 추정하는 근거도 아닙니다.

현재 페이지를 조사하는 실시간 검사의 조건

Search Console의 실시간 URL 검사는 현재 URL을 가져와 검사하는 기능입니다. Google은 색인이 아직 생성되지 않았거나 실패한 페이지도 테스트할 수 있지만 로그인 요구사항 없이 인터넷에서 접근할 수 있어야 한다고 설명합니다. 공개 범위를 바꾼 뒤 조사할 수 있는 대상이 무엇인지 정하는 조건이며, 병원 계정의 암호를 검사 도구에 제공해 제한 본문을 읽히는 절차가 아닙니다.

도구에서는 Google 색인 결과와 실시간 테스트 결과를 전환해 읽을 수 있습니다. 인증 설정 등 현재 페이지를 바꾼 내용이 아직 색인에 반영되지 않았다면 두 결과의 상태가 다를 수 있다고 문서는 안내합니다. 과거에 공개된 소개의 정보와 현재 접근 가능한 내용이 같다고 가정하지 않고 각각 어떤 버전의 결과인지 읽어야 합니다.

실시간 검사는 리디렉션을 먼저 따른 다음 페이지를 테스트하지만 리디렉션을 따랐다는 사실과 테스트한 최종 URL이 화면에 나타나지 않는다고 Google은 설명합니다. 상세페이지 요청이 다른 주소로 이동하는 병원 시스템이라면 이 제공 한계를 알아야 합니다. 검사 결과에 원래 입력 주소가 있다는 이유만으로 그 주소의 소개 본문을 그대로 가져왔다고 결론 내리지 않는 조건입니다.

크롤링된 페이지 보기에서는 원시 HTML, HTTP 헤더, 자바스크립트 콘솔 출력과 로드된 리소스 같은 추가 응답 정보를 조사할 수 있습니다. 의료진 페이지의 접근을 읽을 때 실제 전송한 문서와 필요한 파일이 무엇이었는지 구별할 자료입니다. 다만 색인된 결과의 추가 응답 정보는 URL이 등록됐거나 등록됐지만 문제가 있는 상태에서만 제공된다는 표시 조건도 있습니다.

공개 문서가 갖춰야 하는 별도 내용 조건

Google의 최소 기술 요구사항에는 접근 가능 여부와 작동하는 페이지 외에 색인 생성 가능한 콘텐츠가 포함됩니다. Google이 지원하는 파일 형식의 텍스트 콘텐츠와 스팸 정책 준수를 요구합니다. 로그인 요구를 해제했다는 변경 한 가지만으로 공개 소개의 내용 조건까지 충족했다고 계산하지 않고, 실제 공개 문서의 텍스트를 대상으로 조사해야 합니다.

Google은 최소 요구사항을 충족한 페이지라도 색인이 생성되는 것은 아니라고 명시합니다. 실시간 검사 역시 Google-InspectionTool의 접근 가능 여부를 조사하는 기능이므로 유효한 결과가 실제 색인을 뜻하지 않습니다. 병원이 공개 소개를 남기기로 결정하고 기술 조건을 정비한 상태와 그 소개가 검색에서 처리된 상태를 따로 판단할 근거입니다.

robots.txt로 차단한 주소는 다른 페이지에서 연결하면 Google이 방문하지 않고도 URL을 색인할 수 있다고 공식 안내는 설명합니다. 그러므로 주소가 검색에 나타난 관측만으로 제한된 의료진 본문이 읽혔다고 해석할 수는 없습니다. URL 표시와 본문 접근을 구별하는 전제로 적용하며, 비공개 범위 자체는 병원 자료와 인증 설정을 대상으로 판단해야 합니다.

실시간 검사만으로 판단할 수 없는 항목

이어서 읽을 주제

AI 크롤러가 사이트에 접근하게 하는 설정을 알아보려면 AI 크롤러 접근 설정에서 이어서 읽을 수 있습니다.