Google 색인에서 사이트 또는 그 단편을 삭제하는 방법
Google에서 채택한 색인 생성의 개념에 따르면,정보의 완전성, 객관성 및 결과가 주어질 때 검색 질의와의 일치 여부가 고려됩니다. 불법 콘텐츠가 포함 된 사이트가 색인에 들어가거나 스팸 용 콘텐츠 인 경우 해당 사이트의 페이지는 검색 엔진의 일반 데이터베이스에 표시되지 않습니다. 검색 결과를 통해 서버에서 사이트를 삭제하는 방법을 배우는 것이 중요합니다.
Google의 색인 생성 옵션 제로
크롤러가 수집 프로그램이되면새로운 리소스에 대한 정보 - 페이지 단위로 사이트를 검색 한 다음 구문 분석과 관련된 Google의 정책 요구 사항을 충족하는 경우 색인이 생성됩니다. 그러나 우리는 robots.txt를 사용하여 검색 엔진에 대한 귀하의 사이트 또는 개별 조각을 삭제하는 방법을 설명합니다 - 포인터와 동시에 검색 종결 자.
전체 리소스를 발급에서 제외하려면,사이트가 위치한 서버의 루트 폴더는 앞서 언급 한 robots.txt와 같은 특정 텍스트 영역을 만듭니다. 이 영역은 검색 엔진에 의해 처리되며 읽은 지침에 따라 작동합니다.
Google 검색 엔진사용자가 볼 수 없더라도 페이지를 색인화하십시오. 브라우저가 401 또는 403에 응답하면 "액세스가 유효하지 않습니다"라는 것은이 검색 서버의 수집 프로그램이 아니라 방문자에게만 적용됩니다.
검색 색인에서 사이트를 삭제하는 방법을 이해하려면 텍스트 포인터에 다음 행을 입력해야합니다.
사용자 에이전트 : Googlebot
Disallow : /
이것은 검색 로봇에게 사이트의 전체 내용에 대한 색인을 생성 할 수 없다는 것을 나타냅니다. 사이트가 감지 된 사이트 목록의 리소스를 캐시하지 않도록 Google 사이트를 삭제하는 방법은 다음과 같습니다.
다른 프로토콜에 대한 스캔 옵션
개별 표준을 나열해야하는 경우예를 들어 하이퍼 텍스트 프로토콜 http / https와 별도로 Google 색인 생성을위한 특정 규칙을 적용하려는 링크 인 경우 robots.txt에 다음과 같이 작성해야합니다 (예).
(http://yourserver.com/robots.txt) - 사이트의 도메인 이름 (any)
사용자 에이전트 : * - 모든 검색 엔진 용
허용 : / - 전체 색인 생성 허용
https 프로토콜에 대한 문제에서 사이트를 완전히 제거하는 방법
(https://yourserver.com/robots.txt) :
사용자 에이전트 : *
Disallow : / 전체 색인 생성 금지
Google 검색 결과에서 리소스의 URL을 신속하게 제거합니다.
다시 색인 생성을 기다리지 않으려면최대한 빨리 사이트를 숨기고 서비스 http://services.google.com/urlconsole/controller를 사용하는 것이 좋습니다. Pre-robots.txt는 이미 사이트 서버의 루트 디렉토리에 있어야합니다. 관련 지시 사항을 자세히 설명해야합니다.
어떤 이유로 포인터를 사용할 수없는 경우루트 디렉토리에서 편집하려면 검색 엔진에서 숨길 필요가있는 객체가있는 폴더에 폴더를 만드는 것으로 충분합니다. 이 작업을 수행하고 하이퍼 텍스트 주소 자동 삭제 서비스를 참조하는 즉시 Google은 robots.txt에서 제거하도록 등록 된 폴더를 검색하지 않습니다.
이러한 불가시의 기간은 3 개월로 설정됩니다. 이 기간이 만료되면 문제에서 철회 한 카탈로그는 Google 서버에서 다시 처리됩니다.
~하려면부분 스캔을 위해 사이트를 제거하는 방법
검색 봇이 로봇의 내용을 읽을 때.txt이면 특정 내용이 내용에 따라 결정됩니다. anatom이라는 전체 디렉토리를 표시에서 제외해야한다고 가정하십시오. 이렇게하려면 다음과 같은 지침을 등록하는 것으로 충분합니다.
사용자 에이전트 : Googlebot
Disallow : / anatom
또는 예를 들어 모든 .gif 이미지의 색인을 생성하려고합니다. 이렇게하려면 다음 목록을 추가하십시오.
사용자 에이전트 : Googlebot
Disallow : /*.gif$
다음은 또 다른 예입니다. 동적으로 생성 된 페이지에 대한 파싱 정보를 제거한 다음 포인터에 유형 항목을 추가해야합니다.
사용자 에이전트 : Googlebot
Disallow : / *?
여기, 대략, 및에 대한 규칙검색 엔진. 또 다른 점은이 모든 것에 META 태그를 사용하는 것이 훨씬 편리하다는 것입니다. 그리고 웹 마스터는 종종 검색 엔진의 동작을 규제하는 표준을 사용합니다. 그러나 우리는 다음 기사에서 이것을 이야기 할 것입니다.
</ p>>
