검색 엔진에 의한 사이트 색인 생성 금지

Google 및 다른 검색 엔진이 내 웹 사이트의 색인을 생성하지 못하게하려면 어떻게해야합니까? 당신의/검색 엔진에 의한 사이트 색인 생성 금지

2009-10-30 Omer Zach

에서

2009-10-30 01:04:13

이 사람은 당신이 뭔가 다른 일을해야한다고 말합니다. 재미 있을지도 모릅니다 : http://yoast.com/prevent-site-being-indexed/ – Julien

예. 이 대답은 메타 태그에 대한 더 나은 답변으로 업데이트되어야합니다. –

색인이 생성되고 순위가 매겨지는 것과는 다른 점이 있습니다. 메타 태그 는 크롤러에게 사이트 순위를 지정하지 않도록 지시합니다. robots.txt를 사용하면 사용자가이 파일을 보지 않고 사이트 순위를 매길 수 있습니다. – JBaczuk

의 robots.txt 지침은 다음과 같은 내용으로 사이트 루트에 robots.txt 파일을 만듭니다

# robots.txt for yoursite 

User-agent: * 
Disallow:/

검색 엔진 (그리고 일반적으로 가장 로봇)의 내용을 존중합니다 이 파일의 로봇에 대해 임의의 수의 Disallow: /path 행을 무시할 수 있습니다. robotstxt.org에 대한 자세한 내용.

2009-10-30 01:04:06 jldupont

저는 이것이 아주 오래된 질문이라는 것을 알고 있습니다. 그러나 나는 실제 답변으로 @Julien이 한 의견을 강조하고 싶었습니다.

According to Joost de Valk으로 robots.txt는 실제로 사이트가 검색 엔진에 의해 크롤링되는 것을 방지하지만 다른 사이트에 귀하의 사이트를 가리키는 링크가 있으면 검색 결과에 여전히 나타날 수 있습니다.

이 솔루션은 두 페이지의 헤더에 로봇 메타 태그를 추가 :

Header set X-Robots-Tag "noindex, nofollow" :

<meta name="robots" content="noindex,nofollow"/>

또는 간단한 옵션 인 것은 당신의 .htaccess 파일에 다음을 추가 할

웹 호스트가 .htaccess 규칙을 허용하고 해당 모듈이 작동하려면 mod_headers 모듈이 설치되어 있어야합니다.

두 태그는 모두 검색 엔진이 귀하의 사이트를 가리키고 검색 결과에 귀하의 페이지를 가리키는 링크를 유지하지 못하도록합니다. Win-Win, 자기야.

2012-08-16 14:45:25 kgrote

답변