Google 검색에서 특정 페이지의 색인을 생성하지 마십시오.

Google 검색에서 특정 페이지의 색인을 생성 할 수 있습니까?Google 검색에서 특정 페이지의 색인을 생성하지 마십시오.

저는 WordPress를 사용하고 있습니다. Robots.txt가 봇이 귀하의 웹 사이트를 크롤링하는 것을 막을 수 있다고 들었지만 색인 생성과 동일합니까? 전혀 가능합니까? (또한 웹 원더러스, 크롤러 또는 거미로 알려진)

2017-12-20 Kevin.a

당신은''태그 내의 필요한 페이지에서 NOINDEX ">"를 선택하십시오. –

정말 다른 검색 엔진 서비스에 영향을주지 않고 Google 검색 전용 솔루션이 필요합니까? – unor

The Web Robots Pages

웹 로봇이 자동으로 웹을 통과 프로그램입니다. 과 같은 검색 엔진은 웹 콘텐츠의 색인을 생성하기 위해이를 사용하고 스팸 발송자는이를 사용하여 의 이메일 주소를 검색하며 기타 많은 용도로 사용합니다.

은 "=

User-agent: * 
Disallow:/

이

User-agent: * 
Disallow: /cgi-bin/ 
Disallow: /tmp/ 
Disallow: /junk/

2017-12-20 17:34:04 Ben

robots.txt는 색인 생성이 아닌 크롤링을 방지합니다. – unor

답변