PHP 프로젝트에서 robots.txt를 차단하는 방법은 무엇입니까?

-2

PHP 프로젝트에서이 귀찮은 robots.txt 파일을 차단하고 제거하는 가장 좋은 방법은 무엇입니까?PHP 프로젝트에서 robots.txt를 차단하는 방법은 무엇입니까?

2012-03-01 qpixo

"차단 및 제거"란 무엇을 의미합니까? robots.txt는 검색 엔진에 사이트 색인 생성 방법을 지시하는 파일입니다. 일반적으로 PHP에 의해 영향을받지 않으며 PHP가 필요하지 않습니다. –

robots.txt 파일을 보면서 인간이 괴롭 혔습니까? 이것은 나에게 뉴스 다. – BoltClock

Malbe 나는 내 질문에 분명하지 않았다. 그러나 어떤 이유로 든 모든 봇이 일부 스패머가 대역폭을 스캔하거나 악용하는 것을 막는 것을 원하지 않습니다. PHP와는 아무런 관련이 없습니다 ... – qpixo

robots.txt 파일은 사이트 개발자가 만들었습니다. 모든 파일은 google이나 yahoo와 같은 봇들에게 검색 엔진을 위해 귀하의 사이트에 색인을 생성해서는 안되는 지시입니다. 어떤 방법으로도 지침을 따르 겠지만 대부분의 주요 명령은 지침을 따르지 않습니다.

당신은 아무것도 검색하지 않는 모든 로봇에게 본질적으로 나는 로봇이 있지만, 모두를 따라이 필수 아닌 말했듯이 그들이 당신 robots.txt 파일

User-agent: * 
Disallow:/

의 아래에 입력 차단하려고 시도하는 경우

좋은 봇이 해.

자세한 내용은 여기 http://www.robotstxt.org/

출처

2012-03-01 02:55:54 Henesnarfel

나는 특정 학대 한 봇만 차단하려고합니다. 링크 주셔서 감사합니다! – qpixo

PHP 프로젝트에서 robots.txt를 차단하는 방법은 무엇입니까?

답변

관련 문제