2017-02-15 1 views
0

Alexa 및 유사한 웹에서 내 웹 사이트에 완전히 액세스하지 못하도록해야합니다. robots.txt로 처리 할 수 ​​있다는 것을 알고 있지만, 충분하지 않다는 것을 알고 있으며 간단한 확장자 나 비슷한 것을 가진 콜렉션 데이터입니다.Alexa 및 유사한 웹 사이트를 차단하는 방법

아이디어 나 솔루션이 있습니까?

미리 감사드립니다.

답변

0

당신은 robots.txt에 함께

  • 알렉사 봇을 theire 봇을 차단해야합니다

이것은 ia_archiver 당신이 그것을 차단하는 방법 :

User-agent: ia_archiver 
Disallow:/

당신은의 이름을 찾을 필요 차단하려는 모든 로봇. Google 검색을 사용하면 매우 쉽습니다.

관련 문제