내 사이트의 콘텐츠를 처리하는 자동화 된 에이전트를 찾는 방법은 무엇입니까?

Question

일부 사이트는 자동화 된 에이전트를 사용하여 고객 사이트 중 하나의 콘텐츠를 처리하고 있습니다. 나는 그들의 요구를 감지하고 그들에게 사이트 내용을 대처하지 못하도록 captcha 코드를 보여주고 싶다.

어쨌든 감지 할 수 있습니까?

Answer 1

이 복잡한 문제와 고양이와 마우스의 게임이다 ... 프록시와 동적 IPS 등이 있기 때문에 더 어려워진다. 그것은 약간 어렵게 만들려면 :

반복적으로 사이트를 타격

1. 금지 IP에가, 일반 사용자는
2. 반 공개 프록시를 모든 페이지를 필요로하지 않을, 목록은 금지에서
3. 모든 요청을 googleing 볼 수 있습니다 IP/프록시는 보안 문자 페이지로 리디렉션되어야합니다.

Answer 2

일반적으로 "자동화 된 에이전트"는 일반 사용자보다 짧은 기간에 많은 양의 데이터에 액세스합니다. 모든 사용자의 IP 주소를 추적하고 눈에 띄는 IP가 있는지 확인해야합니다.

은 물론,이