저희 웹 사이트의 사기 탐지 및 봇 차단제

Question

저희 웹 사이트에서는 들어오는 트래픽이 BOT 또는 기타 사기가 아닌 진짜인지 확인해야합니다. 우리가 취해야 할 최선의 접근 방법은 무엇입니까?

1. 사용자 에이전트를 구문 분석하고 봇의 경우 찾는 :

   는 지금, 우리는이 일을하고 있습니다.

2. 일부 IP의 조회가 특정 차단 시간에 특정 한도에 도달하면 ips에서 조회를 확인합니다.

우리가 할 수있는 다른 일이 있습니까, 요청이 사기인지 여부를 확인하기 위해 Google 사이트에 방문하는 동안 전화 할 수있는 서비스가 있습니까?

Answer 1

웹 사이트의 루트에 파일을 Robots.txt로 만들 수 있습니다. 어떤 봇이 어떤 페이지에 액세스 할 수 있는지 그리고 어떤 봇이 크롤링을 허용하지 않는지를 구성하는 파일입니다. 따라서 귀하의 경우와 같이 Google 검색 엔진을 포함하여 모든 크롤러를 차단하도록 쉽게 구성 할 수 있습니다.
사용이 guide 도움이 될 수 있습니다

User-agent: * 
Disallow:/

이 구성.