0
robots.txt
파일은 대개 사이트 루트 디렉토리 아래에있는 텍스트 파일입니다. 예를 들어 www.amazon.com/robots.txt
을 볼 수 있습니다. 그러나 오늘, 나는 이상한 robots.txt
파일을 가진 웹 사이트를 발견했다.어떻게 그리고 왜 robots.txt 파일을 사이트의 홈페이지로 리디렉션합니까?
http://xli.bugs3.com/robots.txt
을 입력하면 텍스트 파일이 표시되지 않고 해당 사이트의 홈 페이지 만 표시됩니다. 어떻게 그런 일이 벌어 질 수 있으며 웹 마스터는 왜 이렇게 할 수 있습니까?