웹 사이트 내의 응용 프로그램이 자체 robots.txt 파일을 가질 수 있습니까?응용 프로그램 용 Robots.txt
예를 들어, 나는 http://www.example.com
아래 사이트 실행되고이는 robots.txt 파일이 있습니다. 응용 프로그램에 대한 robots.txt 파일을 별도의 유지 http://www.example.com/website-app
이 가능 아니면 내가에 응용 프로그램에 대한 모든 재료를 넣어해야합니까 :
우리는이 영역에서 응용 프로그램으로 실행하는 별도의 사이트를 주요 루트 robots.txt?
당신은에 액세스 할 때 그 "/ 웹 사이트 - 응용 프로그램"당신이 자신의 파일을 다른 웹 사이트를 공격합니다 의미 다음 해당 웹 사이트가 자신의 실제의 robots.txt 파일의가 (해야) 할 수 있습니다, 그것은 별도의 사이트로 실행중인 말 - 그러나 * 검색 엔진 크롤러의 관점에서 보면 해당 사이트는 다른 사이트가 아니며 www.test.com의 일부이므로 www.test.com이 www.test.com과 동일한 사이트로 표시됩니다./website-app이므로 robots.txt 파일의 내용이 비슷할 것을 권장합니다. –