AJAX를 통해 콘텐츠 섹션을 동적으로로드하는 페이지가 있습니다. 나는 이것이 콘텐츠가 검색 엔진에 의해 발견되지 않을 것이라는 점을 염려합니다.검색 엔진이 내 AJAX 콘텐츠를 찾는 방법
내 뜻을 나타내려면 사이트는 http://www.gold09.net이고 동적 콘텐츠는 /speakers.php입니다. 일반적으로 아무도 그 두 번째 링크를 방문하지 않습니다. 첫 번째 페이지에로드되었습니다.
나는 크롤러에게 sitemap.xml
을 사용하여 speakers.php
을 읽도록 말할 수 있지만 검색 결과에 나타나는 speakers.php에 대한 링크를 얻을 것입니다.
궁극적 인 해결책은 누군가가 /speakers.php
을 요청하면 크롤러가 데이터를 읽을 수있는 반면 메인 페이지로 리다이렉트하도록하는 것입니다.
제안 사항?
Sitemap.xml을 사용하여 크롤러를 페이지로 유도하고 robots.txt를 사용하지 않을 때 어떤 일이 발생합니까? –
robots.txt가 표시되는 것을 멈추지 않습니다. 검색 엔진에서 크롤링을 중지합니다. – nickf