2014-03-12 3 views
2

누군가가 페이지에 언젠가 트윗하고 트위터가 트위터 카드 확인과 같은 데이터 크롤링을하면 사용자 에이전트 트위터가 사용하는 것을 누구나 알 수 있습니까? 트위터 카드 마크 업을 찾기 위해 페이지를 크롤링 할 때Twitter 사용자 에이전트 공유에

답변

7

트위터 (예 : Twitterbot/1.0으로, 버전) 트위터 봇의 사용자 에이전트를 사용합니다. 트위터의 크롤러는 예외를 생성해야하는 경우 URL을 검색 할 때 robots.txt을 존중합니다.

자세한 내용은 Twitter Cards URL Crawling & Caching을 참조하십시오.