쿠키로 크롤링하는 Google

내 사이트의 콘텐츠는 요청의 쿠키에 따라 다르며 Google 크롤러 봇이 내 사이트를 방문하면 각 요청에 특정 쿠키가 없으므로 많은 콘텐츠를 색인 생성하지 않습니다.쿠키로 크롤링하는 Google

크롤러 봇이 내 사이트를 크롤링 할 때 특정 쿠키를 사용한다는 규칙을 설정할 수 있습니까?

2011-12-22 Andrey Skrypnik

-1

예, Google 크롤러는 요청 헤더에 'Googlebot'이라는 단어가 있습니다. 간단히 확인해도되지만 사람들이 사이트의 콘텐츠에 액세스 할 수 있도록 위장 할 수 있다는 경고를받습니다. 호기심이 의견에 언급했듯이, 이것은 일반적으로 귀하의 사이트를 사용하는 사람들과 아마 Google의 서비스 약관에 위배됩니다.

출처

2011-12-22 09:37:02

좋아요. 예를 들어 locationId = 2 (쿠키)와 같이 googlebot 요청에 쿠키를 넣어야하는 경우 어떻게해야합니까? –

나는 OP가 각 Googlebot 요청에 쿠키를 주입하려고한다고 생각합니다. 이것은 가능하지 않습니다. – isNaN1247

GoogleBot의 인증을 우회하는 인증 코드를 사용하기 전에 코드를 작성해야 할 가능성이 큽니다. 템플릿 (또는 무엇이든)이 사용자 인증 데이터가 필요한 경우 GoogleBot에 대한 가짜 사용자 계정을 만들어 해당 헤더 요청 (가능한 경우)에 쿠키를 추가 할 수 있습니다. –

Googlebot은 쿠키를 고의로 사용하지 않습니다. 귀하의 웹 사이트에서 다른 사람이 볼 수있는 것을 "보아야합니다." "가장 작은 공통 분모"입니다. 그렇지 않으면 검색 결과가 알려지지 않은 양의 검색 사용자에게 의미가 없습니다.

"Googlebot 쿠키"가 검색 엔진에 대한 토론 및 문서, 그들이 작동하는 방식 및 왜 그들이 작동하는 방식으로 작동하는지에 대해 알려면 Google에 알려주십시오. 귀하의 문제에 대한 한 가지 해결책은 "첫 방문/무료보기"규칙을 구현하는 것일 수 있습니다.

출처

2011-12-22 13:05:18

쿠키로 크롤링하는 Google

답변

관련 문제