2016-06-08 3 views
1

HTML 컨텐트를 캐시하기 위해 Edge Caching을 설정했습니다. 리소스가 브라우저 또는 Curl을 통해 도달하면 완벽하게 작동합니다. 두 경우 모두 첫 번째 요청은 캐시를 예열하고 두 번째 요청은 Cloudflare에서 직접 제공됩니다.Cloudflare Edge 크롤링 무시 캐싱

그러나 Bing, Yahoo 및 Google과 같은 크롤러가 캐시를 데우지 않는 것으로 나타났습니다.

이전에 브라우저 또는 Curl을 통해 크롤러에 의해 조회 된 URL을 방문하면 해당 후속 요청이 원본 서버에도 적용됩니다 (내 서버 로그에 따라).

계획 크기 (일반 대 엔터프라이즈), 잘못된 구성 또는 Cloudflare 특수 사례의 크롤러 사용자 에이전트입니까?

답변

0

Google이 일반적으로 크롤링하는 위치에서 사이트를 방문하지 않으면 CloudFlare 캐시가 따뜻하지 않을 수 있습니다.

검색 엔진이 사이트를 크롤링하는 빈도에 따라 CloudFlare에서 setting a higher Edge Cache Expire TTL의 혜택을 볼 수 있습니다. 이렇게하려면 use CloudFlare's Page Rules이 필요합니다.

맞춤식을 원하면 CloudFlare's Enterprise Sales team에 연락하는 것이 가장 좋습니다.