2016-12-19 2 views
1

Scrapy가 60 초마다 한 번씩 크롤링 된 페이지 수, 크롤링 속도 등의 통계를 기록합니다. 이 간격을 변경하는 방법이 있습니까? 있다Scrapy - 로깅 통계 간의 간격 변경

2016-12-19 15:09:01 [scrapy] INFO: Crawled 0 pages (at 0 pages/min), scraped 0 items (at 0 items/min) 
2016-12-19 15:10:01 [scrapy] INFO: Crawled 82 pages (at 82 pages/min), scraped 28290 items (at 28290 items/min) 
2016-12-19 15:11:01 [scrapy] INFO: Crawled 167 pages (at 85 pages/min), scraped 57615 items (at 29325 items/min) 

답변

2

(문서화?), LOGSTATS_INTERVAL라는 설정을하는 60 (초) 기본값. settings.py에서 원하는 간격 (초)을 변경할 수 있습니다. 예 :

LOGSTATS_INTERVAL = 5 * 60.0 # log stats every 5 minutes