2013-04-06 6 views
-1

스레딩 풀 (스킵)을 어떻게 설정할 수 있습니까?스레딩에서 스레드 풀 크기 설정

+0

치료는 스레드 풀이 아닙니다. 동시 요청 수를 늘리는 방법을 의미합니다. 문서에서이를 처리 할 수있는 몇 가지 설정이 있습니다. –

답변

4

Scrapy는 복수 스레드를 사용하지 않고 Twisted이라는 기본 비동기 http 프레임 워크를 사용하기 때문에 한 번에 얼마나 많은 스파이더를 실행할 수 있는지에 대해 이야기해야합니다. CONCURRENT_REQUESTS 문서를 참조하십시오. 기본값 : 16