urllib3 연결 관리

urllib3을 사용하여 HTTP를 통해 온라인 API를 한 번씩 (특히 40,000 이상) 차례로 쿼리합니다.
처음에는 API의 HTTP GET이 매우 빠름을 알았습니다 (< 500ms).
HTTP 요청이 점점 더 많아지면서 응답 시간이 몇 초가 될 때까지 느려집니다.urllib3 연결 관리

내 코드는 다음과 같습니다

http = urllib3.PoolManager() 
req = http.request(u'GET', URL) 
doc = xml.dom.minidom.parseString(req.data) 
nodes = doc.getElementsByTagName(ELEMENT_NAME) 
for node in nodes: 
    #process the node, this happens very very fast.

암 I없는 아무것도? 감사!

출처

2012-01-10 user1094786