URL에 대해 프록시를 확인하는 방법은 무엇입니까?

Question

나는 100 개의 프록시 목록을 가지고 있습니다. 내가 관심있는 URL은 abc.com입니다. 이 URL을 성공적으로 가져올 수있는 프록시의 수와 동일한 URL을 가져 오는 데 걸린 시간을 확인하고 싶습니다. 내가 이해하기를 바라고 있습니다. 저는 파이썬 놈입니다. 코드 스 니펫을 찾고 있습니다. 도움의 손길 정말 감사합니다 :)

Proxies : 

200.43.54.212 
200.43.54.212 
200.43.54.212 
200.43.54.212 

URL : 

abc.com 

Desired result : 

Proxy   isGood Time 

200.43.54.112 n  23.12 
200.43.54.222 n  12.34 
200.43.54.102 y  11.09 
200.43.54.111 y  8.85 

p.s을 : 위의 모든 프록시 중 80 8080

Answer 1

당신은 urllib2을 사용하여 URL을 가져올 수 포트가 있습니다. 소요 시간을 확인하려면 시간 모듈을 사용할 수 있습니다. 여기에 당신이 원하는 것 무엇 않는 간단한 예제 :

import urllib2 
import time 


def testProxies(url, proxies): 
    # prepare the request 
    req = urllib2.Request(url) 
    # run the request for each proxy 
    results = ["Proxy   isGood Time"] 
    for proxy in (proxies): 
     # now set the proxy 
     req.set_proxy(proxy, "http") 
     # time it 
     start = time.time() 
     # try to open the URL 
     try: 
      urllib2.urlopen(req) 
      # format the results for success 
      results.append("%s y  %.2f" % (proxy, time.time()-start)) 
     except urllib2.URLError: 
      # format the results for failure 
      results.append("%s n  %.2f" % (proxy, time.time()-start)) 

    return results 

testResults = testProxies("http://www.abc.com", ["200.43.54.112", "200.43.54.222", 
        "200.43.54.102", "200.43.54.111"]) 
for result in testResults: 
    print result 

주요 포인트 urllib2.Request(url)에 요청을 생성하고 요청에 대한 프록시를 설정 할 수있는 set_proxy() 기능을 사용하고 있습니다.