파이썬 스크립트에서 C 프로그램을 벤치마킹하는 방법은 무엇입니까?

Question

저는 현재 여러 짧은 C 프로그램에 대해 여러 벤치 마크를 생성해야하는 uni에서 일부 작업을 수행하고 있습니다. 이 프로세스를 자동화하기 위해 파이썬 스크립트를 작성했습니다. 나는에게 그러나

def run_program(path): 
    p = subprocess.Popen(path, shell=True, stdout=subprocess.PIPE) 
    p.communicate()[0] 

    if (p.returncode > 1): 
     return False 
    return True 

다음 run_program 기능은 바로 C 프로그램을 실행하기 위해 subprocess 모듈을 사용

start = time.time() 
successful = run_program(path) 
end = time.time() 

runtime = end - start 

: 지금까지 내가 time 모듈을 사용하고 본질적으로 같은 벤치 마크를 계산 봤는데까지 최근에는 이것이 CPU 시간이 아닌 경과 된 시간을 측정한다는 것을 발견했습니다. 즉, 이러한 종류의 측정은 OS의 노이즈에 민감합니다. SO에 대한 비슷한 질문은 CPU 시간을 측정하는 것이 더 좋습니다 timeit 모듈이 제안, 그래서 나는 같은 실행 방법을 채택했습니다

def run_program(path): 
    command = 'p = subprocess.Popen(\'time ' + path + '\', shell=True, stdout=subprocess.PIPE, stderr=subprocess.PIPE); out, err = p.communicate()' 

    result = timeit.Timer(command, setup='import subprocess').repeat(1, 10) 
    return numpy.median(result) 

그러나 timeit 문서보고에서이 timeit 모듈은 것 같다 문자열로 전달 된 작은 코드 조각을 의미합니다. 따라서 timeit이 정확한 계산 결과를 제공하는지 확신 할 수 없습니다. 그래서 내 질문은 : timeit은 실행되는 프로세스의 모든 단계에 대해 CPU를 측정 할 것인가 아니면 실제 파이썬 (예 : subprocess 모듈) 코드를 실행하기위한 CPU 시간 만 측정 할 것인가? 이 방법이 C 프로그램 집합을 벤치 마크하는 정확한 방법입니까?

Answer 1

timeit은 실행되는 파이썬 프로세스에서 사용되는 CPU 시간을 측정합니다. 외부 프로세스의 실행 시간은 해당 시간에 "대변"되지 않습니다.

Answer 2

보다 정확한 방법은 진정한 속도와 처리량을 얻을 수있는 C 언어로 할 수 있습니다.