파이썬 다중 처리 관리자가 프로세스 생성 루프를 시작합니다

Question

작업 목록을 작업 목록에 추가하려고하는 작업자 풀을 설정하는 간단한 파이썬 다중 처리 스크립트가 있습니다. 이 스크립트에는 다음과 같은 3 개의 호출 스택이 있습니다. - 다른 함수 g1을 호출하는 여러 작업자 프로세스를 생성하는 기본 호출 f1. 스크립트가 (Windows 7/64 비트/VS 2010/PyTools에서 우발적으로) 디버깅을 시도하면 스크립트는 중첩 된 프로세스 생성 루프로 실행되어 끝없는 프로세스를 생성합니다. 누구나 이유를 판단 할 수 있습니까? 나는 아주 간단한 것을 놓치고 있다고 확신한다. 여기에 문제가있는 코드는 다음과 같습니다 -

import multiprocessing 
import logging 

manager = multiprocessing.Manager() 
results = manager.list() 

def g1(x): 
    y = x*x 
    print "processing: y = %s" % y 
    results.append(y) 

def f1(): 
    logger = multiprocessing.log_to_stderr() 
    logger.setLevel(multiprocessing.SUBDEBUG) 

    pool = multiprocessing.Pool(processes=4) 
    for (i) in range(0,15): 
     pool.apply_async(g1, [i]) 
    pool.close() 
    pool.join() 

def main(): 
    f1() 

if __name__ == "__main__": 
    main() 

PS : 아무 소용 주에 multiprocessing.freeze_support()를 추가했습니다.

Answer 1

기본적으로 sr2222가 언급 한 내용은 정확합니다. multiprocessing manager docs에서 _____ainain 모듈은 어린이가 가져올 수 있어야한다고 말합니다. 각 관리자는 "개체는 생성 된 자식 프로세스에 해당합니다"이므로 각 자식은 기본적으로 모듈을 다시 가져옵니다 (모듈 범위에서 print 문을 내 고정 버전에 추가하여 볼 수 있습니다!) ... 무한 재귀가 발생합니다 .

하나의 해결책은 F1()로 관리 코드를 이동하는 것입니다 : 당신이 무엇을보고 원인 왜

import multiprocessing 
import logging 

def g1(results, x): 
    y = x*x 
    print "processing: y = %s" % y 
    results.append(y) 

def f1(): 
    logger = multiprocessing.log_to_stderr() 
    logger.setLevel(multiprocessing.SUBDEBUG) 
    manager = multiprocessing.Manager() 
    results = manager.list() 
    pool = multiprocessing.Pool(processes=4) 
    for (i) in range(0,15): 
     pool.apply_async(g1, [results, i]) 
    pool.close() 
    pool.join() 


def main(): 
    f1() 

if __name__ == "__main__": 
    main()