2012-02-19 4 views
9

GAE에서 파이썬을 사용하여 간단한 웹 응용 프로그램을 만들려고합니다. 앱은받은 요청마다 일부 스레드를 생성해야합니다. 이를 위해 파이썬의 스레딩 라이브러리를 사용하고 있습니다. 나는 모든 스레드를 생성하고 그들을 기다린다.GAE 파이썬 스레드가 병렬로 실행되지 않습니다.

t1.start() 
t2.start() 
t3.start() 

t1.join() 
t2.join() 
t3.join() 

응용 프로그램 (각 스레드의 run() 메소드의 시작/끝 부분에 타임 스탬프를 인쇄하여이를 확인) 스레드가 순차적이 아니라 동시에보다 실행된다는 사실을 제외하고 잘 실행됩니다.

application: myapp 
version: 1 
runtime: python27 
api_version: 1 
threadsafe: true 

handlers: 
- url: /favicon\.ico 
    static_files: favicon.ico 
    upload: favicon\.ico 

- url: /stylesheet 
    static_dir: stylesheet 

- url: /javascript 
    static_dir: javascript 

- url: /pages 
    static_dir: pages 

- url: .* 
    script: main.app 

내가 내 로컬 GoogleAppLauncher은 환경 설정에서 명시 적으로 경로를 설정하여 파이썬 2.7을 사용하는 확인했다 : 나는처럼 보이는

내 애플리케이션 제목을 멀티 스레딩 수 있도록 http://code.google.com/appengine/docs/python/python27/using27.html#Multithreading에 주어진 지시를 따랐다.

내 스레드의 평균 실행 시간은 2-3 초이며 URL 열기 호출을하고 결과에 대한 처리를 수행합니다.

뭔가 잘못하고 있거나 멀티 스레딩을 사용하도록 구성이 누락 되었습니까?

답변

17

dev_appserver에서 또는 프로덕션 서비스에 앱을 업로드 한 후이 문제가 발생합니까? GoogleAppLauncher에 대한 언급에서 dev_appserver에서이를 볼 수있는 것처럼 들립니다. dev_appserver는 프로덕션 서버의 스레딩 동작을 에뮬레이트하지 않으며 응용 프로그램을 배포 한 후에도 잘 작동한다는 것을 알게되면 놀랄 것입니다. (그렇지 않으면 것은, 여기에 댓글을 추가 할 수 있습니다.)

또 다른 생각을 : http://code.google.com/appengine/docs/python/urlfetch/asynchronousrequests.html

이 접근 방식을 : 당신이 주로 URL을 가져올 수 기다리고 있습니다, 당신은 URL을 가져올하기 위해 비동기 인터페이스를 사용하여 병렬로 호출 URL을 가져올 수 많은 실행할 수 있습니다 스레드가 필요하지 않습니다. (여전히 dev_appserver에서 요청을 올바르게 병렬 처리하지는 않지만 프로덕션 서버에서 올바르게 처리합니다.)

+0

예 로컬 설치시에만 문제가 발생했습니다. 내 응용 프로그램을 업로드 할 때 스레드가 병렬로 실행되었습니다. 도와 주셔서 감사합니다. – Nitesh

1

GAE 용 멀티 스레딩 노트는 요청 처리 방법에 불과하며 파이썬 스레드의 작동 방식을 근본적으로 변경하지 않습니다. 특히 threading module docs의 "CPython 구현 세부 정보"참고가 계속 적용됩니다.

또한 GAE의 문서의 "샌드 박싱"절에 메모를 언급 할 가치 : 요청이 종료 될 때 스레드가 런타임에 합류한다

참고, 그래서 스레드가 끝을지나 실행할 수 없습니다 요청의

+0

감사합니다. 따라서 GAE의 멀티 스레딩 지원은 GAE가 요청을 병렬로 처리하기 위해 여러 스레드를 생성 할 수 있음을 의미하지만 응용 프로그램 코드 자체는 도우미 스레드를 생성 할 수 없습니까? – Nitesh

+0

@Nitesh : 요청을 처리하는 프런트 엔드는 요청을 처리 할 수 ​​있도록 응용 프로그램의 여러 인스턴스를 생성 할 수 있지만 각 인스턴스에서 생성 한 스레드는 여전히 일반적인 규칙으로 바인딩됩니다. 물론 도우미 스레드를 생성 할 수 있지만 I/O에서 차단하지 않는 한 병행 실행되지 않습니다. –

+0

도우미 스레드에서 urllib.urlopen 호출을 만들고 있습니다. 이 통화 I/O가 차단되지 않습니까? – Nitesh

0

스레드가 데이터 저장소 작업을 대부분 기다리고 있다면 NDB 모듈을 1.6.2에 추가해보십시오. 의미는 당신이하고있는 것에 충분히 가깝습니다.

IIRC의 경우 다중 스레드 플래그를 사용하면 하나의 서버 인스턴스가 별도의 스레드에서 여러 요청을 처리 할 수 ​​있지만 스레드를 직접 시작할 수는 없습니다. 반송하기 전에 동기화 할 필요가 없다면 별도의 tasks에 넣고 하나 이상의 작업 대기열에 위임 할 수 있습니다.

+2

사실, Py27 런타임은 스레드를 만들 수 있습니다. (하지만 위의 첫 번째 답변에 추가 된 메모를 참조하십시오. 요청이 끝나면 추가됩니다.) –

+0

수정 해 주시고 조언을 주셔서 감사합니다. – rbanffy

+0

"백그라운드 스레드"라는 새로운 기능이 있습니다.이 기능은 일반 스레드와 비슷하지만 요청이 끝날 때 백그라운드 스레드가 암시 적으로 조인되지 않는다는 점이 다릅니다 (https://developers.google.com/appengine/docs/python/backends)./background_thread – allyourcode

관련 문제