2
파이썬 CRFSuite (https://github.com/tpeng/python-crfsuite)를 병렬 처리 할 수 있습니까? CRF ++는 병렬 처리를 지원한다고 생각합니다. 그래서 CRFsuite와의 병렬 처리를 가능하게하는 몇 가지 갈고리가 있어야합니다.Python CRFsuite에서 병렬 처리가 가능합니까?
A
답변
1
아니요, 현재 불가능합니다. 병렬 교육은 구현되지 않습니다. 버그 추적기에는 그것에 대한 몇 가지 작업이 있습니다. 교차 유효성 검사를 병렬로 실행할 수 있습니다 (즉, 여러 모델을 병렬로 교육).
관련 문제
- 1. 실제로 병렬 처리가 가능합니까?
- 2. 병렬 처리가 가능합니까?
- 3. Fibers와의 간단한 병렬 처리가 가능합니까?
- 4. 함수 내에서 병렬 처리가 가능합니까?
- 5. R의 병렬 처리가 제한됨
- 6. 프롤로그에서 문자열 처리가 가능합니까?
- 7. 큐브 처리가 병렬 모드에서만 실패합니다
- 8. JMS 메시지의 병렬 처리가 필요합니까?
- 9. KMeans 병렬 처리가 실패 함
- 10. crfsuite에서 attibute로 태그 사용
- 11. 병렬 처리가 순차 처리를 언제 극복합니까?
- 12. CUDA의 동적 병렬 처리가 작동하지 않습니다.
- 13. 캐럿의 병렬 처리가 R 2.13.0에서 작동하지 않습니다.
- 14. 왜 병렬 처리가 일반적인 구현보다 느린가요?
- 15. STXXL : 정렬 중 제한된 병렬 처리가 있습니까?
- 16. Java 병렬 처리가 적용된 연결 필터
- 17. 단일 노드 hadoop에 병렬 처리가 있습니까?
- 18. 병렬 처리가 성능 향상을 제공하지 않음
- 19. 병렬 처리가 특정 알고리즘의 복잡성을 변경합니까?
- 20. Django는 AJAX 응답 후 추가 처리가 가능합니까?
- 21. ARM A7 Linux 원시 인터럽트 처리가 가능합니까?
- 22. 병렬 처리 - Python
- 23. 스톰의 "병렬 컴퓨팅"보다 적은 "병렬 컴퓨팅"이 가능합니까?
- 24. Python msn hook - 가능합니까?
- 25. Matlab에서 MEX 파일을 사용한 병렬 컴퓨팅이 가능합니까?
- 26. OpenMP를 사용한 여러 수준의 병렬 처리 - 가능합니까? 똑똑한? 실용적인?
- 27. Python 다중 처리가 예상대로 작동하지 않습니다.
- 28. 크롬에서 javascript/python 시간 처리가 실패합니다.
- 29. python 3.4 unittest에서 다중 처리가 작동하지 않습니다.
- 30. WCF 호출에서 요청 인수에 따라 병렬 처리가 수행됩니까?
model_selection 모듈 (GridSearch)을 사용하여 하이퍼 - 매개 변수를 병렬로 최적화 할 수 있습니다. 그러나 실용적인 크기의 데이터 (실제로는 크지 않음)의 경우 모델 크기가 커지면서 일련 번호가 지정되고 관련 데이터가 포함 된 모델을 피클 링/unpickling하면 대부분의 시간이 소요됩니다. 데이터 크기가 매우 작지 않으면 (실제로는 작음) 멀티 프로세싱은 본질적으로 직렬화됩니다. – Kai
저는 이것을 conll-2002 데이터와 함께 사용하고 있습니다. 교육을 위해 14987 문장의 기본 기능 만 제공합니다. 내가 맨 위를 실행하면 8 개의 파이썬 프로세스가 나타납니다. 다른 코어 7이 잠자는 동안 라운드 로빈을 하나씩 실행하면서 8 개의 CPU 코어를 가지고 있기 때문에 ... 병렬 처리가 전혀 없습니다. 추가 기능을 추가하려면 속도가 더 느려집니다. – Kai
카이 (Kai) : 프로세스를 시작한 후에 기능을 추출 할 수 있습니다. 이는 어쨌든 교차 유효성 검사를 수행하는 올바른 방법입니다. 이 경우 입력 된 문장 만 직렬화됩니다. –