0
장기간 실행중인 EMR 클러스터가 있고 그 후에 해당 클러스터에서 데이터 파이프 라인을 설정하고 싶다면 어떻게해야합니까?장기 실행 EMR 클러스터에서 AWS 데이터 파이프를 설정하십시오.
이 EMR 클러스터에 Task Runner를 설치해야합니까? 또는 Task Runner가 사전 설치되어 있습니까? 아니면 다른 간단한 방법이 있을까요?
A
답변
2
작업 실행기가 EMR에 사전 설치되어 있지 않습니다. 수동으로 구성해야하며 steps을 따라 EMR 클러스터에 Task Runner를 설치하십시오.
Task Runner 프로세스를 시작할 때 --workerGroup의 이름을 제공하십시오. 이 이름은이 EMR 클러스터의 식별자가되며 데이터 파이프 라인 활동의 WorkerGroup 필드에 사용될 수 있습니다.
관련 문제
- 1. AWS EMR 클러스터에서 리소스를 확보하는 방법은 무엇입니까?
- 2. EMR 클러스터에서 GC 최적화
- 3. AWS 람다 실행 장기 추적
- 4. AWS 데이터 파이프 라인 구성 EMR 클러스터 실행 스파크
- 5. AWS EMR 자동 스케일링
- 6. 기존 EMR 클러스터에서 EmrActivity를 어떻게 실행합니까?
- 7. AWS 데이터 파이프 라인을 통해 AWS EMR 클러스터에서 여러 병렬 스파크 작업을 실행하는 방법
- 8. AWS EMR 클러스터에서 작업 노드의 지점 종료 처리
- 9. AWS EMR 클러스터에서 단계의 상태를 얻는 방법은 무엇입니까?
- 10. AWS 클러스터에서 TensorFlow를 실행하는 방법은 무엇입니까?
- 11. AWS EMR Spark- Cloudwatch
- 12. AWS 람다가 장기 실행 HTTP 요청
- 13. AWS EMR- 털실 용기
- 14. AWS EMR 병렬 매퍼?
- 15. 클러스터에서 MaxOperationTimeout을 설정하십시오.
- 16. AWS EMR 기계가 축소 출력을 결합하지 않음
- 17. AWS 간단한 워크 플로우 서비스 - 실행 장기 실행 프로세스 신뢰성
- 18. 디스크가 꽉 차서 AWS EMR 클러스터가 실패합니다.
- 19. EMR 클러스터를 자동 종료하는 AWS 데이터 파이프 라인 옵션
- 20. AWS EMR kerberizing 클러스터 hadoop.security.AccessControlException
- 21. 스파크가있는 AWS DataPipeline EMR 클러스터
- 22. Amazon EMR : 데이터 노드에 스토리지 구성
- 23. 장기 실행 서비스 실행
- 24. EMR 슬레이브에서 명령 실행?
- 25. AWS 템플리트에서 AWS 템플리트의 AWS EMR 보안 구성 지정, 람다
- 26. EMR 작업 내에서 AWS Java SDK 사용
- 27. 장기 실행 프로그램 및 데이터 처리
- 28. Mapred Child Error : AWS EMR 인스턴스가 종료되었습니다.
- 29. 클러스터의 AWS EMR 파일 작성이 작동하지 않습니다.
- 30. 장기 실행 작업 확장 EC2
부트 스트랩 액션으로 가능합니까? – lubom
예, 해당 단계를 스크립트로 추가하여 부트 스트랩 작업에 사용할 수 있습니다. – franklinsijo
부트 스트랩을 게시 할 수 있습니까? WAITING_FOR_RUNNER 상태가 있습니다. – lubom