Google Cloud DataProc 성능 모니터링

Question

Google은 대용량 데이터 분석을 위해 GoogleCloudPlatform을 사용하고 있습니다. 처리를 위해 Google은 현재 google cloud dataproc & spark-streaming을 사용하고 있습니다.

는 우리는 이들의의 설정을 위해 Dr.Elephant 등 신경절, 흑연,

같은 일부 모니터링 유틸리티를 사용하여 작업의 성능을 확인하고 싶은

각 노드의 구성을 수정해야합니다. dataproc이 이러한 성능 모니터링 도구를 기본적으로 지원한다면 알고 싶습니다.

Answer 1

아무 것도 지원되지 않지만, this initialization action을 사용하여 신경절을 추가 할 수 있습니다. 스크립트를 편집하여 원하는대로 구성 할 수 있습니다.

그러면 웹 UI에 액세스하려면 these instructions을 따라야합니다.