YARN 웹에 표시된 스파크 신청서를 제출하지 않았습니다.

Question

나는 원사 모드에서 스파크를 설치 한 노드가 있습니다.

sudo ./usr/bin/spark-submit --master yarn --deploy-mode client MySparkCode.py 

으로 애플리케이션을 실행할 때 문제가 없습니다.

http://localhost:18089/에있는 스파크 이력 서버에 연결하면 제출 된 애플리케이션을 볼 수 있습니다.

하지만 제가 http://localhost:8088/cluster/apps에있는 원사 관리자 도구 웹 ui로 갈 때 내 응용 프로그램이 전혀 표시되지 않습니다. 내가 뭐 잘못 했어요? 내 신청서를 거기에 표시하면 안됩니까? 그 것이었다

Answer 1

sudo ./usr/bin/spark-submit --master yarn --deploy-mode cluster MySparkCode.py 

시험 모드 클러스터