AWS EMR 5.0은 Spark: Spark 2.0.0 on Hadoop 2.7.2 YARN with Ganglia 3.7.2 and Zeppelin 0.6.1
이 미리 포장되어 있지만 Zeppelin 0.6.1은 Spark 1.6.x 만 지원합니다. Zeppelin의 맞춤형 버전을 구축 및 배포하지 않고 버전 불일치를 해결할 수있는 방법이 있습니까?AWS EMR 스파크 및 Zeppelin 버전 불일치 문제를 해결하는 방법은 무엇입니까?
0
A
답변
1
emr-5.0.0의 맞춤형 Zeppelin 버전은 Spark 2.0에서 작동합니다.
1
이것은 사실이 아닙니다. Zeppelin 0.6.1은 Spark 2.0.0에서 작동하는 첫 번째 버전이었습니다.
+0
EMR 5.0.0과 함께 제공되는 zeppelin 0.6.1-SNAPSHOT은 버그가 있으며 부분적으로 만 spark 2.0을 지원합니다. 특히, UDF가 작동하지 않습니다. Zeppelin 0.6.2에서 수정되었습니다. – conradlee
관련 문제
- 1. akka 버전 호환성 문제를 해결하는 방법은 무엇입니까?
- 2. 방향 문제를 해결하는 방법은 무엇입니까?
- 3. mouseup 및 mousedown의 문제를 해결하는 방법은 무엇입니까?
- 4. Apache Zeppelin on EMR 로그인 오류
- 5. 목록으로이 문제를 해결하는 방법은 무엇입니까?
- 6. GC_concurrent 문제를 해결하는 방법은 무엇입니까?
- 7. parent.frames 문제를 해결하는 방법은 무엇입니까?
- 8. 국경 문제를 해결하는 방법은 무엇입니까?
- 9. java.lang.NoClassDefFoundError이 문제를 해결하는 방법은 무엇입니까?
- 10. 이 패키지 배포 문제를 해결하는 방법은 무엇입니까?
- 11. elasticsearch start error이 문제를 해결하는 방법은 무엇입니까?
- 12. Android : FragmentManager 버전 불일치
- 13. AWS EMR 자동 스케일링
- 14. 최상위 수준의 const로이 문제를 해결하는 방법은 무엇입니까?
- 15. CodeIgniter 3.1.0에서 base_url() 문제를 해결하는 방법은 무엇입니까?
- 16. A/B 키 문제를 해결하는 방법은 무엇입니까?
- 17. 수동으로 AWS EMR 단계를 수행하지 못하게하는 방법
- 18. 설탕 crm에서 마이그레이션 문제를 해결하는 방법은 무엇입니까?
- 19. Selenium에서 도서관 문제를 해결하는 방법은 무엇입니까?
- 20. TFS2015에서 TF53001 문제를 해결하는 방법은 무엇입니까?
- 21. iOS 시뮬레이터 문제를 해결하는 방법은 무엇입니까?
- 22. 이 문제를 해결하는 반복기를 만드는 방법은 무엇입니까?
- 23. sqlserver에서 1753 년 문제를 해결하는 방법은 무엇입니까?
- 24. Linux에서 스레딩 문제를 해결하는 방법은 무엇입니까?
- 25. 이 회전 문제를 해결하는 방법은 무엇입니까?
- 26. 이 bad_alloc 문제를 해결하는 방법은 무엇입니까?
- 27. EMR 5.0 + 무한 루프에서 스파크 가져 오기
- 28. MediaPlayer IllegalStateException 문제를 해결하는 방법은 무엇입니까?
- 29. AWS EMR kerberizing 클러스터 hadoop.security.AccessControlException
- 30. WMQ에서이 채널 문제를 해결하는 방법은 무엇입니까?
여기에 동일합니다. EMR 5.0에서 스파크 2.0으로 Zeppelin을 실행하는 데 문제가 없습니다 (모두 pyspark 및 spark) – Niros
참고 : emr-5.0.0에서 Zeppelin의 버전은 0.6.1-SNAPSHOT이므로 0.6.1은 emr- 5.0.0이 곧 출시 될 예정이었습니다. 그러나 emr-5.0.0으로 릴리스 된 0.6.1-SNAPSHOT 버전은 결국 0.6.1로 릴리스 된 것과 크게 다르지 않으며 Spark 2.0을 지원합니다. –
또한 Zeppelin 0.6.1의 공식 버전은 emr-4.8.0 (emr-5.0.0이 출시 된 후 언젠가 출시 됨)에서 Zeppelin 0.6.1이 emr-5.x의 다음 버전으로 출시 될 예정입니다 나올 때. –