Apache Spark 버전을 1.6에서 2.0으로 업그레이드하십시오.

스파크 버전을 최신 2.0.1로 업그레이드하고 싶습니다. 기존 구성을 잃지 않고 어떻게해야합니까?

도움을 주시면 감사하겠습니다.

2016-10-18 Fleur

다운로드 하시겠습니까? Spark은 실제로 사이트에서 압축이 풀린 아카이브에서 실행되기 때문에 "설치"되지 않습니다. 경고 : 1.6.x를 2.x –

으로 업데이트 한 후에 코드가 "작동"하지 않습니다. 단독으로 spark을 설치 한 경우, 다른 버전을 로컬에 설치하기 만하면됩니다. – jtitusj

maven 또는 sbt 응용 프로그램에서 단순히 spark의 종속성 버전을 변경하고 2.0에 따라 코드를 마이그레이션하면 구성이 손실되지 않습니다. 스파크 바이너리의 경우 config 폴더의 백업을 취할 수 있습니다.

2016-10-18 06:17:53

구성과 관련하여 많은 변경 사항이 없으며 일부 메소드 서명이 변경되고 mapPartitions 메소드 서명 및 주요 기능 변경 사항 (메트릭/리스너 API에 대한 변경 사항)이 새로 추가되었습니다.

2016-10-18 07:23:16 SanthoshPrasad

답변