IntelliJ 아이디어로 Spark1.2.0 코드베이스 빌드

Question

Git에서 Spark1.2.0 코드베이스를 다운로드하여 Maven 프로젝트로 Intellij Idea로 가져옵니다. 그런 다음 메이븐 프로젝트보기의 루트 모듈에 대해 메이븐 설치를 수행합니다.

오랜 시간이 지난 후에는 모든 모듈이 성공적으로 빌드됩니다. 그러나 IntellijIdea에서 LocalPi를 실행하면 컴파일 오류가 발생하기 시작합니다. 1. EventBatch 및 SparkFlumeProtocol 클래스가 생성되지 않았 으면 org.apache.spark.streaming.flume.sink 패키지에 있어야합니다. 2. CodeGenerator.scala에 몇 가지 오류가 있습니다. q가 StringContext의 멤버라고 불평합니다.

나는 이러한 문제를 해결하기 위해 많은 시간을 보냈지 만 운은 없다.

Answer 1

"Maven Projects"도구 창의 "소스 생성 및 모든 프로젝트의 폴더 업데이트"버튼을 클릭하여 수동으로 소스를 생성 해보십시오.

보기 -> 도구 윈도우 -> 메이븐 프로젝트

당신 수도 스파크 프로젝트 외부 수로 싱크에 마우스 오른쪽 버튼으로 클릭하고 소스 및 업데이트 폴더 생성을 클릭합니다.