spark에서 hbase를 구성하는 방법은 무엇입니까?

Question

스파크를 hbase에 연결하는 단계는 무엇입니까?

둘 다 마스터 주소가 있습니다. 방금 spbase 클래스 패스에 hbase 주소를 추가합니까?

Answer 1

도움이 될한다 HBase를 통해 스파크를 연결하는 방법에 대한이 게시물 : http://www.vidyasource.com/blog/Programming/Scala/Java/Data/Hadoop/Analytics/2014/01/25/lighting-a-spark-with-hbase

Do I just add the hbase address into spark classpath?

번호 사실, 당신은 스파크 클래스 경로에 HBase와의 configuraion 파일을 넣어해야합니다. 그렇지 않다면 다음과 같이 코드에서 설정해야합니다 :

Configuration hConf = HBaseConfiguration.create(conf); 
    hConf.set("hbase.zookeeper.quorum", "PDHadoop1.corp.CompanyName.com,PDHadoop2.corp.CompanyName.com"); 
    hConf.setInt("hbase.zookeeper.property.clientPort", 10000);