Cassandra Spark 직원이 여전히 로컬에서 데이터를 마샬링해야합니까?

나는 Datastax Search 노드가 Solr in-process를 실행한다는 것을 읽었는데, 이는 메모리에서 Cassandra와 Solr간에 로컬 데이터가 전달 될 수 있음을 의미합니다.Cassandra Spark 직원이 여전히 로컬에서 데이터를 마샬링해야합니까?

나는 이것이 Cassandra Spark에서도 마찬가지인지 궁금해하고 있었습니까?

스파크는 카산드라와 완전히 구분됩니다. 그것은 Cassandra의 Spark 운전자의 문제입니다. 공정 중의 통신이 아닙니다. 그래, 데이터를 마샬링해야한다.

2014-10-12 20:54:44

그건 유감이다. Spark 작업자가 로컬 Cassandra 노드와 메모리를 통해 통신 할 수 있다면 성능에 미치는 영향은 커질 것입니다. –

그것은 운전자의 "데이터 지역성 인식"에 대해 언급했습니다 - 슬라이드 47보기 http://www.slideshare.net/planetcassandra/cassandra-community-webinar –

나는 Cassandra가 아니라 DSE Analytics에 대해 더 분명하게 말 했어야했습니다. 스파크는 별도로 작동합니다. 단일 명령으로 DSE 분석 노드가 시작 되었기 때문에 나는 Spark이 진행되고 있기를 바랬다. 아마도 미래를위한 것일까요? –

답변