3
누구나 Elasticsearch for Hadoop library을 사용하여 Kubernetes 클러스터를 구성한 경험이 있는지 궁금합니다. spark에서 elasticsearch로 쓰기를 시도 할 때 노드 발견 시간 초과 문제가 발생합니다. 발견을 처리하는 ES 용 elasticsearch-cloud-kubernetes 플러그인 덕분에 Elasticsearch가 실행 중입니다. 그러나 kubernetes 클러스터 내의 노드 (포드)를 인식하기 위해 elasticsearch-hadoop을 구성하는 것이 최선인지 모르겠습니다. 나는 spark.es.nodes을 es-client 서비스에 설정하려고했지만 작동하지 않는 것 같습니다. 또한 es.nodes.wan.only을 활성화 할 수 있다는 것을 알고 있지만 설명서에 언급 된대로 은 심각하게의 성능에 영향을 미쳐 동일한 클러스터에서 실행되는 것을 막을 수 있습니다. 어떤 도움을 주시면 감사하겠습니다.Kubernetes의 Apache Spark 용 Elasticsearch를 배포하십시오.