Python의 Logstash를 사용하여 Elastic Search로 데이터 가져 오기

Question

logstash 명령 줄을 사용하여 JSON 파일을 ElasticSearch 인덱스로 가져 왔습니다. 나는 다음과 같은 명령을 사용 :.

\ logstash -f logstash.conf

logstash.conf 파일에 제공되었습니다 가져올 파일의 경로. 명령 줄을 사용하여이 작업을 수행 할 수있었습니다.

하지만 어떻게 파이썬에서 똑같은 일을합니까? 옵션 http://elasticsearch-py.readthedocs.io/en/master/helpers.html?highlight=bulk#elasticsearch.helpers.streaming_bulk 스트리밍 사용 - 목표는

Answer 1

당신은 당신이 메모리에 파일을 맞게 할 수없는 경우에 대량 로더 http://elasticsearch-py.readthedocs.io/en/master/helpers.html?highlight=bulk#bulk-helpers

을 사용할 수 있습니다 (또는 logstash없이) 파이썬을 사용하여 elasticsearch 인덱스로 대량 데이터를 가져 오는 것입니다