임팔라를 사용하고 있으며 임팔라가 메모리에서 처리하는 것을 알고 있습니다. 임팔라 구성 옵션 목록을 검색했지만, 특히 메모리/힙과 관련하여 이에 대한 철저한 문서를 찾지 못했습니다. 임팔라에는 그러한 환경이 있습니까? 또는 hdfs/datanode 힙 공간에 의존합니까? 임 플 란 메모리 사용량을 -mem_limit
으로 감청 할 수는 있겠지만 어떻게 처리하는지 더 잘 이해하려고합니다.Cloudera Impala의 메모리 구성
0
A
답변
2
임팔라 1.4.0 릴리스부터 CDH 5.1.0에 포함 된 임팔라는 쿼리 처리 중에 메모리와 디스크를 모두 사용합니다. 메모리의 임팔라의 사용을 제어하는 방법에 대한 자세한 내용은, 나는 특히, Cloudera documentation on Impala을 통해 읽어 보시기 바랍니다 :
- Using YARN Resource Management with Impala
- Using HDFS Caching with Impala
- Modifying Impala Startup Options
당신은 방법에 대한 자세한 정보를 찾을 수 있습니다 HDFS 캐싱 및 Hadoop YARN (Llama를 통해)과의 통합을 포함하여 Impala의 메모리 사용에 대한 여러 측면을 구성합니다. HDFS 캐싱에 대한 자세한 내용은 Andrew Wang and Colin McCabe's presentation from Hadoop Summit 2014을 참조하십시오. Llama에 대한 자세한 내용은 Henry Robinson's presentation from Hadoop World NYC 2013을 참조하십시오.
관련 문제
- 1. cloudera impala의 date_sub() udf를 사용하여보기에서 쿼리하는 중 연결 재설정 오류가 발생합니다. 1.2.3
- 2. Cloudera Manager HDFS 구성 파일 찾기
- 3. cloudera CDH5 구성 생성기를 사용할 수 있습니까?
- 4. cloudera 관리자없이 cloudera impala 설치
- 5. Cloudera 패키지 버전 의미
- 6. Cloudera : Cloudera 관리자에게 Accumulo 1.7.2 소포 추가
- 7. VM cloudera - 사용자 cloudera 및 사용 권한?
- 8. 스마트 폰 메모리 구성
- 9. Specman 메모리 구성
- 10. cloudera manager 무료 버전을 사용하는 hadoop 다중 노드 구성
- 11. cloudera 관리자를 사용하여 CDH4 구성 요소를 모니터하는 방법
- 12. Cloudera CDH5에 대한 클러스터 생성
- 13. Cloudera Hadoop VM 아니요 이클립스
- 14. Cloudera Hadoop - 설치 오류
- 15. Cloudera Director가있는 GCP에서 클러스터 설정
- 16. 우분투의 cloudera 관리자를 사용하여 Cloudera CDH5 설치하기 12.04 LTS
- 17. Cloudera CDH3 원격 연결
- 18. 돼지 Cloudera VM에 가입하십시오
- 19. Spyder anaconda cloudera
- 20. Cloudera 관리자 4.7
- 21. 서버에서 Cloudera Manager 제거
- 22. cloudera 클러스터 노드 역할
- 23. Cloudera Navigator 성능 평가
- 24. Cloudera SolrCloud에 solr 구성로드
- 25. 실행 시간 Cloudera VM
- 26. Cloudera Hadoop 500 Error
- 27. Cloudera 임팔라는 mongodb를 지원합니까?
- 28. Cloudera Impala 쿼리가 실패했습니다
- 29. cloudera 관리자 포트를 수정하십시오. 7180 ~ 80
- 30. 스파크 구성 : 메모리/예/코어