2014-03-13 3 views
0

CDH5 인증 제품군을 실행하기 위해 5 노드 cloudera 클러스터 (4 개의 데이터 노드와 1 개의 namenode)를 사용하고 있습니다.cloudera CDH5 구성 생성기를 사용할 수 있습니까?

5 개의 노드에는 각각 128GB의 RAM과 40 개의 CPU 코어가 있습니다. cert. 스위트는 OutOfMemory 오류로 실패합니다.

(성공하지 못하면 지난 7-8 일 동안이 문제를 해결하는 데 어려움을 겪고 있으며, 기본 CDH 구성 설정에서도 실패했습니다.) HDFS와 YARN 구성을 많이 변경하여 테스트를 실행 해 보았습니다. (JAVA_OPTS/MAVEN_OPTS 포함)

설정/응용 프로그램이나 특정 클러스터 설정에 이상적인 구성 파일을 생성 할 수있는 사용자가 있으면 매우 유용 할 것이거나 쉽습니다. (RAM/CPU 등을 고려하여) 즉 정보를 취할 것입니다. 얼마나 많은 노드, 각 노드 RAM, 각 노드 CPU 등 사용자로부터 원사, hdfs 구성 매개 변수를 생성합니다.

답변

0

같은 문제가 발생하여 NFS가 느린 것으로 밝혀졌습니다. NFS에서 로컬 파일 시스템으로 전환하면 OOM 오류가 줄어 듭니다.

관련 문제