2014-06-10 3 views
0

Hadoop 클러스터에서 벤치마킹 및 성능 테스트를 수행하고 싶습니다. hadoop-mapreduce * test * .jar을 알고 hadoop-mapreduce-examples * .jar에는 벤치마킹을위한 많은 프로그램이 있습니다.Hadoop 벤치마킹/성능 테스트

각 테스트 및 성능 측정에 대한 세부 정보를 제공하는 테스트에 사용할 수있는 문서가 있습니까? 또한 테스트를 수행 한 후에 결과를 비교할 수있는 값이 있습니까?

감사합니다. HDFS 벤치마킹을위한 몇 가지 도구를 포함 당신은 HiBench이

+0

Hadoop 클러스터 성능에서 가장 널리 사용되는 벤치 마크는 테라 바이트 정렬입니다. – Mehraban

답변

9

, 하이브 ... 당신은 여기에서 찾을 수 있습니다 : https://github.com/intel-hadoop/HiBench

버클리 대학 하이브 데이터 집합으로 벤치 마크를 만들어, 임팔라 ... 당신은 그것을 참조 할 수 있습니다 여기 : https://amplab.cs.berkeley.edu/benchmark/

Terasort도 유명한 벤치 마크입니다. 여기에는 데이터를 생성하고 MapReduce를 사용하여 클러스터를 테스트하는 3 가지 프로그램이 포함되어 있습니다. 자세한 정보는 여기를 참조하십시오 : http://hadoop.apache.org/docs/current/api/org/apache/hadoop/examples/terasort/package-summary.html

관련 문제