하둡에서 실행중인 테스트 응용 프로그램

Question

새로운 테스트입니다. Hadoop에서 실행되는 응용 프로그램을 테스트 할 수있는 테스트 프레임 워크가 있습니까? 2 노드 클러스터에서 실행되는 jar 파일이 있습니다.

Answer 1

Hadoop 테스트에서 처음으로 시작할 수있는 곳 중 하나는 MRUnit을 사용하여 로컬 단위 테스트를 작성하는 것입니다. JUnit과 같지만 MapReduce의 단위 테스트를 작성합니다.

• MRUnit 튜토리얼 - https://cwiki.apache.org/confluence/display/MRUNIT/MRUnit+Tutorial

Answer 2

또한 설정 구성에 지역은 JobTracker의 JVM에 dev에 테스트를 실행할 수 있습니다 :

Configuration conf = new Configuration(); 
conf.set("fs.default.name", "file:///"); 
conf.set("mapred.job.tracker", "local"); 

Path input = new Path(getClass().getResource("/") + "testfile"); 
Path output = new Path(getClass().getResource("/") + "testfile_output"); 

당신은 책 "Hadoop Definitive Guide"의 제 5 장

을 참조 할 수 있습니다