java 메인 클래스에서 MR 작업 출력에 액세스

Question

내 MapReduce 프로그램에는 세 개의 연결된 MR 작업이 있습니다. 메인 클래스에서 MR1 ouptut에 액세스하고 싶습니다. 하프 환경에서 가능합니까?

만약 그렇지 않다면 유사한 일을하는 다른 방법이 있다면 제안 해주십시오.

Answer 1

작업 1의 출력을 작업 2의 입력에 공급하고 작업 2의 출력을 작업 3의 입력에 공급하는 한 가지 방법이 있습니다. 여기

은 예입니다 방법 :

http://blogs.msdn.com/b/avkashchauhan/archive/2012/03/29/how-to-chain-multiple-mapreduce-jobs-in-hadoop.aspx

: 좀 더에 대한 http://developer.yahoo.com/hadoop/tutorial/module4.html#chaining

이 블로그 회담