MapReduce 처리가 로컬 파일 시스템과 어떻게 작동합니까?

Question

입력/출력이 로컬 파일 시스템의 경우 MapReduce 처리는 어떻게 작동합니까?

MapReduce 작업 실행이 Hadoop 클러스터에서 비동기 적으로 발생합니까? 그렇다면 어떻게됩니까?

우리는 실제로이 접근법을 사용해야합니까? (가 로컬 시스템이 아닌 클러스터의 효율성이 떨어지는 것 같은 효율성 만의 문제)

Answer 1

1. 는 맵리 듀스는 로컬 시스템 (mapper-> 감속기)

   심지어 동일하게 작동합니다.

2. 예, 맵리 듀스 작업 실행이 하둡 클러스터에서 비동기 적으로 발생이 사용되는 경우의 대부분에서

   클릭 for more about scheduler

3. 을 (그것은 스케줄러의 어떤 종류의 당신이 당신의 맵리 듀스 프로그램에 사용에 따라 다름) 테스트 용 (로컬 시스템에서 mapreduce 프로그램 실행).