MapReduce 프레임 워크는 어떻게 정렬 단계를 구현합니까?

MapReduce 정렬 단계의 구현에 관심이 있습니다. 그것은 매우 효율적으로 보인다. 누군가는 그것에 관하여 약간 참고를 제공 할 수 있 었는가? 감사!MapReduce 프레임 워크는 어떻게 정렬 단계를 구현합니까?

출처

2012-02-20 ygnhzeus

This은 정렬 단계가 코딩되는 곳으로 ReduceTask.java을 가리 킵니다. 의 393-408 행을 참조하십시오. 더 많은 정보가 필요하면 download the entire source와 그것을 파헤 치십시오. hadoop book 아래에서 도면에 도시 된 바와 같이

EDITED

"정렬"상 ReduceTask 하에서 떨어진다. (페이지 x : 163) enter image description here

출처

2012-02-20 18:42:43

주의 : 정렬은 실제로 매퍼 이후에 발생합니다. 감속기는 정렬 된 세그먼트를 병합합니다. –

@ThomasJungblut : 위의 그림을 참조하십시오. –

그래, 내가 말했던 바입니다 : P –

MapReduce 프레임 워크는 어떻게 정렬 단계를 구현합니까?

답변

관련 문제