하둡의 데이터 그룹화

Question

Hy,

다음과 같은 문제가 있습니다. I 가진 2 개 데이터 세트는 다음과 같은 구조의 데이터를 포함하는 하나

A1 B2 C1 D1 
A1 B2 C1 D3 
A3 B1 C2 D2 
etc 

이러한 객체에 대한 값을 포함하는 다른 하나 I 그룹 데이터 I는 A1을 가질 수있다보다는 어떻게

A1=x 
B2=y 
C1=z 
D1=q 
etc 

를 = x B2 = y C1 = z D1 = q를 계산하기 위해서?

감사합니다.

Answer 1

두 번째 데이터 집합이 작은 경우 분산 캐시에 넣을 수 있습니다.

매퍼 &에서 한 줄씩 첫 번째 데이터 세트를 읽은 다음 분산 캐시의 입력을 사용하여 값을 얻은 다음 < "A1 = x B2 = y C1 = z와 같은 키 - 값 쌍을 방출 할 수 있습니다 D1 = q ", 1>