는 맵리 듀스

Question

에 돼지 라틴어에서이 출력을 얻을하는 방법 나는 다음과 같은 피그 라틴 쓴 data sample for adult data

다음 데이터 샘플에서 돼지 라틴어/하둡

((39,50,60,42,15,Bachelor,Male),5) 
((40,35,HS-grad,Male),2) 
((39,45,15,30,12,7,HS-grad,Female),6) 

에서 다음과 같은 출력을 얻으려면 스크립트

sensitive = LOAD '/mdsba/sample2.csv' using PigStorage(',') as (AGE,EDU,SEX,SALARY); 
BV= group sensitive by (EDU,SEX) ; 
BVA= foreach BV generate group as EDU, COUNT (sensitive) as dd:long; 
Dump BVA ; 

불행하게도, 그 결과는이

처럼 올

((Bachelor,Male),5) 
((HS-grad,Male),2) 

Answer 1

AGE 데이터도 투영 해보십시오. 이 같은 뭔가 : 당신이 데이터를로드 할 때

BVA= foreach BV generate 
    sensitive.AGE as AGE, 
    FLATTEN(group) as (EDU,SEX), 
    COUNT(sensitive) as dd:long; 

또 다른 제안은 데이터 유형을 지정하는 것입니다.

sensitive = LOAD '/mdsba/sample2.csv' using PigStorage(',') as (AGE:int,EDU:chararray,SEX:chararray,SALARY:chararray);