하이브에 데이터를로드하는 동안 필드에서 따옴표를 제거합니다.

Question

하이브에 입력 데이터가있는 테이블을로드하려고합니다. 다음과 같은 형식의 데이터가 있습니다.

100510;LOCAL CARD;;;;UNITED KINGDOM;GB;GBR;826 
100515;LOCAL CARD;;;;NORWAY;NO;NOR;578 
103753;LOCAL CARD;I&M BANK;DEBIT;PREPAID;KENYA;KE;KEN;404 
104001;LOCAL CARD;LUXURY JEWELLERY CLASS (LJC) - TDFS;;;CANADA;CA;CAN;124 

나는 HDFS에서 하이브에서이 테이블을로드 할하지만 일부 열이 할 때문에되지 않은 데이터의 결과에서 나에게 큰 따옴표를주는이 포함되어 있습니다. 나는 그들을 무시하고 싶다.

Answer 1

serialization.null.format을 사용하여 Hive가 null을 처리하는 방법을 제어 할 수 있습니다. 당신이 표시하고 싶어,

create table <your table> 
<column list> 
rowformat delimited fields terminated by <your delimiter> 
TBLPROPERTIES ('serialization.null.format' = ''); 

은 빈 따옴표 ("") 대신에 기존의 테이블

alter table <your table> set TBLPROPERTIES ('serialization.null.format' = '');