HIVE는 조인에서 문자열을 비교합니다.

Question

문자열 인 하이브 쿼리의 키가 있습니다. 그 녀석은 영원히 가져가는 것 같아. 대신 인덱스 또는 뭔가를 만들 수 있습니까?

select 
* 
from e 

left join tabele a 
on e.string1=a.string2 

어떻게 향상시킬 수 있습니까?

Answer 1

성능상의 문제로 하이브 테이블을 ORC 형식으로 만들어보십시오. 쿼리에서 맵 조인을 사용해보십시오. http://grisha.org/blog/2013/04/19/mapjoin-a-simple-way-to-speed-up-your-hive-queries/

https://cwiki.apache.org/confluence/display/Hive/LanguageManual+ORC