하이브 파티션 테이블에서 데이터를 내보낼 수 없습니다. sqoop을 사용하여 mysql 테이블

Question

나는 MySQL DB에서 하이브 파티션 테이블로 데이터를 가져와야하는 POC에서 작업하고 있습니다. 그런 다음 MySQL DB 테이블로 데이터를 전송해야합니다. 산 속성을 지원하고 연도와 월별로 분할 된 테이블을 만들었습니다. 그래서 현재 MySQL DB로 데이터를 전송할 수 없습니다. 그럼 내가 어떻게 이걸 얻을 수 있겠 어?

Answer 1

아래로 하이브 테이블 데이터를 전송하는 Sqoop을 가져 오기를 사용할 수 있습니다

sqoop import --connect <connection string> 
--username <> 
-P 
--table <table name> 
--target-dir <location> <table name> 
--fields-terminated-by "," 
--hive-import 
--create-hive-table 
--hive-table <hive table name 

그런 다음 당신은 수입 대신에 내보내기를 사용하여 내 SQL에 데이터를 다시 내보낼 수 있습니다.

$ sqoop export \ 
--connect <connect string>\ 
--username \ 
-P 
--table <hive table>\ 
--export-dir <location