하이브에서 db2로 데이터를 복사하는 시나리오가 있습니다. 이것을 구현할 수있는 두 가지 방법이 있습니다. 하나는 sqoop 내보내기 명령을 사용하고 다른 하나는 db2 load 클라이언트입니다. 나는 성능면에서 가장 좋은 방법이 무엇인지 알아야한다. 제게 제안 해주세요.SQOOP 내보내기 명령 VS DB2 LOAD CLIENT
0
A
답변
0
Sqoop은 대용량 데이터 파일을 HDFS에서 동시에 (매퍼를 사용하여) db2로 전송하는 데 사용할 수 있습니다. db2 load client에 대해서는 전혀 모른다.
0
종속. DB2 LUW를 사용하는 경우, sqoop 커넥터를 사용하면 사용할 수있는 클러스터 수 (매퍼)에 따라 더 빠를 수 있습니다. DB2로드 (적어도 z 세계에서)는 데이터베이스 시스템의 cp 수에 따라 parrallel로드를 수행 할 수 있습니다. 그래서 그것은 당신의 환경 (데이터베이스 시스템 대 hadoop 클러스터)에 달려 있다고 생각합니다.
관련 문제
- 1. Sqoop SQL 서버로 내보내기 VS 대량 SQL 서버에 삽입
- 2. Sqoop 내보내기 업데이트는 지정된 열
- 3. SQL 서버로 Sqoop 내보내기 : 스키마?
- 4. Webview vs. Native Client
- 5. db2/as400에서 Windows로 표 내보내기 db2
- 6. Sqoop 하이브 문자열을 Oracle CLOB로 내보내기
- 7. 쉘 실행 sqoop 명령 오류
- 8. Sqoop 명령 - 하이브 임포트가 실패했습니다.
- 9. 파일에서 여러 sqoop 명령 실행
- 10. SQOOP 내보내기 실패 (mysql으로 가져 오기)
- 11. DB2 내보내기 가져 오기 오류
- 12. DB2 계단식 삭제 명령?
- 13. J 언어의 "load"명령
- 14. MySQL의 LOAD 명령
- 15. .load sos에서 ".load"는 무엇입니까?
- 16. 명령 치환은, DB2 보고서 연결되지는
- 17. db2 테이블 내보내기 SQL - 데이터 없음
- 18. 서버 클라이언트 android application vs client
- 19. UNIX 내보내기 명령
- 20. LOAD FILE 명령 - 구분 기호
- 21. SQOOP : com.mysql.jdbc.exceptions.MySQLSyntaxErrorException : 알 수없는 데이터베이스
- 22. sqoop API를 사용하여 sqoop 명령을 실행하는 방법은 무엇입니까?
- 23. sqoop 가져 오기 또는 내보내기 중 잘못된 레코드 처리
- 24. Ajax.get() vs $ (div) .load vs html.renderaction MVC 4
- 25. AIX (vs) Unix 명령
- 26. DB2 내보내기 - 텍스트에 포함 된 경우 샤델은 어떻게 이스케이프됩니까?
- 27. Twisted IMAP4 Client QUOTA 계열 명령
- 28. HyperTable : 뮤 테이터 Vs. LOAD DATA INFILE
- 29. 디자인 패턴 (방문자 vs 명령 vs 전략)
- 30. 명령 행을 통한 DB2 서버 설치
답장을 보내 주신 JtheRocker에게 감사드립니다. – OneTwo
그래, 매퍼가 병렬로 실행되기 때문에 DB2에 업로드하는 속도가 빨라집니다. –