2
파티셔닝 데이터 세트에 대한 커스텀 파티셔너를 작성했습니다. 같은 파티션을 사용하여 두 개의 데이터 세트를 분할하고 다음 mapreduce 작업에서 각 맵퍼가 두 소스의 동일한 파티션을 처리하고 결합 등의 일부 기능을 수행하기를 원합니다. 한 맵퍼가 두 소스에서 같은 파티션에 해당하는 분할?Parititioned Data Map/Reduce
도움을 주시면 감사하겠습니다.
A
답변
0
설명하는 것은지도 측 결합의 변형입니다. Pro Hadoop 또는 org.apache.hadoop.mapred.join의 제 8 장
관련 문제
- 1. 클라우드의 MapReduce
- 2. AWS의 MapReduce
- 3. Iterative MapReduce
- 4. MapReduce 문제
- 5. HBase에서 스트리밍되는 Hadoop mapreduce
- 6. 스칼라에서 MapReduce 구현
- 7. MapReduce 선형 프로그래밍
- 8. Hadoop mapreduce 프로그래밍
- 9. Hadoop MapReduce 처리량 질문
- 10. MongoDB MapReduce 통계 엔진
- 11. MapReduce 셔플/정렬 방법
- 12. Hadoop : Iterative MapReduce 성능
- 13. 휴대용 장치에서 mapreduce 실행
- 14. MapReduce 비효율 감속기
- 15. Amazon MapReduce 사용
- 16. Amazon Elastic MapReduce : FileSystem의 예외
- 17. Delphi 용 MapReduce 라이브러리가 있습니까?
- 18. 여러 스캔 객체의 HBase Mapreduce
- 19. Hadoop MapReduce InputFormat 사용되지 않으셨습니까?
- 20. mapreduce 프로그램에 agrs 전달하는 방법
- 21. Amazon MapReduce 감속사 작업 없음
- 22. Hadoop 클러스터에서 mapreduce jar 실행
- 23. couchdb의 키 정렬 및 mapreduce
- 24. hadoop에서 여러 MapReduce 작업 실행
- 25. Amazon Elastic MapReduce 인스턴스 재사용
- 26. App Engine abort mapreduce shard
- 27. jQuery .data() vs HTML5 data-XXX 성능
- 28. android \ data \ data 폴더가 비어 있습니다.
- 29. MapReduce 작업이 서로 독립적임을 보장하려면 어떻게해야합니까?
- 30. 프로그래밍 방식으로 Hadoop Mapreduce 프로그램 출력 읽기