Hadoop : 데이터 로컬 작업이 없음

2 노드 클러스터에서 Hadoop 작업을 실행 중입니다. 복제 계수는 2로 설정되므로 모든 블록이 모든 노드에 있어야하며 모든 작업이 데이터 로컬이어야합니다. 그러나 웹 인터페이스에 따르면 데이터 로컬 작업의 수는 0입니다. 문제가있는 위치를 알 수 있습니까?Hadoop : 데이터 로컬 작업이 없음

출처

2014-03-04 user2846499

웹 UI에 두 개의 실제 데이터 노드가 표시됩니까? 웹 UI에 두 개의 active-tasktracker가 있거나 "hadoop job -list-active-trackers"명령을 실행하고 있습니까? 데이터 노드의 로그에있는 메시지는 무엇입니까? 웹 UI에서 랙 로컬 작업을 볼 수 있습니까? – vefthym

@vefthym 답변을 찾았습니다. 답으로 게시 해 드리겠습니다. 도와 주셔서 대단히 감사합니다! – user2846499

문제가있는 곳을 찾았고 묻기 전에 충분한 연구를하지 못해 죄송합니다.

작업 완료 후 콘솔 로그를보고 모든 작업이 실제로 데이터 - 로컬임을 알게되었습니다. 잘못된 정보를 표시하는 웹 UI와 관련된 문제 여야합니다.

출처

2014-03-05 07:05:34 user2846499

Hadoop : 데이터 로컬 작업이 없음

답변

관련 문제