명령 줄 옵션을 사용하여 Hadoop 태스크 재시도 정책을 제어하려면 어떻게합니까?

명령 줄 옵션을 사용하여 Hadoop 작업 재시도 정책을 제어하고 싶습니다. 예를 들어, 나는 다음과 같은 Sqoop을 작업을 작성하고자하고 MySQL의 중단에 결함 허용 할 수 있습니다 : 예명령 줄 옵션을 사용하여 Hadoop 태스크 재시도 정책을 제어하려면 어떻게합니까?

hadoop job -submit 
    GENERIC_JOB_OPTIONS 
    -Dmap.retry.exponentialBackOff=TRUE 
    -Dmap.retry.numRetries=10

2012-09-28 yoni

: 그것은 같이 보일 수도, 일반 하둡 작업에

sqoop 
    GENERIC_SQOOP_OPTIONS 
    -Dmap.retry.exponentialBackOff=TRUE 
    -Dmap.retry.numRetries=10

, hadoop "-D"인수가 Sqoop에서 지원됩니다. 그러나 커맨드 라인에서 그들의 위치는 매우 중요합니다. 그들은 직접 "Sqoop을"후 다른 Sqoop을 인수하기 전에 존재해야합니다 :

sqoop -Dmap.retry.exponentialBackOff=TRUE -Dmap.retry.numRetries=10 import --connect ...

예상대로 서로 다른 위치가 작동하지 않습니다 유의하시기 바랍니다.

2012-11-14 22:34:30

이것은 나에게 적합하지 않습니다 ... sqoop 1.46. – joefromct

답변