namenode -format hdfs에서 파일 삭제

sqoop 명령으로 mysql에서 HDFS로 데이터를 성공적으로 업로드했습니다.namenode -format hdfs에서 파일 삭제

MySQL의 하둡 클러스터 내가 하둡 클러스터를 중지 Namename의 보조 네임 노드 Datanade + Tasktracker 그 후

에 대한 JobTracker에 3 개 노드에 대한 1 노드에 대한 1 노드를

1 노드가 있습니다. 다시

그리고

가 손실 될 것으로 보인다 HDFS에 데이터 노드 내 업로드 MYSQL 데이터를 시작하는 동안 명령

namenode -format (start NameNode) 

    place new VERSION number in all datanode VERSION FILE 

    now START DATANODE

아래 사용 하둡

을 시작합니다.

다음은 데이터 노드 로그의 출력입니다. 나는 모든 데이터 노드에 네임 노드의 새 버전을 변경하면

아래로

는

2014-05-15 07:46:56,018 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_2445513848423894029_1337 at file /app/hadoop/data/dn/current/blk_2445513848423894029 
2014-05-15 07:46:56,018 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_3541234094053021888_1338 at file /app/hadoop/data/dn/current/blk_3541234094053021888 
2014-05-15 07:46:56,018 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_3862391472172526583_1347 at file /app/hadoop/data/dn/current/blk_3862391472172526583 
2014-05-15 07:46:56,018 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_4001223662527683746_1387 at file /app/hadoop/data/dn/current/blk_4001223662527683746 
2014-05-15 07:46:56,018 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_4143551839757190038_1410 at file /app/hadoop/data/dn/current/subdir14/blk_4143551839757190038 
2014-05-15 07:46:56,019 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_5292612097544035620_1384 at file /app/hadoop/data/dn/current/blk_5292612097544035620 
2014-05-15 07:46:56,019 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_5318982235915332439_1333 at file /app/hadoop/data/dn/current/blk_5318982235915332439 
2014-05-15 07:46:56,019 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_5806860765395122737_1388 at file /app/hadoop/data/dn/current/blk_5806860765395122737 
2014-05-15 07:46:56,019 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_6490571696460682483_1302 at file /app/hadoop/data/dn/current/blk_6490571696460682483 
2014-05-15 07:46:56,020 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_7721528058087862562_1336 at file /app/hadoop/data/dn/current/blk_7721528058087862562 
2014-05-15 07:46:56,020 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_7734832800955956873_1375 at file /app/hadoop/data/dn/current/blk_7734832800955956873 
2014-05-15 07:46:56,020 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_8691928504867292802_1297 at file /app/hadoop/data/dn/current/blk_8691928504867292802 
2014-05-15 07:46:56,020 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_8861743153245195509_1303 at file /app/hadoop/data/dn/current/blk_8861743153245195509 
2014-05-15 07:46:56,021 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_8921828525927242630_1300 at file /app/hadoop/data/dn/current/blk_8921828525927242630 
2014-05-15 07:46:56,021 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Deleted blk_8938258584084219299_1344 at file

출처

2014-05-15 chintoo02018

** 특정 질문 **을 말하면 사용자는 도움이 필요한 정보를 정확히 알 수 있습니다. – Daniel

무엇을 원하십니까 ...... 오류에 대한 자세한 정보를 입력하십시오 –

세 번째 단계는 무엇입니까? "모든 데이터 노드 버전 파일에 새 VERSION 번호를 입력하십시오"? – vefthym

내 질문. 및 데이타 노드를 시작, 업로드 된 모든 RDBMS 데이터가 로그 파일에 다음 오류 삭제 "파일에 blk_6490571696460682483_1302을 삭제/응용 프로그램/하둡/데이터/DN/전류/blk_6490571696460682483"

우리가 Haddop FS -format 명령은 사용할 때 내 질문입니다 모든 데이터 포맷, 데이터를 복구하는 방법이 있습니까

출처

2014-05-17 16:22:04 chintoo02018

질문을 편집하여 추가 정보를 제공하고이 섹션을 코멘트에 사용하지 마십시오. – Tariq

원본 질문에 정보 추가 – chintoo02018

namenode -format hdfs에서 파일 삭제

답변

관련 문제