0
에서 데이터 노드의 크기를 지정할 수 있습니까? 나는 수평 확장성에 영향을 미친다는 것을 알고 있습니다.우리는 HDFS 파일 시스템
A
답변
1
HDFS는 연결된 데이터 노드만큼 크기 때문에 더 많은 하드웨어를 추가하면 크기가 지정됩니다.
적어도 특정 작업에 특정 크기의 디스크를 할당하는 것이 아니라 파티션을 분할 할 수있는 디스크와 다릅니다.
관련 문제
- 1. HDFS 원자 이름 변경 파일 시스템 종속성
- 2. hadoop hdfs 파일 시스템 이름 변경에 관하여
- 3. 지도에서 hadoop 파일 시스템 (HDFS)에 쓰기가 가능하지 않습니다.
- 4. 데이터 이동 HDFS 대 병렬 파일 시스템 대 MPI
- 5. HDFS 시퀀스 파일 성능 튜닝
- 6. 파일 이름 바꾸기 HDFS
- 7. eclipse에서 HDFS 파일 읽기
- 8. 브라우저에서 HDFS 파일 열기
- 9. HDFS 파일 비교
- 10. Hdfs 파일 사용 권한
- 11. HDFS 시퀀스 파일 생성
- 12. 2 Hdfs 파일 비교
- 13. 내부적으로 HDFS 파일 압축
- 14. hadoop HDFS 파일 업데이트
- 15. 여러 파일 스트리밍 hdfs
- 16. HDFS 파일 처리
- 17. 설치 하둡 파일 시스템
- 18. HBase + HDFS - hdfs 블록이 누락되었습니다.
- 19. 내가 내 로컬에 파일 a.txt이이 HDFS
- 20. 파일 시스템
- 21. 수로 HDFS 싱크는 작은 파일
- 22. Hadoop HDFS 최대 파일 크기
- 23. spark에서 hdfs 파일 경로 얻기
- 24. Windows에서 HDFS 안팎으로 파일 전송
- 25. Hadoop 파일 시스템 카운터 이해하기
- 26. HADOOP HDFS 불균형 문제
- 27. FileSystem과 FileContext는 hdfs/localFS에서 파일 작업을 수행합니까?
- 28. HDFS 대 LFS - Hadoop Dist. 파일 시스템은 로컬 파일 시스템 위에 구축됩니까?
- 29. 는 "mount.nfs을 : 시스템 호출이 실패 마운트"얻기 HDFS
- 30. NoSQL없이 HDFS
그래서'datanode' 하드 디스크가 꽉 찼다 고 말하면'datanode'에 의해 데이터가 복사 될 것입니다. 해당 데이터의 주소를 'namenode'의 메타 데이터에 보관합니까? – Vishrant
기본적으로 3 개의 HDFS 블록이 모든 데이터 노드에 복사되며 메타 데이터는 해당 블록이있는 위치의 namenode에 의해 관리됩니다. 따라서 모든 데이터 노드 디스크의 크기가 같을 경우 하나의 데이터 노드가 가득 차면 전체 클러스터가 거의 꽉 찼음을 나타냅니다. 이 경우 HDFS가 종료되고 공간 부족으로 더 많은 글을 허용하지 않을 것이라고 생각합니다. –