0
저는 Hadoop에서 새롭고, Hadoop HDFS로 mesos를 설치하여 내결함성 분산 파일 시스템을 만들 필요가 있습니다. 그러나 모든 설치 참조에는 예를 들어 MapReduce와 같은 시나리오에 필요한 구성 요소가 포함되어 있습니다.Hadoop HDFS 만 설치할 수 있습니까?
이것에 대한 아이디어 나 참고 사항이 있으십니까?
A
답변
2
절대적으로 가능합니다. Hadoop을 설치 가능한 프로그램으로 생각하지 마십시오. 단지 클러스터 내의 다른 노드에서 실행되는 일련의 Java 프로세스로 구성됩니다.
hadoop 타르 볼을 사용하는 경우 HDFS 만 원하는 경우 NameNode 및 DataNodes 프로세스를 실행할 수 있습니다.
다른 hadoop 배포판 (예를 들어 HDP)을 사용하는 경우 HDFS와 mapreduce가 다른 rpm 패키지에서 왔다고 생각하지만 두 rpm 패키지를 설치하는 것이 좋습니다. HDFS 만 필요한 경우 NameNode 및 DataNodes를 다시 실행하십시오.
관련 문제
- 1. HADOOP HDFS 불균형 문제
- 2. Hadoop HDFS 상태 추적
- 3. Hadoop HDFS 백업
- 4. Hadoop HDFS 저장소 위치
- 5. 'hadoop hdfs -get'파일 압축
- 6. 이미지 저장을위한 Hadoop (HDFS)
- 7. hadoop HDFS 파일 업데이트
- 8. Hadoop hdfs cat 파이프 edgenode from hdfs
- 9. Hadoop HDFS MapReduce에서 MongoDb로 출력
- 10. 파일의 Hadoop HDFS 이름 변경
- 11. hadoop/HDFS : 여러 프로세스에서 같은 파일에 쓸 수 있습니까?
- 12. HDFS 및 Hadoop 클러스터없이 MapReduce를 로컬로 실행할 수 있습니까?
- 13. Hadoop HDFS PutMerge가 작동하지 않습니다.
- 14. Hadoop HDFS 최대 파일 크기
- 15. Systemd Hdfs 서비스 [hadoop] - 시작
- 16. 와일드 카드가있는 Hadoop HDFS 카피?
- 17. 어떻게 hdfs 용량을 늘릴 수 있습니까
- 18. Hadoop HDFS - 잘못된 FS : hdfs : //0.0.0.0 : 9000 ... 예상 됨 : file : ///
- 19. 하나의 hadoop MR 작업을위한 복수의 HDFS 소스
- 20. 터미널에서 hadoop hdfs 테스트 케이스를 실행하는 방법
- 21. SpagoBI를 Apache Hadoop (hdfs)에 연결하는 방법
- 22. hadoop HDFS blcok 크기 고려 사항
- 23. 가상 배포 된 hadoop 모드에서 hdfs 관리
- 24. Hadoop HDFS 명령 - 디렉토리 이름 바꾸기
- 25. /var/log/hadoop-hdfs에서 hadoop-hdfs 로그를 정리하는 방법
- 26. Hadoop/HDFS 데이터로드에 대한 추가 정보
- 27. 다중 노드 Hadoop 클러스터의 HDFS 스트레스 테스트
- 28. hadoop/hdfs 클러스터에 mac을 연결하는 방법
- 29. 데이터 버전 관리 (Hadoop, HDFS, Hbase 백엔드)
- 30. Hadoop : 형식이/mnt/hdfs/1/namenode에서 중단되었습니다.
좋아요, thks @ zhutoulala ... 이걸 만들려면 튜토리얼을 알고 있습니까? – kikicarbonell
http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-multi-node-cluster/ 가장 인기있는 것 중 하나입니다. – zhutoulala
나는 postgres의 인스턴스를 하나 가지고 있으며, 데이터 파일은 HDFS에 저장됩니다. 가능합니까? 나는 당신의 링크와 다른 문서를 읽을 때 모두 hadoop 명령을 사용하여 HDFS에서 읽기/쓰기의 방식을 보여주기 때문에 확실하지 않습니다. HDFS의 읽기/쓰기 작업은 사용자에게 투명하지 않습니다. – kikicarbonell