나는 하나의 마스터와 4 개의 slave.Now를 이미 설치 했었던 hadoop 클러스터를 설치하려고 시도 중이다. 이제 여분의 마스터와 여분의 슬레이브를 만들려고 노력 중이다. 클러스터에 2 개의 마스터 (중복 마스터) 및 중복 슬레이브를 만들려면 어떻게합니까? 도와주세요 ..hadoop (2 개의 마스터와 4 개의 슬레이브)에서 멀티 마스터 노드를 설정하는 방법은 무엇입니까?
여분의 슬레이브가 필요하지 않습니다. 더 많은 작업자를 추가하고 hdfs 클러스터의 균형을 조정하십시오. hdfs는 블록 복제 설정에 따라 작업자간에 자동으로 복제됩니다 (기본값 : 3). 보조 namenode (master-slave)가 hadoop 2로 시작하여 개선되었지만 사용하는 버전을 알지 못합니다. 당신은 definatelly 이것을 읽어야합니다 http://hadoop.apache.org/docs/r2.3.0/hadoop-yarn/hadoop-yarn-site/HDFSHighAvailabilityWithNFS.html
하시기 바랍니다, 당신은 hdfs 고 가용성에 대한 몇 가지 기본적인 아이디어를 줄 수 있습니까? 그것은 깊이 들어가는 데 도움이 될 것입니다. –
HDFS High Availability는 핫 스탠바이가있는 액티브/패시브 구성의 동일한 클러스터에서 두 개의 중복 NameNodes (마스터 노드)를 실행하는 옵션을 제공합니다. Hadoop 2.0 이전에는 NameNode (마스터 노드)가 클러스터의 단일 실패 지점이었습니다. 슬레이브는 데이터를 복제하므로 (HDFS 블록 복제) NameNode에 대한 중복 만 필요하므로 하나가 다운되면 다른 슬레이브에서 사용할 수있게됩니다. 네임 노드는 슬레이브가 다운되었을 때를 알고 있고 다른 노드에서 블록을 읽음으로써 데이터 처리를 계속할 수 있습니다. –