1
hadoop에서 사용자 당 동시 감축 슬롯 수를 제한하는 방법이 있습니까? 우리는 한 명의 사용자가 언제든지 사용 가능한 모든 축소 슬롯을 사용하지 않도록하고자합니다.사용자 당 동시 감속기 수 제한
hadoop에서 사용자 당 동시 감축 슬롯 수를 제한하는 방법이 있습니까? 우리는 한 명의 사용자가 언제든지 사용 가능한 모든 축소 슬롯을 사용하지 않도록하고자합니다.사용자 당 동시 감속기 수 제한
이것은 FairScheduler in the current version of Hadoop을 사용하여 가능합니다. 사용자 당 하나의 풀을 할당 한 다음 maxReduces
을 설정할 수 있습니다. 그러나이 옵션은 FairScheduler with 0.20.203에서 사용할 수 없습니다. 이 버전은 편리하게 minReduces
없이 maxReduces
이 없습니다.
우리는 버전 0.20.203.1을 사용하고 있습니다. –
그냥 호기심 - 왜 슬롯을 줄이고 슬롯을 맵핑하지 않습니까? –