天天看點

YARN的Fair Scheduler和Capacity Scheduler

關于Scheduler

  YARN有四種排程機制:Fair Schedule,Capacity Schedule,FIFO以及Priority;

  其中Fair Scheduler是資源池機制,進入到裡面的應用是共享pool裡面的資源;隻有當資源配比發生緊張的時候,才會根據權重來進行調整;

  Capacity則是基于隊列的,每個隊列都會被配置設定資源比例,這種資源比例是固定;是以沒有資源共享的概念

  MapR,cloudera都是預設采用Fair Scheduler,Ambari(Hortonwork)預設使用Capacity Scheduler;