目前,Hadoop作业调度器主要有三种:资源调度器FIFO(先进先出)、Capacity Scheduler(容量调度器)和Fair Scheduler(公平调度器)。Hadoop2.7.2默认的资源调度器是Capacity Scheduler

具体设置详见:yarn-default.xml文件

<property>

    <description>The class to use as the resource scheduler.</description>

    <name>yarn.resourcemanager.scheduler.class</name>

<value>org.apache.hadoop.yarn.server.resourcemanager.scheduler.capacity.CapacityScheduler</value>

</property>

1.先进先出调度器(FIFO),如图所示

浅析Hadoop的三个作业调度器

2.容量调度器(Capacity Scheduler),如图28所示

浅析Hadoop的三个作业调度器

3.公平调度器(Fair Scheduler),如图所示

浅析Hadoop的三个作业调度器

总结:

浅析Hadoop的三个作业调度器

相关文章: