欢迎投稿

今日深度:

Hadoop的调度器,

Hadoop的调度器,


我在使用Hadoop2.2的时候,默认没有配置调度器也可以运行MR,但是当同时运行多个Job的时候,发现只有一个Job在运行,其他的Job都处于等待状态。此时需要配置调度器

1.在$HADOOP_HOME/etc/hadoop/yarn-site.xml配置文件里简单配置如下

<property> 
  <name>yarn.resourcemanager.scheduler.class</name> 
  <value>org.apache.hadoop.yarn.server.resourcemanager.scheduler.fair.FairScheduler</value> 
</property>
经过上面的配置之后,重启Hadoop集群,此时MR的Job可以并行执行了。

www.htsjk.Com true http://www.htsjk.com/Hadoop/41677.html NewsArticle Hadoop的调度器, 我在使用Hadoop2.2的时候,默认没有配置调度器也可以运行MR,但是当同时运行多个Job的时候,发现只有一个Job在运行,其他的Job都处于等待状态。此时需要配置调度器...
相关文章
    暂无相关文章
评论暂时关闭