Hadoop运行MapReduce命令卡住的问题

最新推荐文章于 2024-03-06 16:45:53 发布

My和风大福

最新推荐文章于 2024-03-06 16:45:53 发布

阅读量873

点赞数

分类专栏：学习资料

本文链接：https://blog.csdn.net/imjavaxb/article/details/103597367

版权

学习资料专栏收录该内容

36 篇文章 0 订阅

订阅专栏

我的原因是fair-scheduler.xml文件没有配置，配置好后便可正常使用。

配置如下：

yarn-site.xml:

<property>
    <name>yarn.resourcemanager.scheduler.class</name>
    <value>org.apache.hadoop.yarn.server.resourcemanager.scheduler.fair.FairScheduler</value>
</property>

然后是 fair-scheduler.xml：

<?xml version="1.0"?>
<allocations>
<defaultQueueSchedulingPolicy>fair</defaultQueueSchedulingPolicy>
        <queue name="prod">
                <weight>40</weight>
                <schedulingPolicy>fifo</schedulingPolicy>
        </queue>
        <queue name="dev">
                <weight>60</weight>
                <queue name="eng"/>
                <queue name="science"/>
        </queue>
</allocations>

其它节点进行同样的配置即可。