关于Hadoop中每个节点的MapTask任务分配不均的问题

修改yarn-site.xml配置文件即可，关于这些参数说明，网上资源还是很多，这里先不多说了。我的Hadoop版本为2.7.7，不同版本配置参数略有不同。

<property>
	<name>yarn.scheduler.minimum-allocation-mb</name>
	<value>250</value>
</property>
<property>
	<name>yarn.nodemanager.resource.memory-mb</name>
	<value>1100</value>
</property>

  一个节点上运行的任务数目主要由两个因素决定，一个是NodeManager可使用的资源总量，一个是单个任务的资源需求量，比如一个NodeManager上可用资源为8 GB内存，8 cpu，单个任务资源需求量为1 GB内存，1cpu，则该节点最多运行8个任务。NodeManager上可用资源是由管理员在配置文件yarn-site.xml中配置的，相关参数如下：
    yarn.nodemanager.resource.memory-mb：总的可用物理内存量，默认是8096
    yarn.nodemanager.resource.cpu-vcores：总的可用CPU数目，默认是8
对于任务的相关参数如下：
    yarn.scheduler.minimum-allocation-mb：最小可申请内存量，默认是1024
    yarn.scheduler.minimum-allocation-vcores：最小可申请CPU数，默认是1
    yarn.scheduler.maximum-allocation-mb：最大可申请内存量，默认是8096
    yarn.scheduler.maximum-allocation-vcores：最大可申请CPU数，默认是4