Yarn
xugen12
这个作者很懒,什么都没留下…
展开
-
Yarn简单介绍及内存配置
在这篇博客中,主要介绍了Yarn对MRv1的改进,以及Yarn简单的内存配置和Yarn的资源抽象container。 我么知道MRv1存在的主要问题是:在运行时,JobTracker既负责资源管理又负责任务调度,这导致了它的扩展性、资源利用率低等问题。之所以存在这样的问题,是与其最初的设计有关,如下图: 从上图可以看到,MRv1是围绕着MapReduce进行,并没有过多地考虑以后出现的转载 2015-07-04 20:53:10 · 682 阅读 · 0 评论 -
yarn-resource.java阅读笔记
RecordFactory.java 中内容,实现对record实例的初始化 @LimitedPrivate({ "MapReduce", "YARN" }) @Unstable public interface RecordFactory { public T newRecordInstance(Class clazz); } Record.java /*原创 2015-07-05 00:17:10 · 658 阅读 · 0 评论