- 博客(4)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 hadoop2安装错误记录
错误1：发生在向hdfs中上传文件的过程当中，具体情况是提示文件一直处于复制上传的过程中，消耗很大的时间。错误如下： 2015-06-30 09:29:45,020 INFO org.apache.hadoop.hdfs.server.namenode.FileJournalManager: Finalizing edits file /home/lin/hadoop-2.5.2/tmp/dfs
2015-07-07 09:17:53
2206
原创 yarn-resource.java阅读笔记
RecordFactory.java 中内容，实现对record实例的初始化 @LimitedPrivate({ "MapReduce", "YARN" }) @Unstable public interface RecordFactory { public T newRecordInstance(Class clazz); } Record.java /*
2015-07-05 00:17:10
650
转载 @Override的思考
在Java中如果我们需要重载父类的方法，并且为了确保我们重载的该方法没有错误就会使用到@Override。它能够保住程序自动进行检测重载该方法是否正确，是否存在拼写错误等。 Override 是一个标记注释之类的类，java.lang.Override用作标注方法，它说明了被标注的方法重载了父类的方法，起到了断言的作用。如果我们使用了这种annotation在一个没有覆盖父类方法的方法时，jav
2015-07-04 23:02:23
294
转载 Yarn简单介绍及内存配置
在这篇博客中，主要介绍了Yarn对MRv1的改进，以及Yarn简单的内存配置和Yarn的资源抽象container。 我么知道MRv1存在的主要问题是：在运行时，JobTracker既负责资源管理又负责任务调度，这导致了它的扩展性、资源利用率低等问题。之所以存在这样的问题，是与其最初的设计有关，如下图： 从上图可以看到，MRv1是围绕着MapReduce进行，并没有过多地考虑以后出现的
2015-07-04 20:53:10
671
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人