hadoop
brandonroy347
这个作者很懒,什么都没留下…
展开
-
启动datanode后jps下无datanode的解决方法
一般这种情况是由于多次的namenode格式化引起的,解决办法就是将hadoop/data/current/VERSION文件删掉然后重新启动datanode sbin/hadoop-daemon.sh start datanode原创 2015-10-10 20:53:58 · 1703 阅读 · 0 评论 -
maven构建本地环境的hadoop错误
[ERROR] Failed to execute goal org.apache.maven.plugins:maven-javadoc-plugin:2.8.1:jar (module-javadocs) on project hadoop-maven-plugins: MavenReportException: Error while creating archive: [ERROR] E原创 2015-10-09 13:56:35 · 540 阅读 · 0 评论 -
hadoop yarn配置的一点小问题
hadoop2.x中的yarn配置的项都比较多,因此需要比较小心,一个不小心输错了,错误比较难发现,本人最近几天就在配置yarn的过程中遇到了一些问题,找了很久才发现问题所在。首先在启动namenode之后启动yarn然后jps一下 发现是有resourcemanager和namenode的,但是再jps一下就发现resourcemanager没有了,再看其他节点上,nodemanager都还在,原创 2016-04-10 12:27:43 · 395 阅读 · 0 评论 -
hadoop源码之hdfs(1)---通信协议
说起hadoop这个东西,只能说真是个伟大的发明,而本人对cutting大神也是无比的崇拜,记得刚接触hadoop的时候,还觉得这个东西挺多余的,但是现在想想,这个想法略傻逼...... 2006-2016,hadoop至今已经走过了10个年头,版本也已经发展到2.7了,现在hadoop3.0也快出来了,虽然spark,flink这些优秀的框架近几年的势头非常的强劲,但是我认为,近几年内并不原创 2016-11-26 12:53:10 · 2867 阅读 · 0 评论