hadoop
文章平均质量分 80
行走江湖的文艺猿
程序员的价值并不是编码能力,而是独立思考、不断学习、解决问题的能力。
展开
-
eclipse使用hadoop来统计单词的个数
说明:eclipse4.5 hadoop2.6 ubuntu。 事先已经在eclipse中配置了hadoop的插件 我们可以用命令直接使用hadoop安装路径中的example下的woedconnt来统计单词的格式。但是我们为了了解hadoop统计单词的过程,就需要对它的源码进行分析。 hadoop的核心就是HDFS和MapReduce。下面让我们来看看hadoop单词统计的代原创 2015-10-10 09:37:35 · 1606 阅读 · 0 评论 -
hadoop中NameNode、DataNode、Secondary、NameNode、JobTracker TaskTracker介绍
问题导读: 1.job的本质是什么? 2.任务的本质是什么? 3.文件系统的Namespace由谁来管理,Namespace的作用是什么? 4.Namespace 镜像文件(Namespace image)和操作日志文件(edit log)文件的作用是什么? 5.Namenode记录着每个文件中各个块所在的数据节点的位置信息,但是他并不持久化存储这些信息,为什么? 6.客户端读写某个数转载 2015-10-10 10:04:25 · 774 阅读 · 1 评论