[老达笔记]Hadoop
Ginoy
这个作者很懒,什么都没留下…
展开
-
Hadoop组件
Hadoop组件角色组成 Hadoop的集群主要由 NameNode,DataNode,Secondary NameNode,JobTracker,TaskTracker组成。 (1)NameNode中记录了文件是如何被拆分成block以及这些block都存储到了那些DateNode节点. (2)NameNode同时保存了文件系统运行的状态信息. (3)DataNode中存储的是被拆分的b原创 2017-08-01 09:30:41 · 442 阅读 · 0 评论 -
CentOS免密登录设置
需求:学习hadoop 单机免密登录shell ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 会在/hadoop/home下生成 id_dsa id_dsa.pub 这连个文件 然后进行 [hadoop@SOC-15 ~]$ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys [hadoop@SOC-15原创 2017-11-10 10:22:40 · 1034 阅读 · 0 评论 -
STORM入门之(集成HDFS)
总体 Storm集成hdfs需要做前期工作 1.hadoop单机版安装 2.自己写hdfs demo 查看是否写入成功 首先让我们来安装hadoop 版本:hadoop-native-64-2.6.0.tar jdk:1.7 Hadoop部分 (1)hadoop配置文件修改 core-site.xml hadoop.tmp.di原创 2017-11-14 13:58:37 · 900 阅读 · 0 评论