![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 57
Luxury奢华家
这个作者很懒,什么都没留下…
展开
-
HDFS架构
1 Master(NameNode/NN) 带 N个Slaves(DataNode/DN)HDFS/YARN/HBase1个文件会被拆分成多个Blockblocksize:128M130M ==> 2个Block: 128M 和 2MNN:1)负责客户端请求的响应2)负责元数据(文件的名称、副本系数、Block存放的DN)的管理DN:1)存储用户的文件对应的数据块(Block)2)要定期向...原创 2018-05-02 14:56:39 · 157 阅读 · 0 评论 -
Hadoop起步-0-Linux下配置hadoop步骤
Linux下配置hadoop步骤1. 配置JDK vim /etc/profile export JAVA_HOME=/usr/java/jdk1.8.0_111 export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib export PATH=$JAVA_H...原创 2016-12-31 18:43:52 · 454 阅读 · 0 评论