- 博客(4)
- 收藏
- 关注
RSS订阅原创 CentOS7安装Zookeeper3.4.11+HBase1.3.3
写在最前，本次环境搭建是在Hadoop2.6.1，三节点的基础上完成的。 （关于搭建Hadoop环境，可参考：https://blog.csdn.net/weixin_39400271/article/details/89057884） 说明： #master，表示在master节点上操作； #master，#slave1，#slave2，表示在三个节点上都要操作； 还有一点需要注...
2019-05-25 23:26:31
628
原创 Hadoop1.x的单点问题与Hadoop2.x HA原理
一、HDFS1.x架构图 对于HDFS1.x来讲，它的架构图由三个组件组成：NameNode、SecondaryNameNode和DataNode。 稍微了解过hadoop1.x的同学，就会知道hadoop1.x集群里面的资源管理和作业调度及监控都是有NameNode负责，一个集群，只有一台机器（Master）有NameNode进程，这就出现一个问题，当这个...
2019-05-18 12:06:53
456
原创 Hadoop2.x——Yarn原理
Hadoop2.x较Hadoop1.x来说，变化非常大，主要主要体现在Hadoop2.x引入了“Yarn”这个核心部件。 hadoop1.x有两大部件，HDFS和MadpReduce，其中HDFS（Hadoop Distributed Files System）用于分布式存储文件，便于集群中各机器从上面读取和写入文件（数据），MadpReduce则是Hadoo...
2019-05-11 11:22:28
765
原创 CentOS7安装scala2.11.8+spark2.0.2
说明： （ 1、安装JDK1.8+hadoop2.6+SSH：https://blog.csdn.net/weixin_39400271/article/details/89057884 2、安装hive1.2.2+mysql5.7：https://blog.csdn.net/weixin_39400271/article/details/89428165 ） Maste...
2019-05-08 22:29:51
502
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人