![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据生态安装
你huai哦
一只学习大数据的菜鸟
展开
-
分布式HBase安装
前提分布式的Zookeeper已经已经安装好分布式Hadoop集群已经安装好上传文件将官网中下载的HBase上传到linux服务器主机上解压tar -zxvf hbase-2.2.5-bin.tar.gz修改配置文件配置JAVA_HOME在解压后的HBase目录中找到/conf/hbase-env.sh文件,修改这个文件,加入JAVA_HOME。根据自己的JDK配置AVA_HOME=/soft/jdk8配置hbase-site.xml文件位置:/conf/hbase-s原创 2020-09-01 15:17:30 · 93 阅读 · 0 评论 -
Yarn的HA配置
前提集群上有分布式的Zookeeper。修改配置文件etc/hadoop/yarn-site.xml修改内容如下:(其中的主机名根据自己的情况修改)<property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property> <!--配置yarn HA--> &l原创 2020-08-29 21:56:51 · 462 阅读 · 0 评论 -
结合Zookeeper的HDFS自动故障转移
前提安装了zookeeper。传送门配置了Hadoop的HA。传送门配置文件修改etc/hadoop/hdfs-site.xml添加以下内容<property> <name>dfs.ha.automatic-failover.enabled</name> <value>true</value> </property>etc/hadoop/core-site.xml添加以下内容(主机名根据自己的情况修改原创 2020-08-29 19:29:59 · 263 阅读 · 0 评论 -
hadoop HA的安装配置
前提已经安装了hadoop分布式集群。修改配置文件/etc/hadoop/hdfs-site.xml增加以下的配置内容:<!--配置集群的id--> <property> <name>dfs.nameservices</name> <value>mycluster</value></property><!--配置NameNode的标识符--><property> <原创 2020-08-29 16:57:09 · 200 阅读 · 0 评论 -
Zookeeper分布式安装
软件下载Zookeeper版本一般是越新越好。注意是带bin的文件传送门上传本人使用的filezilla.exe将文件上传到虚拟机。我上传的地方是/soft文件下解压缩tar -zxvf apache-zookeeper-3.5.8.tar.gz 创建文件夹我是在apache.zookeeper-3.5.8的文件下创建一个文件夹Data。命令可以随意取,这个文件夹是Zookeeper存储数据的目录mkdir Data配置进入到apache.zookeeper-3.5.8/con原创 2020-08-28 19:57:19 · 103 阅读 · 0 评论