cloudstrice-CSDN博客

原创 redis伪集群搭建

1、上传安装包put -r "D:\redis-3.0.0-rc2.tar.gz"2、解压安装包tar -zxvf redis-3.0.0-rc2.tar.gz -C ~/apps/3、编译、安装cd /root/apps/redis-3.0.0-rc2makemake install4、创建集群目录mkdir -p /usr/local/redis-clustercd /usr/local/re...

2018-05-10 20:38:22 158

原创 spark集群搭建

1、上传安装包把安装包上传到服务器put -r "D:\spark-2.3.0-bin-hadoop2.7.tgz"2、解压缩安装包tar -zxvf spark-2.3.0-bin-hadoop2.7.tgz -C ~/apps/3、修改配置文件（1）hadoop相关配置文件可参照《hadoop高可用集群搭建（三）》一文（2）spark-env.sh进入spark配置文件目录cd /root/a...

2018-05-08 10:16:56 174

原创 hive搭建

1、上传安装包把安装包上传到服务器put -r "D:\apache-hive-2.3.2-bin.tar.gz"2、解压缩安装包tar -zxvf apache-hive-2.3.2-bin.tar.gz -C ~/apps/3、修改配置文件进入hive配置文件目录cd /root/apps/apache-hive-2.3.2-bin/confvim hive-site.xml<confi...

2018-05-08 10:10:04 138

原创 kafka集群搭建

1、上传安装包把安装包上传到服务器put -r "D:\kafka_2.11-0.8.2.0.tgz"2、解压缩安装包tar -zxvf kafka_2.11-0.8.2.0.tgz -C ~/apps/3、配置kafka环境变量vim /etc/profileexport KAFKA_HOME=/root/apps/kafka_2.11-0.8.2.0export PATH=$PATH:$KAF...

2018-05-08 09:57:22 106

原创 hbase集群搭建

1、上传安装包把安装包上传到服务器put -r "D:\hbase-1.2.6-bin.tar.gz"2、解压缩安装包tar -zxvf hbase-1.2.6-bin.tar.gz -C ~/apps/3、修改配置文件进入hbase配置文件目录cd /root/apps/hbase-1.2.6/conf待修改的文件：hbase-env.shhbase-site.xmlregionserversb...

2018-03-29 13:52:17 181

原创 HDFS集群机架感知配置

进入配置文件目录cd /root/apps/hadoop-2.7.5/etc/hadoop1、修改配置文件core-site.xmlvim core-site.xml<configuration> <property> <name>topology.script.file.name</name> <value>/root/apps/h...

2018-03-28 20:31:38 422

原创 zookeeper集群搭建

1、集群环境准备zookeeper的节点数量不适宜太多，也不适宜太少，最好是奇数个。准备的zookeeper集群的节点个数有4个：hadoop01，hadoop02，hadoop03，hadoop04。zookeeper集群不用依赖于任何东西，除了JDK。2、安装（1）解压到对应的安装目录tar -zxvf zookeeper-3.4.10.tar.gz -C apps/（2）修改配置文件进入配置...

2018-03-24 14:49:01 139

原创 hadoop高可用集群搭建（三）

1、准备好四台服务器，做好规划规划安装的用户： root 规划安装目录：/root/apps规划数据目录：/root/data2、获取安装包把安装包上传到服务器put -r "D:\hadoop-2.7.5-centos-6.7.tar.gz"3、解压缩tar -zxvf hadoop-2.7.5-centos-6.7.tar.gz -C ~/apps/4、修改配置文件进入配置文件目录cd /ro...

2018-03-24 14:12:49 197

原创 hadoop集群搭建（二）

1、准备好四台服务器，做好规划规划安装的用户： root 规划安装目录：/root/apps规划数据目录：/root/data 2、获取安装包把安装包上传到服务器 put -r "D:\hadoop-2.7.5-centos-6.7.tar.gz"3、解压缩tar -zxvf hadoop-2.7.5-centos-6.7.tar.gz -C ~/apps/4、修改配置文件进入配置文件目录cd...

2018-03-24 11:25:58 161

原创 hadoop环境搭建（一）

准备搭建的四台服务器的主机名分别是：hadoop01, hadoop02, hadoop03, hadoop041、修改各服务器的主机名在root账号下用命令：vi /etc/sysconfig/network将HOSTNAME修改为hadoop01，保存退出即可2、配置各服务器的IP修改网卡vi /etc/udev/rules.d/70-persistent-net.rules删除eth0将et...

2018-03-24 10:43:05 132

cloudstrice的博客