一键启动zookeeper、hadoop、hbase、hive、spark集群（shell脚本）

前言

继一键启动zookeeper、hadoop、hbase集群（shell脚本）增添hive，spark组件

一键启动

文件名： start-cluster.sh

vim start-cluster.sh

 插入以下内容：

#! /bin/bash
 
echo -e "\033[31m ————————————————hadoop生态圈启动中————————————————\033[0m"
sleep 1

echo -e "\033[34m ————————————————启动zookeeper中————————————————\033[0m"
for host in master slave1 slave2
do
	ssh root@$host "source /etc/profile; /usr/zookeeper/zookeeper-3.4.10/bin/zkServer.sh start"
done
echo -e "\033[34m ————————————————启动zookeeper完成————————————————\033[0m"
sleep 1
 
echo -e "\033[34m ————————————————启动hadoop中———————————————— \033[0m"
/usr/hadoop/hadoop-2.7.3/sbin/start-all.sh
echo -e "\033[34m ————————————————启动hadoop完成———————————————— \033[0m"
sleep 1

echo -e "\033[34m ————————————————等待30秒hdfs安全模式退出———————————————— \033[0m"
sleep 30

echo -e "\033[34m ————————————————启动hbase中———————————————— \033[0m"
/usr/hbase/hbase-1.2.4/bin/start-hbase.sh
echo -e "\033[34m ————————————————启动hbase完成———————————————— \033[0m"
sleep 1

echo -e "\033[34m ————————————————启动metastore和hiveserver2中———————————————— \033[0m"
ssh root@slave1 "nohup /usr/hive/apache-hive-2.1.1-bin/bin/hive --service metastore  > /dev/null 2>&1 &
nohup /usr/hive/apache-hive-2.1.1-bin/bin/hive --service hiveserver2  > /dev/null 2>&1 &"
echo -e "\033[34m ————————————————启动metastore和hiveserver2完成———————————————— \033[0m"
sleep 1

echo -e "\033[34m ————————————————启动spark中———————————————— \033[0m"
/usr/spark/spark-2.4.0-bin-hadoop2.7/sbin/start-all.sh
echo -e "\033[34m ————————————————启动spark完成———————————————— \033[0m"
sleep 1

echo -e "\033[34m ————————————————hadoop生态圈服务检测————————————————\033[0m"
sleep 1

echo -e "\033[34m ————————————————master———————————————— \033[0m"
jps
/usr/zookeeper/zookeeper-3.4.10/bin/zkServer.sh status
sleep 1

echo -e "\033[34m ————————————————slave1———————————————— \033[0m"
ssh root@slave1 "source /etc/profile;jps;/usr/zookeeper/zookeeper-3.4.10/bin/zkServer.sh status"
sleep 1

echo -e "\033[34m ————————————————slave2———————————————— \033[0m"
ssh root@slave2 "source /etc/profile;jps;/usr/zookeeper/zookeeper-3.4.10/bin/zkServer.sh status"
sleep 1

echo -e "\033[31m ————————————————hadoop生态圈启动完毕———————————————— \033[0m"

需要在root下给该文件赋予启动的权限

chmod +x start-cluster.sh

将文件移动到/usr/bin目录下

mv start-cluster.sh /usr/bin/

 

一键启动：

start-cluster.sh