集群各组件的开启与关闭

---

开启

/export/servers/zookeeper-3.4.9/bin/zkServer.sh start 三台
sbin/start-dfs.sh 第一台
sbin/start-yarn.sh 第一台
sbin/mr-jobhistory-daemon.sh start historyserver 第一台

/etc/init.d/mysqld start 开启mysql 第三台

bin/hive --service metastore &
/bin/hive 第三台
nohup bin/hive --service metastore &
nohup bin/hive --service hiveserver2 &

########Impala
主节点 node03 启动以下三个服务进程
service impala-state-store start
service impala-catalog start
service impala-server start
从节点启动 node01 与 node02 启动 impala-server
service impala-server start
ps -ef|grep impala
/var/log/impala目录下执行 impala-shell
关闭改成stop
#############

########开启hue
cd /export/servers/hue-3.9.0-cdh5.14.0/
build/env/bin/supervisor
http://node01:8888/

################
–/export/servers/azkaban/azkaban-db-0.1.0-SNAPSHOT/create-all-sql-0.1.0-SNAPSHOT.sql

#########azkaban
solo模式(第三台)
bin/start-solo.sh 在/export/servers/azkaban/azkaban-solo-server-0.1.0-SNAPSHOT文件夹里

开启tow-server模式(第二台)
bin/start-exec.sh 在/export/servers/azkaban/azkaban-exec-server-0.1.0-SNAPSHOT目录下执行
curl -G “node02:$(<./executor.port)/executor?action=activate” && echo 在 /export/servers/azkaban/azkaban-exec-server-0.1.0-SNAPSHOT 目录下执行
bin/start-web.sh 在/export/servers/azkaban/azkaban-web-server-0.1.0-SNAPSHOT 目录下执行
jps查看azkaban是否启动
https://node02:8443/

关闭tow-server模式(第二台)
bin/shutdown-exec.sh 在/export/servers/azkaban/azkaban-exec-server-0.1.0-SNAPSHOT目录下执行
bin/shutdown-web.sh 在/export/servers/azkaban/azkaban-web-server-0.1.0-SNAPSHOT 目录下执行

multiple-executor模式
第二台开启bin/start-exec.sh 在/export/servers/azkaban/azkaban-exec-server-0.1.0-SNAPSHOT目录下执行
第二台 curl -G “node-3:KaTeX parse error: Expected 'EOF', got '&' at position 46: …tion=activate" &̲& echo 在/expor…(<./executor.port)/executor?action=activate” && echo 在/export/servers/azkaban/azkaban-exec-server-0.1.0-SNAPSHOT目录下执行
第二台 bin/start-web.sh 在/export/servers/azkaban/azkaban-web-server-0.1.0-SNAPSHOT 目录下执行
#################
src/redis-server redis.conf
redis-cli -h node01

bin/start-hbase.sh 第一台

bin/hbase shell

删除hive外部表
ALTER TABLE xxx SET TBLPROPERTIES(‘EXTERNAL’=‘False’);
drop table xxx;
删除hive外部表方式二：
drop table xxx;
hadoop fs -rm -f /user/hive/warehouse/course.db/score/hive-hbase.txt

set hive.cli.print.header=true; // 打印列名

前台启动 kafka
bin/kafka-server-start.sh config/server.properties
后台启动kafka（三台）
nohup bin/kafka-server-start.sh config/server.properties 2>&1 &

关闭kafka（三台）
bin/kafka-server-stop.sh

es(三台) 用es 用户
sudo sysctl -w vm.max_map_count=262144
nohup /export/servers/es/elasticsearch-6.7.0/bin/elasticsearch 2>&1 &
http://node01:9200/?pretty

开启elasticsearch-head
cd /export/servers/es/elasticsearch-head/node_modules/grunt/bin/
nohup ./grunt server >/dev/null 2>&1 &
http://192.168.100.100:9100/
关闭elasticsearch-head
netstat -nltp | grep 9100
kill -9 。。。

启动kibana （第一台）
cd /export/servers/es/kibana-6.7.0-linux-x86_64
nohup bin/kibana >/dev/null 2>&1 &
http://node01:5601
查看进程号
ps -ef | grep node
然后使用kill -9杀死进程即可

---

关闭

sbin/stop-yarn.sh
sbin/stop-dfs.sh
sbin/mr-jobhistory-daemon.sh stop historyserver
/export/servers/zookeeper-3.4.9/bin/zkServer.sh stop

关闭 hive
ps -aux|grep hive 然后kill 掉

关闭kafka
bin/kafka-server-stop.sh

######impala
主节点 node03 关闭以下三个服务进程
service impala-state-store stop
service impala-catalog stop
service impala-server stop
从节点启动 node01 与 node02 关闭 impala-server
service impala-server stop