总结: 开启集群相关命令
1. 切换用户
su - hadoop
2. 启动hdfs集群
一键启动: start-dfs.sh
单进程启动:
hadoop-daemon.sh start (namenode|datanode|secondarynamenode)
hdfs --daemon start (namenode|datanode|secondarynamenode)
一键停止: stop-dfs.sh
单进程停止:
hadoop-daemon.sh stop (namenode|datanode|secondarynamenode)
hdfs --daemon stop (namenode|datanode|secondarynamenode)
角色: node1:9870
NameNode
DataNode
ScondaryNameNode
3. 启动YARN集群
一键启动 : start-yarn.sh
角色:
ResourceManager
NodeManager
WebAppProxyServer node1:8088
启动历史服务: mapred --daemon start historyserver
单进程启动: yarn --daemon start resourcemanager|nodemanager|proxyserver
一键关闭: stop-yarn.sh
单进程停止: yarn --daemon stop resourcemanager|nodemanager|proxyserver
停止历史服务: mapred --daemon stop historyserver
4. 启动hive
执行命令的位置: /export/server/hive
元数据管理(metastore) : nohup bin/hive --service metastore >> logs/metastore.log 2>&1 &
hiveserver2启动: nohup bin/hive --service hiveserver2 >> logs/hiveserver2.log 2>&1 &
– tail -f logs/hiveserver2.log
– ps -ef|grep 进程号 (ztsd/ metastore)
– netstat -anp|grep 10000
启动hive客户端shell: bin/hive
Beeline: bin/beeline
– 连接hive: ! connect jdbc:hive2:// node:10000
DataGrip
DBeaver