hadoop集群有统一启动的命令
start-all.sh 启动全部进程
stop-all.sh 停止全部进程
hadoop如果用cdh版本 + Cloudera Manager界面化管理,直接在界面上点击按钮即可启动集群。
而storm集群有多个进程在运行,只能运行以下命令逐一去停止
kill -9 进程id
这样子很不方便,可以采用shell脚本来启停所有storm进程。
日志查看
0.9.0版本开始storm增加了一个很给力的特性logviewer,在早期的版本里,查看worker节点的日志决定于worker节点的位置(host/port),典型的是通过storm UI,然后用ssh连接那台主机查看改主机上worker的日志文件。
在最新的日志查看机制里,现在可以很容易的去访问一个指定worker节点的日志,你只需要在浏览器的storm UI里点击worker的port就可以。
新的logviewer进程与supervisor是相对独立的进程,如果是在新的storm里启动了它,你只需要在集群的supervisor节点执行如下命令
storm logviewer
另外,0.9以后的storm新版本里面大量使用slf4j的API,而有些storm的依赖库或storm的使用者则依赖于log4j的API。所以现在storm改为依赖于log4j-over-slf4j,他可以在log4j和slf4j之间架起一座桥梁。
案例实践:
1、启动zookeeper集群,启动storm集群,启动ui
2、在nimbus启动topology任务
./storm jar /opt/datas/stormjars/storm-starter-0.0.1-SNAPSHOT-jar-with-dependencies.jar lock.PVTopo PVTopo
3、浏览器打开监控界面