docker搭建storm集群

storm下载

docker pull storm

启动nimbus节点

docker run -d --restart always --name nimbus --link zookeeper:zookeeper -v /data/***/logs:/data/ storm storm nimbus

1. –link zookeeper:zookeeper 使用zookeeper容器，将其别名为zookeeper
2. -v /data/***/logs 为宿主机挂载路径 /data/ 为挂载到容器的路径
3. 挂载路径在使用集群Topology时会使用到 将应用打成jar包 丢到nimbus节点执行

启动supervisor节点

1. 启动第一个supervisor节点

docker run -d --restart always --name supervisor -p 8000:8000 -p 6700:6700 -p 6701:6701 --link zookeeper:zookeeper --link nimbus:nimbus storm storm supervisor

2. 这里将8000端口暴露出来主要是为了能访问supervisor的日志
3. 实际的bolt和spout是在worker上运行的，所以需要将worker的端口暴露出来，一个supervisor默认是分配4个worker，端口从6700开始
4. 启动第二个节点

docker run -d --restart always --name supervisor1 -p 8010:8010 -p 6710:6710 -p 6711:6711 --link zookeeper:zookeeper --link nimbus:nimbus storm storm supervisor

启动storm ui

1. 启动storm的ui便于监控，随后便可以使用http://localhost:8090/index.html访问监控界面 由于8080端口已经占用 此处换成8090

docker run -d -p 8090:8080 --restart always --name ui --link nimbus:nimbus storm storm ui

2. -p 8090:8080 容器内部端口8080绑定到指定的主机端口8090
3. -P Docker 会随机映射一个 49000~49900 的端口到内部容器开放的网络端口
4. 这条命令中的两个storm含义并不相同
5. 第一个storm表示镜像名
6. 第二个storm表示运行storm命令 进入到运行中/bin目录中有个storm文件，直接运行storm文件，可以看到storm支持的所有命令，其中就有我们用到的ui、nimbus、supervisor

单词统计示例

1. 代码下载 storm-demo
2. 运行示例即可 com.zbj.storm.wordcount.WordCountTopology

参考文章

• storm（二） docker集群搭建