本文详细介绍了Storm模型中的核心概念，包括niubus、supervisor、worker等。逐步指导如何部署Storm集群，涉及Java和Python环境配置、storm.yaml配置及启动命令。此外，还讲解了Java编程模型，如topology、spout、blot和tuple的概念，并阐述了流分组的各种策略，如fieldsGrouping、globalGrouping等。
一、Storm模型
重要概念：niubus、supervisor、worker、executor、task
二、安装Storm
部署一个storm集群
（1）安装Java 7和Pythong 2.6.6
（2）下载storm安装包，解压缩，重命名，配置环境变量
（3）修改storm配置文件
mkdir /var/storm
conf/storm.yaml
storm.zookeeper.servers:
- "ip"
- "ip"
storm.local.dir: "/mnt/storm"
nimbus.seeds: ["ip"]
slots.ports，指定每个机器上可以启动多少个worker，一个端口号代表一个worker
supervisor.slots.ports:
- 6700
- 6701
- 6702
- 6703
(4)启动storm集群和ui界面
一个节点，storm nimbus >/dev/null 2>&1 &
三个节点，storm supervisor >/dev/null 2>&1 &
三个节点&#
最低0.47元/天 解锁文章
扫一扫
790
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
