storm0.9.1集群搭建

本文详细介绍了如何搭建storm0.9.1集群,首先需要安装zookeeper集群,接着解压storm安装包并修改storm.yaml配置文件,包括设置zookeeper服务器列表和nimbus主机等。随后,将配置好的storm文件夹复制到所有节点,并在各节点上启动nimbus、supervisor和UI进程,最后可以通过8080端口检查storm集群的运行状态和配置信息。
摘要由CSDN通过智能技术生成

1.安装storm前,首先要安装zookeeper集群 参考我的另一篇http://blog.csdn.net/yinhaonefu/article/details/42109735

2.解压storm安装包 tar -zxvf storm-XXX.tar.gz

3.修改conf/storm.yaml文件

设置zookeeper集群

说明:使用两个空格为缩进是yaml文件的约定,不能使用制表符Tab来代替。以“:”为结尾的字符串代表一个名,“:”

后面的代表键值,“:”和键值之间要至少保留一个空格。列表的元素前面的“-”必不可少,并且要跟随至少一个空格。

也可以使用-[value1,value2,value3]表示列表。

storm.zookeeper.servers:

  - "hadoop1"

  - "hadoop2"

  - "hadoop3"


nimbus.host: "hadoop1"


storm.local.dir: "/usr/local/storm/tmp"


supervisor.slots.ports:

 - 6701

 - 6702

 - 6703

 - 6704


将配置好的整个storm文件夹复制到storm集群的每个节点

scp -rq /usr/local/storm hadoop2:/usr/local

scp -rq /usr/local/storm hadoop3:/usr/local

添加storm的bin目录到path,然后在hadoop1节点上启动storm

storm nimbus >/dev/null 2>&1 & 启动主节点nimbus为后台进程

分别在hadoop2和hadoop3节点上启动从节点supervisor

storm supervisor >/dev/null 2>&1 &

可以在hadoop1主节点上启动一个UI进程,然后通过8080端口可以访问,命令如下:

storm ui >/dev/null 2>&1 &

使用浏览器查看http://hadoop1:8080查看storm运行情况及配置信息



  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值