Storm 全分布式安装配置

Storm 全分布式

storm下载地址： apache-storm-1.2.1.tar.gz

HostName	NameNode	DataNode	JournalNode	Zookeeper	nimbus(新增)	Supervisor（新增）
wpixel01	✔️	✔️	✔️	✔️	✔️
wpixel02	✔️	✔️	✔️	✔️	✔️	✔️
wpixel03	✔️	✔️	✔️	✔️	✔️	✔️
wpixel04	✔️	✔️				✔️

1、解压apache-storm-1.2.1.tar.gz

[root@wpixel01 www]# tar -zxvf apache-storm-1.2.1.tar.gz 

2、配置环境变量

[root@wpixel01 www]# vi /etc/profile
export STORM_HOME=/home/www/apache-storm-1.2.1
export PATH=$PATH:$STORM_HOME/bin

3、修改配置文件storm.yaml

[root@wpixel01 www]# vi apache-storm-1.2.1/conf/storm.yaml 
# zookeeper地址，如果zookeeper端口不是默认的，就要配置zk端口号
storm.zookeeper.servers:
     - "wpixel01"
     - "wpixel02"
     - "wpixel03"
# 指定任务提交到nimbus后，保存的目录
storm.local.dir: "/home/www/apache-storm-1.2.1/status"
# 设置storm ui的端口，默认是8080，spark ui的端口也是8080，我已经配置了spark，所以端口修改为8888
ui.port: 8888
# 指定主节点的numbus，HA环境，多个nimbus
nimbus.seeds: ["wpixel01", "wpixel02", "wpixel03"]
# 指定每个从节点的supervisor上运行几个worker
supervisor.slots.ports:
     - 6700
     - 6701
     - 6702
     - 6703

4、将apache-storm-1.2.1 拷贝到wpixel02|03|04

[root@wpixel01 www]# scp -r apache-storm-1.2.1/ root@wpixel02:/home/www/
[root@wpixel01 www]# scp -r apache-storm-1.2.1/ root@wpixel03:/home/www/
[root@wpixel01 www]# scp -r apache-storm-1.2.1/ root@wpixel04:/home/www/

5、wpixel02|03|04配置storm的环境变量（略）

6、启动

hostname	主节点	从节点	日志查看器
wpixel01	nimbus		logviewer
wpixel02	nimbus	supervisor	logviewer
wpixel03	nimbus	supervisor	logviewer
wpixel04		supervisor	logviewer

（1）启动zookeeper （略）
（2）在wpixel01上启动nimbus、logviewer、UI展示页面

[root@wpixel01 www]# storm nimbus & storm logviewer & storm ui &

（3）在wpixel02和wpixel03上启动nimbus、supervisor、logviewer

[root@wpixel02 www]# storm nimbus & storm supervisor & storm logviewer & 
[root@wpixel03 www]# storm nimbus & storm supervisor & storm logviewer & 

（4）在wpixel04上只启动supervisor、logviewer

[root@wpixel04 www]# storm supervisor & storm logviewer & 

7、UI界面