storm安装

原创 2015年11月18日 09:53:55
1、启动zookeeper
      storm运行依赖zookeeper,所以在安装storm前必须安装和启动zookeeper
2、配置storm的storm/conf/storm.yaml文件

内容:

 storm.zookeeper.servers:
     - 127.0.0.1
 storm.zookeeper.port: 2181
 nimbus.host: "127.0.0.1"
 storm.local.dir: "/tmp/storm"
 supervisor.slots.ports:
  - 6700
  - 6701
  - 6702
  - 6703

这个配置文件写的时候,一定注意在每一项的开始时要加空格,冒号后也必须要加空格,否则storm就不认识这个配置文件。
说明一下:storm.local.dir表示storm需要用到的本地目录。nimbus.host表示那一台机器是master机器,即nimbus。storm.zookeeper.servers表示哪几台机器是zookeeper服务器。storm.zookeeper.port表示zookeeper的端口号,这里一定要与zookeeper配置的端口号一致,否则会出现通信错误,切记切记。当然你也可以配superevisor.slot.port,supervisor.slots.ports表示supervisor节点的槽数,就是最多能跑几个worker进程(每个spout或bolt默认只启动一个worker,但是可以通过conf修改成多个)。
执行:
# bin/storm nimbus(启动主节点)
# bin/storm supervisor(启动从节点)
执行命令:# storm jar StormStarter.jar storm.starter.WordCountTopology test
此命令的作用就是用storm将jar发送给storm去执行,后面的test是定义的toplogy名称。
搞定,任务就发送到storm上运行起来了,还可以通过命令:
# bin/storm ui

然后执行 jps 会看到 3 个进程:zookeeper 、nimbus、 supervisor
启动ui,可以通过浏览器, ip:8080/ 查看运行i情况。

CentOS7.0安装配置Storm集群

1.环境准备 操作系统: CentOS7.0 Zookeeper版本:zookeeper-3.4.10 Storm版本:apache-storm-1.1.0 JDK版本:jdk1.8.0_77 Pyt...
  • jssg_tzw
  • jssg_tzw
  • 2017年06月21日 13:56
  • 1261

Storm的安装步骤

流处理组件Storm的安装方法介绍
  • carl810224
  • carl810224
  • 2016年07月13日 17:35
  • 1339

Win7 安装Storm

安装zookeeper下载:http://mirrors.cnnic.cn/apache/zookeeper/zookeeper-3.3.6/zookeeper-3.3.6.tar.gz安装: 解压...
  • xundh
  • xundh
  • 2016年12月15日 14:40
  • 926

storm的单节点安装以及简单操作

Storm的安装比较简单,因为只是自己学习所以只搞了个单节点的Storm。安装步骤如下: 1.首先下载Storm: 进入官网Storm官网选择download。选择版本并且下载: 2.然后开始安装 1...
  • qq_20641565
  • qq_20641565
  • 2016年12月19日 19:55
  • 2414

ubuntu storm安装配置

一、安装准备:        JDK、ssh、python。安装都比较简单,我之前做别的时候已经安装,此处不再详述。        ssh的安装和服务启动可以参见我的另一个讲hadoop安装的文章...
  • u010668907
  • u010668907
  • 2016年06月11日 23:47
  • 1297

windows安装storm

一:安装JDK. 下载地址:地址一  地址二 配置java环境变量 JAVA_HOME、Path、CLASSPATH三个值分别为(按照自己安装状况设置,此处供参考): D:\java...
  • cauchy8389
  • cauchy8389
  • 2014年09月26日 21:32
  • 5197

Apache Storm 环境安装笔记

研究了一下Apache Storm的环境安装,安装过程超乎想象的简单。
  • sharetop
  • sharetop
  • 2015年11月10日 16:59
  • 1644

Ubuntu14.04下安装单机版Storm运行环境

1、安装java环境 如果选择的是sun的java安装包,去官网下载后,记得提升文件权限(chmod +x path/文件名) 设置环境变量,在/etc/profile文件中添加以下内容(针对所有用户...
  • u013457276
  • u013457276
  • 2016年10月20日 19:40
  • 1066

Storm集群安装配置详细方法

Storm-0.10.0 集群安装和配置         最近要做毕业设计,需要用到storm流式计算架构,工欲善其事必先利其器,第一步当然是配置环境,借鉴师姐的总结加上自己在实战中的理解,总结...
  • u010203544
  • u010203544
  • 2016年12月09日 16:19
  • 2174

Storm集群的安装

到Storm的官方网站Document下的Setup and deploying栏目下的Setting up a Storm Cluster 安装Storm分为如下5个步骤: 1、安装zookeep...
  • wb81074
  • wb81074
  • 2015年11月24日 17:04
  • 4320
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:storm安装
举报原因:
原因补充:

(最多只允许输入30个字)