storm
文章平均质量分 76
loloxiaoz3
只有偏执狂才能生存
展开
-
storm集群的配置与启动
配置 storm在conf/storm.yaml包含了一些配置信息。 storm.zookeeper.servers: - "10.16.15.6" storm.zookeeper.port: 2181 storm.local.dir: "/tmp/storm/" nimbus.host: "10.16.15.3" ui.port:原创 2014-02-16 20:14:52 · 11087 阅读 · 0 评论 -
在storm中使用非Java语言
storm由Java实现,但通过multilang protocl(多语言协议),能够使用php,python,ruby或者javascript来写spout和bolt。 多语言协议是storm中实现的一种特殊协议,它使用标准输入和标准输出作为与执行spout和bolt任务的进程之间通信的信道。消息以json格式或者普通的文本行通过信道传输。多语言协议的实现细节该协议依赖于作为进程之间翻译 2014-03-02 18:50:59 · 2422 阅读 · 0 评论 -
Storm与S4的比较
Items\ProjectsYahoo! s4Twitter Storm协议Apache license 2.0Eclipse Public License 1.0开发语言JavaClojure,Java,Clojure编写了核心代码结构去中心化的对等结构有中心节点nimbus,但非关键通信可插拔的通讯层,目前是基转载 2014-02-13 11:13:39 · 1010 阅读 · 0 评论 -
在storm中使用bloom_filter消重服务
bloom_filter服务bloom_filter的简介与使用请看这里。bloom_filter的配置文件conf.ini如下[filter] cnt=4 num_bits=4294967296num_hash_func=7 [server]pid_file=/var/run/bloom_filter.pid daemonlize=1 port原创 2014-03-17 22:23:33 · 1764 阅读 · 0 评论