maven实现storm实例项目

该博客详细介绍了如何利用Maven搭建一个基于Storm的WordCount实例。首先,启动Zookeeper集群,接着启动Storm的nimbus、supervisor和UI。然后,在Eclipse中创建Maven项目,编写包括WordReader、WordSpliter、WordCounter组件的Java代码,构建拓扑结构。最后,通过命令行运行Storm程序并展示运行结果。
摘要由CSDN通过智能技术生成

一:启动zookeeper

在写程序之前需要启动集群中的zookeeper,我这是三台机器,master, DataNode1, DataNode2。每台机器都要启动,启动方式如下图

启动后会有一个leader节点和两个follower节点。可以通过zkServer.sh status这个命令查看

二:启动storm 中的nimbus 和 supervisor 和UI

在storm中需要确定一个nimbus节点,然后再启动每个节点上的superivsor,然后在nimbus节点上启动UI

(注:在使用storm命令时应该已经在环境变量中对storm作了配置,并且source了这个文件)

启动命令 storm nimbus & 和 storm supervisor &  和 storm ui &其中“&”表示运行与后台

注意,需要启动每个节点上的supervisor。

最后启动ui,启动完成后可以通过浏览器访问,地址 : nimbus节点主机名:8080



三: 写程序

这是一个wordCount的程序,主要是记录输入文本中的单词的个数,并把结果显示在命令行中。

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值