1. Storm 组件回顾
2. Storm API
1. 首先编写数据源类: Spout。
a. 继承 BaseRichSpout类
b. 实现 IRichSpout接口
c. 重点需要几个方法进行重写或实现:open、nextTuple 和 DeclareOutputFields 方法
2. 继续编写数据处理类:Bolt
a. 继承 BaseBasicBolt类
b. 实现 IRichBolt接口
c. 重点需要几个方法进行重写或实现: execute、 declareOutputFields方法
3. 最后编写主函数( Topology)去进行提交一个任务
a. TopologyBuilder 组件Topology
b. 在使用 Topology时候, Storm框架为我们提供了俩种模式:本地模式和集群模式
本地模式:(无需Storm集群,直接在java中即可运行,一般用于测试和开发阶段)执行运行main函数即可。
LocalCluster localCluster = new LocalCluster();
localCluster.submitTopology(topologyName, config, topologyBuilder.createTopology());
localCluster.killTopology(topologyName);
localCluster.shutdown();
集群模式:(需要 Storm集群,把实现的java程序打包,然后 Topology进行提交)需要把应用打成jar,使用storm命令把 Topology提交到集群中去。
StormSubmitter.submitTopology(topologyName, config, topologyBuilder.createTopology());