概述
工作中要使用storm,突发奇想,准备开始写个人博客,也是第一次写,所以会有很多不足之处,欢迎大家批评指正!!工作使用场景:某电商公司,物流作业发货完毕后,要实时的更新订单以及物流信息.
学习环境:
window10; idea; jdk1.8; storm 1.1.0(现在最新稳定版)
storm简介
注意
在这个版本( 1.1.0 )中,项目管理包名由" backtype.storm "改为了" org.apache.storm ",所以本版本的拓扑就无法在 Storm 1.0.0 版本运行, 如果需要向后兼容,可以通过以下配置:
client.jartransformer.class: "org.apache.storm.hack.StormShadeTransformer"
将以上配置添加到提交了拓扑的服务器配置中,就可以兼容旧版本了!
初识
storm是一个开源免费的分布式实时计算系统,storm可以可靠地处理无限的数据流(大数据),可以实时的处理 Hadoop 所处理的事项。storm有很多优势:
- 它使用很简单,多种语言均可以使用它,它也有很多使用者;
- 它处理数据非常快,基本每秒可以处理一百万组单元数据;
- 它伸缩性很强,容错性很好