Storm
小飞猪小肥猪
这个作者很懒,什么都没留下…
展开
-
三个版本的WorkCount
Java版的wordcount1.读取文件的数据,一行行读。FileRead.readline( );2.对读取的数据进行切割(比如 “ ”)line.sqlit (" ");string[ ] words=line.split ( " ");3. 对数组中的单词进行统计Map<String,Integer> count= new HashMap<...原创 2018-12-17 19:25:01 · 290 阅读 · 0 评论 -
Storm
水槽实时采集,低延迟kafaka消息队列,低延迟风暴实时计算,低延迟Redis的实时存储,低延迟风暴用来实时处理数据,特点:低延迟,高可用,分布式,可扩展,数据不丢失提供简单理解的接口,便于开发。海量数据?数据类型很多,产生数据的终端很多,处理数据能力增强。风暴与Hadoop的的区别风暴用于实时计算,Hadoop的用于离线计算风暴处理的数据保存在内存中,源源不断; ...原创 2018-12-17 20:41:39 · 116 阅读 · 0 评论 -
Storm单词技术案例
功能说明:设计一个topology,来实现对文档里面的单词出现的频率进行统计整个totopolgy分为三个部分:1. RandomSentenceSpout:数据源,在已知的英文句子中,随机发送一条句子出去。2. SplitSentenceBolt : 负责将单行文本记录(句子)切分为单词.3. WordcountBolt :负责对单词的频率进行累加7.6、Stream G...原创 2018-12-21 17:46:58 · 234 阅读 · 0 评论