Storm学习
关注
分享
扫一扫
文章平均质量分 82
deyu1982
这个作者很懒，什么都没留下…
展开
-
Storm 实现滑动窗口计数和TopN排序 【转】
转自:http://www.51studyit.com/html/notes/20140329/49.html计算top N words的topology, 用于比如trending topics or trending images on Twitter. 实现了滑动窗口计数和TopN排序, 比较有意思, 具体分析一下代码 Topolo转载 2014-12-12 16:35:53 · 717 阅读 · 0 评论 -
storm学习-Storm DRPC实战 【转】
转自:http://www.51studyit.com/html/notes/20140329/47.htmlDRPC ,Distributed Remote Procedure Call RPC本身是个成熟和古老的概念, Storm里面引入DRPC主要是利用storm的实时计算能力来并行化CPU intensive的计算 DRPC, 只是storm应用转载 2014-12-12 16:32:06 · 374 阅读 · 0 评论 -
storm学习 相关API介绍（转）
转自：http://www.51studyit.com/html/notes/20140329/44.htmlStreams, 流流作为storm的核心概念, 定义为无限的tuple序列. 什么是tuple? 命名的value序列, 可以理解成Key/value序列, 每个value可以是任何类型, 动态类型不需要转载 2014-12-12 16:16:19 · 468 阅读 · 0 评论 -
Twitter Storm的新利器Pluggable Scheduler 【转】
转自:http://www.51studyit.com/html/notes/20140403/51.html版本：storm0.9.1 kafka0.8.1可插拔式的任务分配器(Pluggable Scheduler)给实现了，将在0.8.0版本里面跟大家见面。这篇文章先给大家尝尝鲜，介绍下这个新特性。在Pluggable Sched转载 2014-12-12 16:38:17 · 436 阅读 · 0 评论 -
storm学习-Storm消息机制【转】
转自:http://www.51studyit.com/html/notes/20140329/46.html messaging semantics for most computations. Read more about transactional topologies here. How does Storm implement reliab转载 2014-12-12 16:29:14 · 503 阅读 · 0 评论 -
Storm starter - SingleJoinExample 【转】
转自:http://www.51studyit.com/html/notes/20140403/52.htmlTopology 1.定义两个spout, 分别是genderSpout, ageSpout Fields, ("id", "gender"), ("id", "age"), 最终join的结果应该是("id", "gender", "ag转载 2014-12-12 16:38:57 · 440 阅读 · 0 评论 -
storm学习-Storm Topology的并发度（转）
转自:http://www.51studyit.com/html/notes/20140329/45.html概念 一个Topology可以包含一个或多个worker(并行的跑在不同的machine上), 所以worker process就是执行一个topology的子集, 并且worker只能对应于一个topology 一个worker转载 2014-12-12 16:27:53 · 421 阅读 · 0 评论