2013年06月_DerekJiang

12月 11月 08月 06月 04月 01月

原创 [翻译][Trident] Storm Trident 教程

英文原址：https://github.com/nathanmarz/storm/wiki/Trident-tutorial----------------Trident是在storm基础上，一个以realtime 计算为目标的高度抽象。它在提供处理大吞吐量数据能力的同时，也提供了低延时分布式查询和有状态流式处理的能力。如果你对Pig和Cascading这种高级批量处理工具很了

2013-06-24 16:00:45 32599 11

转载【Storm总结-6】Twitter Storm: DRPC简介

转自：http://xumingming.sinaapp.com/756/twitter-storm-drpc/-------------------------Storm里面引入DRPC主要是利用storm的实时计算能力来并行化CPU intensive的计算。DRPC的storm topology以函数的参数流作为输入，而把这些函数调用的返回值作为topology的输出流。

2013-06-18 18:51:14 7333

转载分布式发布订阅消息系统 Kafka 架构设计 - 目前见到的最好的Kafka中文文章

转自：http://www.oschina.net/translate/kafka-design参与翻译(4人)：fbm, 飞翔的猴子, Khiyuan, nesteaa感谢这些同志们的辛勤工作，翻译的真不错，目前见到的最好的Kafka中文文章-------------------------------我们为什么要搭建该系统Kafka是一个消息系统，原本开

2013-06-08 10:40:51 38243

转载【Storm总结-5】Twitter Storm: Transactional Topolgoy简介

转自： http://xumingming.sinaapp.com/736/twitter-storm-transactional-topolgoy/----------------------------概述Storm通过保证每个tuple至少被处理一次来提供可靠的数据处理。关于这一点最常被问到的问题就是“既然tuple可能会被重写发射(replay),

2013-06-07 15:22:44 2737 1

转载【Storm总结-4】Storm 中acker的工作流程

转自http://xumingming.sinaapp.com/410/twitter-storm-code-analysis-acker-merchanism/---------------------------概述我们知道storm一个很重要的特性是它能够保证你发出的每条消息都会被完整处理，完整处理的意思是指：一个tuple被完全处理的意思是：这个

2013-06-07 15:12:17 6975

转载【Storm总结-3】Storm如何保证消息不丢失 (Guaranteeing-message-processing)

转自： http://xumingming.sinaapp.com/127/twitter-storm如何保证消息不丢失/---------------------------------本文翻译自： https://github.com/nathanmarz/storm/wiki/Guaranteeing-message-processingstorm

2013-06-07 14:43:32 8145 2

原创【Storm总结-2】关于Storm 中Topology的并发度的理解

主要思想来源于storm的项目页面： https://github.com/nathanmarz/storm/wiki/Understanding-the-parallelism-of-a-Storm-topology其中加入了一些个人的理解，所以就把文章mark成原创了，实际上大部分还是人家的东西。其实翻译这个文章的人也挺多，我看了几个，总是感觉有点绕，所以干脆自己总结一下。目标是简单明了的

2013-06-06 17:05:56 17900 2

转载【Storm总结-1】Storm 简介 -- 转一个我认为总结的比较好的介绍

第一次接触Storm还是在1年半以前了，当时在做S4，找Storm来进行对比，慢慢的对storm也有了越来越多的了解，到后来在项目中也用到了storm。随着了解的深入和使用的增加，一直想写一系列关于storm的文章，结果发现很多勤奋努力的同学们已经写了很多，所以慢慢转一个系列过来，中间也许夹杂一些个人的理解吧。-----------------转自： http://www.cnbl

2013-06-06 16:10:16 6660