翻译:Storm Scalable ——Storm弹性计算

翻译 2013年12月05日 15:09:12

原文地址:http://storm-project.net/about/scalable.html,内容如下:

Storm topologies are inherently parallel and run across a cluster of machines. Different parts of the topology can be scaled individually by tweaking their parallelism. The "rebalance" command of the "storm" command line client can adjust the parallelism of running topologies on the fly.

Storm's inherent parallelism means it can process very high throughputs of messages with very low latency. Storm was benchmarked at processingone million 100 byte messages per second per node on hardware with the following specs:

  • Processor: 2x Intel E5645@2.4Ghz
  • Memory: 24 GB

翻译:

Storm的topology天生就是在Strom集群中并行运行的,topology的每一部分(Spout,bolt)的并行度(同时有多少个程序并行执行)在运行时可以通过“rebalance”命令进行动态调整,即Storm的topology可以实现弹性计算。


strom具有高效的消息传递机制,在如下环境中可以实现每秒中向每个节点发送1000000条100字节大小的消息。

       处理器CPU:2x Intel E5645@2.4Ghz

       内存:24G



作者比较关心的是如何在运行时通过过“rebalance”命令进行动态调整topology的并行度,实现弹性计算。因为大家都知道:云集算的最大优势之一就是弹性计算。

关于这一点,后面会进行研究,感兴趣的可以继续关注。

Storm弹性计算:实时调整Topology并发数

Storm弹性计算:实时调整Topology并发数

原创文章,如需转载,请注明出处: Storm计算以topology为单位,topology提交到Storm集群中运行后,通过storm rebalance 命令可对topology进行动态调整。比...
  • jmppok
  • jmppok
  • 2013年12月05日 16:34
  • 2651

跟我一起云计算(1)——storm

概述 最近要做一个实时分析的项目,所以需要深入一下storm。 为什么storm 综合下来,有以下几点: 1. 生逢其时 MapReduce 计算模型打开了分布式计算的另...

Storm官方FAQ翻译

  • 2017年06月14日 11:01
  • 14KB
  • 下载

storm分布式实时计算模式pdf+源码

  • 2017年11月24日 14:49
  • 85.35MB
  • 下载

BRISK: Binary Robust Invariant Scalable Keypoints——论文翻译

本文翻译过程中参考这篇文章 摘要:从一幅图片中高效地寻找关键点始终是一个深入研究的话题,以此形成了众多的计算机视觉应用的基础。正在这个领域中,先驱算法SIFT和SURF在各种图形转换中表现出了巨...

storm实时计算

  • 2012年10月07日 23:48
  • 574KB
  • 下载

分布式日志分析系统构建实战(四)——Storm

介绍Storm是一个实时并行计算系统。对比与经典的hadoop,storm的优势就在于实时性。简单来说,hadoop可以用来对海量的数据进行批量的处理,但这些数据是静态的,处理过程中不会对新产生的数据...

《浅析Storm流式计算框架》的课件

  • 2014年09月26日 15:39
  • 1.06MB
  • 下载
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:翻译:Storm Scalable ——Storm弹性计算
举报原因:
原因补充:

(最多只允许输入30个字)