storm
讲不出 再见
这个作者很懒,什么都没留下…
展开
-
storm实时分布式流计算系统——介绍
介绍 storm 是一款实时 分布式 流计算开源框架,在一个多节点集群上,每秒可以轻松处理上百万条消息。扩展性好,容错性好,稳定性好,可以支持很多编程语言。hadoo框架也是个高并发处理框架,但是是批处理,就是数据来了,攒满多少,一起处理,而storm是流处理,数据来了就处理,就像水流一样,源源不断。 分布式 和 集群是有区别的。分布式集群就是有若干个分布式系统。 稳定性:Nimbus进程和...原创 2019-03-28 15:56:02 · 740 阅读 · 0 评论 -
实时并发大数据平台的认识
大数据特点:大量、高速、多样化、价值性。 实时并发大数据平台特点。 1、低延时。肯定的,不然无法体现实时,那么批处理就不太适合了。 2、分布式集群。分布式的思想就体现出了并发性(这个和计算机中的地址流水线、指令流水线思想差不多,都是将任务分为若干段,这样才能更好并发处理),单单是分布式,恐怕不行,因为如果分布式系统中某一个节点发生故障或者宕机,那么整个分布式系统都将无法正常运行了,所以还需要...原创 2019-03-28 21:49:06 · 275 阅读 · 0 评论