Storm
若水三千你是一千
这个作者很懒,什么都没留下…
展开
-
Flume+Kafka+Storm+Redis实时分析系统基本架构
天作者要在这里通过一个简单的电商网站订单实时分析系统和大家一起梳理一下大数据环境下的实时分析系统的架构模型。当然这个架构模型只是实时分析技术的一 个简单的入门级架构,实际生产环境中的大数据实时分析技术还涉及到很多细节的处理, 比如使用Storm的ACK机制保证数据都能被正确处理, 集群的高可用架构, 消费数据时如何处理重复数据或者丢失数据等问题,根据不同的业务场景,对数据的可靠性要求以及系统的复杂转载 2016-07-27 10:58:48 · 4648 阅读 · 1 评论 -
Storm nimbus 单节点宕机的处理
一、storm nimbus 单节点问题概述1、storm集群在生产环境部署之后,通常会是如下的结构: 从图中可以看出zookeeper和supervisor都是多节点,任意1个zookeeper节点宕机或supervisor节点宕机均不会对系统整体运行造成影响,但 nimbus和ui都是单节点 。ui的单节点对系统的稳定运行没有影响,仅提供storm-ui页面展示统计信息。但ni原创 2016-07-27 21:15:35 · 7339 阅读 · 1 评论 -
Storm并发度理解
storm并发度理解原创 2016-08-29 16:20:49 · 1211 阅读 · 0 评论