![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
storm
文章平均质量分 93
weixin_43033836
这个作者很懒,什么都没留下…
展开
-
flume+kafka+zookeeper+storm实时计算环境搭建(一)
环境准备1.JDK102.ubuntu16.04,centos73.flume1.8.04.zookeeper3.4.135.storm1.2.26.kafka2.0.0这里我用的三台虚拟机搭建的集群,主节点(master)用的ubuntu16.04,从节点分别用centos7搭建slave1,slave2,组成分布式集群下载vmare:https://my.vmware.com...原创 2018-10-22 15:23:00 · 534 阅读 · 0 评论 -
flume+kafka+zookeeper+storm实时计算环境搭建(二)
搭建flume+kafka+storm环境这里,我的flume是采集mysql的数据再存入kafka,我用mysql作为我的source,内存memory作为channels,kafka作为sink,这个要借助一个插件source-ng-sql手机mysql的数据环境准备:1.flume1.8.02.kafka2.0.03.storm1.2.24.zookeeper3.4.13flu...原创 2018-10-22 18:12:40 · 448 阅读 · 1 评论 -
流处理中window的概念
转载自:https://blog.csdn.net/lmalds/article/details/51604501什么是Window?有哪些用途? 下面我们结合一个现实的例子来说明。我们先提出一个问题:统计经过某红绿灯的汽车数量之和? 假设在一个红绿灯处,我们每隔15秒统计一次通过此红绿灯的汽车数量,如下图: 可以把汽车的经过看成一个流,无穷的流,不断有汽车经过此红绿灯,因此无法统计...转载 2018-10-25 17:11:15 · 410 阅读 · 0 评论 -
Storm学习总结
本博客转载自:https://yq.aliyun.com/articles/609466?spm=a2c4e.11163080.searchblog.20.3c7e2ec139rsNh分享的目的让大家更加深入了解Storm的架构以及运用JStorm之类的流式计算框架解决业务开发过程中遇到的问题能够有所帮助分享大纲Storm介绍和系统架构Storm核心类Storm trident框架Stor...转载 2018-11-21 12:03:19 · 669 阅读 · 0 评论 -
Storm并发模型及ACK机制处理
转载自:https://blog.csdn.net/u013063153/article/details/73723749从大到小的话我们看它有这么5个层次,最简单的storm是个集群,cluster是个层次,第二个层次就是有比较明确的意义了,就是supervisor,supervisor对应的层级就是一个个的host,就是一个个的node,就是一个机器这个级别的,然后一个机器它又有很多的wo...转载 2018-11-23 09:42:12 · 148 阅读 · 0 评论 -
trident State应用指南
trident State应用指南本文转载自:http://blog.csdn.net/jediael_lu/ https://blog.csdn.net/jediael_lu/article/details/76794843trident State应用指南一State基础示例1主类2Aggregator的用法1Aggregator...转载 2018-11-26 16:01:30 · 196 阅读 · 0 评论