
storm
趣学程序-shaofeer
爱生活,爱程序。趣学程序!我在这里分享我的学习记录以及学习笔记!
-
原创 KafKa 发消息到Storm
通过kafka客户端发送数据,由KafkaSpout进行接收消息,传输到ConsumerBolt进行实时数据处理。 maven依赖 <dependencies> <!-- https://mvnrepository.com/artifact/org.apache.kafka/kafka-clients --> <depe...2019-06-05 22:36:21166
0
-
原创 Storm基础知识学习
概述 Storm是一个免费开源的分布式实时计算系统。Storm能轻松可靠地处理无界的数据流,就像Hadoop对数据进行批处理 编程模型 spout:数据读取数据、接收数据、将数据写出到blot bolt:可以有多个,它是处理数据的类,相当于将MapReduce中的map类整体抽取出来,Reduce整体抽取出来。可以单独写一个bolt去分割数据,写一个blot去合并数据。 元组(Tuple...2019-06-05 22:53:36126
0
-
原创 Storm集群搭建
Storm集群搭建 官方网址:http://storm.apache.org/ 官方安装步骤:https://storm.apache.org/releases/1.1.2/Setting-up-a-Storm-cluster.html 集群规划 hadoop102 hadoop103 hadoop104 zk zk zk storm storm storm 默认认为...2019-06-05 23:20:13185
0
-
原创 Storm之API简介
Storm之API简介 Component组件 1)基本接口 (1)IComponent接口 (2)ISpout接口 (3)IRichSpout接口 (4)IStateSpout接口 (5)IRichStateSpout接口 (6)IBolt接口 (7)IRichBolt接口 (8)IBasicBolt接口 2)基本抽象类 (1)BaseComponent抽象类 (2)BaseRichSpout抽...2019-06-05 23:23:22112
0