Java大数据实战 Storm构建实时流处理之Storm周边框架使用

Zookeeper:通过zk节点来管理配置信息,同步节点来实现分布式服务的同步。
启动:
在这里插入图片描述Logstash:日志收集[ELK中的L]

Kafka:分布式 流处理 消息(发布|订阅)系统:
场景:实时的流处理,容错,横向处理。
消息中间件;生产者和消费者

例子:

	妈妈:生产者
	你: 消费者
	馒头:  数据流,消息
	
	正常情况下:  生产一个   消费一个
	其他情况:
		一直生产,你吃到某一个馒头时,你卡住(机器故障),馒头就丢失了。
		一直生产,做馒头速度快,你吃来不及,馒头也就丢失了。
		
		拿个碗/篮子,馒头做好以后先放到篮子里,你要吃的时候去篮子里面取出来吃。
		
	篮子/框:  Kafka 
		当篮子满了,馒头就装不了了,咋办?
		多准备几个篮子===Kafka的扩容。

Kafka架构:
Producer: 生产者,就是生产馒头(老妈)
Consumer: 消费者,就是吃馒头的(你)
Broker: 篮子。
Topic : 主题,给馒头带一个标签,topic 的馒头给你吃,topic 的馒头是给你弟弟吃。

kafka启动
在这里插入图片描述创建topic
在这里插入图片描述
查看topic
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值