Kafka
文章平均质量分 95
kafka
GoAI
CSDN人工智能领域博客专家、新星计划计算机视觉方向导师、内容合伙人。阿里云社区专家博主、百度飞桨PPDE、飞桨校领航团团长、开源特训营导师,曾获多次AI比赛奖项及大厂实习,长期专注大数据与人工智能知识分享,相关合作和交流可私信。
展开
-
Kafka常见面试问题
Kafka 常见面试题1.Kafka 消息数据积压,消费能力不足怎么处理? ☆☆☆☆☆1)可以考虑增加Topic的分区数,并且同时提升消费组的消费者数量,消费者数=分区数。(两者缺一不可)2)如果是下游的数据处理不及时:提高每批次拉取的数量。批次拉取数据过少(拉取数据/处理时间<生产速度),使处理的数据小于生产的数据,也会造成数...原创 2020-08-25 15:26:12 · 501 阅读 · 0 评论 -
大数据开发笔记(七):Kafka分布式流式处理
Kafka 是一个分布式流式处理平台,Kafka 主要有两大应用场景:消息队列 :建立实时流数据管道,以可靠地在系统或应用程序之间获取数据。数据处理: 构建实时的流数据处理程序来转换或处理数据流。原创 2021-02-04 12:40:01 · 2281 阅读 · 0 评论