Kafka
文章平均质量分 69
豆奶快攻
这个作者很懒,什么都没留下…
展开
-
如何保证Kafka不丢失消息
丢失消息有 3 种不同的情况,针对每一种情况有不同的解决方案。原创 2024-01-15 11:43:18 · 1229 阅读 · 1 评论 -
kafka除了作为消息队列还能做什么?
与其之前的竞品不同,Kafka 不仅仅是一个消息队列,它还是一个适用于各种情况的开源事件流平台。Kafka 传输原始点击流数据,Flink 对其进行处理,而模型训练则消耗数据湖中的汇总数据。不同的是,指标是结构化数据,而日志是非结构化文本。例如,在下图中,事务日志被发送到 Kafka,并被 ElasticSearch、Redis 和二级数据库摄取。如上图所示,为了升级订单服务,我们更新了旧订单服务,以便从 Kafka 中消费输入,并将结果写入 ORDER Topic。如果它们完全相同,新服务就会通过测试。原创 2024-01-11 15:12:17 · 745 阅读 · 0 评论 -
大数据时代:Kafka 如何做到 1 秒发布百万条消息
说起 Kafka 的第一个突出特定就是“快”,而且是那种变态的“快”。据最新的数据:每天利用 Kafka 处理的消息超过1万亿条,在峰值时每秒钟会发布超过百万条消息,就算是在内存和 CPU 都不高的情况下,Kafka 的速度最高可以达到每秒十万条数据,并且还能持久化存储。那么,Kafka 是如何做到的呢?分布式消息系统 Kafka授权协议:Apache开发语原创 2017-09-19 15:44:32 · 1988 阅读 · 0 评论