![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
消息中间件
文章平均质量分 92
消息中间件
酷儿Jay
这个作者很懒,什么都没留下…
展开
-
Kafka数据同步、组件集成
Kafka数据同步、组件集成Kafka数据同步HW高水位相关概念导致问题HW改进Leader Epoch实现思路避免数据丢失避免数据不一致Kafka组件集成Kafka-EagleSpringBoot集成KafkaKafka数据同步HW高水位相关概念 Kafka的Topic被分为多个分区,分区是是按照Segments存储文件块。分区日志是存储在磁盘上的日志序列,Kafka可以保证分区里的事件是有序的。其中Leader负责对应分区的读原创 2021-09-18 14:39:48 · 474 阅读 · 0 评论 -
Kafka-Topic管理、API使用
Kafka-Topic管理、API使用Kafka环境搭建APIOffset自动控制Acks & RetriesRetries幂等性保证事务控制Topic管理Kafka环境搭建 1.安装JDK,配置JAVA_HOME 2.配置主机名和IP映射 3.关闭防火墙&防火墙开机自启动原创 2021-09-17 17:05:57 · 302 阅读 · 0 评论 -
Kafka基本概念及存取特性
Kafka基本概念及存取特性Kafka基本介绍消息队列TopicTopic存放结构生产消息数据存储消费者消费数据Topic分区优点Consumer消费组数据存储特性磁盘写入特性磁盘读取特性Kafka基本介绍 Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以收集并处理用户在网站中的所有动作流数据以及物联网设备的采样信息。 &n原创 2021-06-19 08:52:03 · 201 阅读 · 3 评论 -
RocketMQ集群及整合SpringBoot
RocketMQ集群及整合SpringBoot集群单Master模式多Master模式多Master多Slave模式(异步复制)多Master多Slave模式(同步双写)Broker配置信息故障转移/主备切换整合SpringBootProducerConsumer集群单Master模式 只有一个 Master节点 优点:配置简单,方便部署  原创 2021-06-18 10:24:15 · 673 阅读 · 0 评论 -
RocketMQ消息存储及NameServer特性
RocketMQ消息存储及NameServer特性消息存储存储方式存储结构刷盘机制NameServer特性功能特性重试机制顺序消费消息存储存储方式 RocketMQ 使用文件系统持久化消息。性能要比使用DB产品要高。文件顺序读写的速度大概是3G左右。 RocketMQ在消息存储时使用了数据零拷贝技术来发送数据文件数据。 &nb原创 2021-06-17 10:10:54 · 324 阅读 · 0 评论 -
RocketMQ基础及应用
RocketMQ基础及应用基础概念消息消费模式消息发送方式消息过滤事务消息重试机制顺序消费基础概念消息消费模式 消息消费模式由消费者来决定,可以由消费者设置MessageModel来决定消息模式。消费模式默认为集群消费模式。 1.MessageModel.CLUSTERING - 集群消费:  原创 2021-06-01 15:59:01 · 530 阅读 · 0 评论 -
RocketMQ安装及各角色
RocketMQ安装及各角色安装流程RocketMQ安装启动测试控制台安装RocketMQ功能用途角色说明各角色间交互关系nameserverbrokerproducerconsumer安装流程RocketMQ安装启动测试 1.项目下载: 从GitHub上下载源码并上传到服务器——https://github.com/apache/rocketmq原创 2021-05-18 17:34:12 · 144 阅读 · 0 评论