kafka
胃小
这个作者很懒,什么都没留下…
展开
-
高性能fakfa之概述
Kafka系统架构Kafka介绍Kafka是一种高吞吐量的分布式发布订阅消息系统,有如下特性:通过O(1)的磁盘数据结构提供消息的持久化,这种结构对于即使数以海量的消息存储也能够保持长时间的稳定性能(高性能);高吞吐量:即使是非常普通的硬件Kafka也可以支持每秒数百万的消息(高并发);支持通过Kafka服务器和消费机集群来分区消息(高可靠);支持Hadoop并行数据加载;支持各种语言丰富的客户端...转载 2018-07-12 12:52:47 · 2085 阅读 · 0 评论 -
高性能kafka之消息可靠性分析及常见问题
kfaka发消息的模式分为同步和异步,默认是同步的,异步的吞吐量比较高,但是消息丢失的概率比较大,同步还是异步可以通过producer.type属性进行控制 kafka有三种消息确认机制,由request.required.acks属性控制,acks=0时代表不适用确认机制,producer发送消息之后就不管消息是否成功,这种情况吞吐量最高,同时消息可靠性难以保证,会出现丢消息的问题...原创 2018-07-13 14:27:19 · 1521 阅读 · 0 评论 -
深入学习docker之部署zookeeper与kafka
使用 wurstmeister 下的zookeeper 与kafkadocker pull wurstmeister/kafkadocker pull wurstmeister/zookeeper 然后使用启动两个容器docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeperdocker ...原创 2018-09-09 18:44:07 · 1594 阅读 · 1 评论 -
springboot之整合kakfa
springboot使用的是2.0.0 使用docker快速搭建环境请看上篇 深入学习docker之部署zookeeper与kafka引入pom依赖<dependency> <groupId>org.springframework.kafka</groupId> <artifactId>...原创 2018-09-09 20:19:43 · 377 阅读 · 1 评论