![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
Kafka
Kafka
amunamuna
走得很慢,但会一直前行~
展开
-
日常梳理-kafka/zookeeper使用
文章目录生产者参数消费者参数生产者参数生产者参数buffer.memory默认32M内存缓冲大小通过KafkaProducer发送出去的消息都是先进入到客户端本地的内存缓冲里,然后把很多消息收集成一个一个的Batch,再发送到Broker上去的。batch.size默认16KProducerBatch的大小linger.ms默认0生产者客户端会在ProducerBatch被填满或等待时间超过linger.ms值时发送出去。max.request.siz原创 2020-09-20 07:56:33 · 129 阅读 · 0 评论 -
spring-kafka消费者调试记录
AbstractMessageListenerContainer-start()ConcurrentMessageListenerContainer–doStart()KafkaMessageListenerContainer–doStart()KafkaMessageListenerContainer–ListenerConsumer run()KafkaMessageListenerContainer–doPoll()KafkaConsumer–poll(final Duration time原创 2020-09-15 15:21:58 · 147 阅读 · 0 评论 -
搭建kafka集群和zk集群
创建一个data目录用于存放数据,创建一个logs目录用于存放日志文件:mkdir datamkdir datalog在data目录下创建一个myid文件用于记录该zookeeper在集群中的id:echo 1 > myid编辑zookeeper配置文件conf/zoo.cfgdataDir=/xx/apps/zookeeper-3.4.10/datadataLogDir=/xx/apps/zookeeper-3.4.10/datalogserver.1=192.168.80.10原创 2020-08-21 17:06:24 · 158 阅读 · 0 评论 -
kafka概念
kafka与传统消息队列的比较为什么业务系统用activeMQ:基于事务的保证为什么大数据平台用kafka:吞吐量大,速度快(如何保证速度快?(1)顺序读写磁盘,(2)pageCache页缓存机制)kafka的架构模型基于producer consumer topic broker 等的一个基本架构...原创 2019-11-29 09:55:04 · 120 阅读 · 0 评论