消息队列
文章平均质量分 77
da cong ming
这个用户没有简介
展开
-
Windows服务器配置Kafka + zookeeper
笔者首次使用Kafka消息队列,基于操作中问题和现状作成此文,如有不妥之处,望不吝赐教。由于客户服务器是Windows环境,所以此次是基于Windows系统配置。当然在下本机是Mac系统,Mac系统也本地搭了一套。步入正题。1、zookeeper 安装本次使用的是zookeeper-3.4.10(百度搜索下载即可)将conf路径下zoo_sample.cfg修改为zoo.cfg原创 2018-01-08 14:32:22 · 533 阅读 · 0 评论 -
Mac系统 本机搭建Kafka+zookeeper
Mac系统 本机搭建Kafka+zookeeper1、zookeeper 安装本次使用的是zookeeper-3.4.10(百度搜索下载即可)将conf路径下zoo_sample.cfg修改为zoo.cfg增加如下配置(Windows环境下,亲测,如下配置,启动服务会自动在zookeeper所在路径盘符下创建logs路径。当然直接写绝对路径也可以)dataDir=/kafka_原创 2018-01-08 14:51:12 · 1918 阅读 · 0 评论 -
Java+Kafka消息队列
本文主要针对,Java端对Kafka消息队列的生产和消费。Kafka的安装部署,请看查看相关文章。笔者最近所用的是Spring mvc,监听文件路径,然后将读取到的文件内容发送到消息队列中。由另外系统去消费消息。当然消息队列作为消息交换机,本系统既有生产消息也有消费消息。不做详述。生成者代码相对简单很多。package com.dhc.test.kafka;im原创 2018-01-08 15:21:58 · 3209 阅读 · 0 评论 -
关于Kafka的那些坑
进来使用了Kafka消息队列,喜忧参半。细数一下,踩过的坑。1、最好不要用Windows服务器去搞,当然像本人这样被迫使用的,就硬着头皮搞。Windows服务器搭建Kafka,首先先例少。其次稳定性,个人感觉要比Linux或者Mac上差远了。Windows上,停止Kafka后,在启动需要删掉log。否则会报错,log正在被另一个进程访问。Mac运行则没发现同样错误。2、Kafka的原创 2018-02-02 13:53:08 · 6988 阅读 · 1 评论 -
Kafka 关于消费者组名Consumer Group
由于本人是在Windows个人机上搭建了一个Kafka服务。所以使用中遇到了一个棘手的问题,也是第一次使用Kafka消息队列,所以对其核心知识知之甚少。一个困扰了些许时日的问题,经常因为log文件正被另一个进程使用中,而导致Kafka挂掉。经过排查,最后发现是由于有多个工程在连接Kafka服务充当消费者,而消费者组名是相同的,因为我这里是有很多topic,多个消费者工程针对不同topic在同时运行...原创 2018-03-12 10:31:11 · 12095 阅读 · 2 评论