Kafka
文章平均质量分 56
ywb201314
兵法有言,知己知彼,百战不殆
展开
-
spring-boot-kafka启动报错,无法自动创建Topic
经过排查和寻找方案,才知道原因,我的Kafka版本是2.3.1,凡是2.2版本以上的,都添加了一个新的属性。因此需要在application.yml文件这样设置一下就Ok了。转载 2023-02-22 17:53:18 · 1120 阅读 · 0 评论 -
kafka 3.0.0 Windows下启动不了的问题及kafka使用教程
删除topic会报错,此时停掉所有的cmd,然后将日志文件删除,重新启动可以解决。# broker.id 要保持唯一,只启动一台的话则不需修改。replication-factor:设置分区副本。因kafka3.0之后内置zk所以不需要额外下载。# 修改zk连接地址,默认本机启动则不需要修改。partitions:分区。然后就可以快乐的发送啦。# 修改日志存放位置。# 修改日志存放位置。转载 2023-02-22 15:08:23 · 705 阅读 · 0 评论 -
kafka删除topic及其相关数据
1、删除kafka存储目录(server.properties文件log.dirs配置,默认为"/tmp/kafka-logs")相关topic目录2、Kafka 删除topic的命令是: ./bin/kafka-topics --delete --zookeeper 【zookeeper server】 --topic 【topic name】 如果kafaka启...转载 2019-03-14 15:06:55 · 213 阅读 · 0 评论 -
kafka如何彻底删除topic及数据
前言:删除kafkatopic及其数据,严格来说并不是很难的操作。但是,往往给kafka 使用者带来诸多问题。项目组之前接触过多个开发者,发现都会偶然出现无法彻底删除kafka的情况。本文总结多个删除kafka topic的应用场景,总结一套删除kafka topic的标准操作方法。step1:如果需要被删除topic 此时正在被程序 produce和consume,则这些生产和消费...转载 2019-03-14 15:05:19 · 323 阅读 · 0 评论 -
Kafka Java示例
由于项目原因需要升级kafka,需要重新申请kafka服务,用新的Java API来编写producer和consumer,顺便接触一下Kafka。准备工作就是安装zookeeper和kafka,由于关于安装方面的文章很多,在此就不细说了。一、一些问题1.1 kafka错误错误: WARN Error while fetching metadata with correlati...转载 2019-03-14 15:03:04 · 412 阅读 · 0 评论 -
Kafka如何彻底删除topic
Kafka如何彻底删除topic环境描述Kafka集群环境如下,三台broker,三台zookeeper,搭建在k8s上最近搭建为客户提供kafak生产支持,客户有一个测试topic,因为之前使用的是单节点,开发在测试时创建的topic只有一个replication,一个partition,对有三个broker的集群来说这样显然发挥不了Kafka的高并发性和数据安全性,客户又不想改to...转载 2019-03-14 15:00:14 · 163 阅读 · 0 评论 -
Apache Kafka下载
原文地址:http://www.orchome.com/66转载 2019-03-09 16:29:16 · 251 阅读 · 0 评论 -
Kafka入门教程(二)
转自:https://blog.csdn.net/yuan_xw/article/details/79188061Kafka集群环境安装相关下载相关下载:JDK要求1.8版本以上。JDK安装教程:http://blog.csdn.net/yuan_xw/article/details/49948285Zookeeper安装教程:http://blog.csd...转载 2019-03-09 15:28:59 · 176 阅读 · 0 评论 -
Kafka入门教程(一)
转自:https://blog.csdn.net/yuan_xw/article/details/512109541Kafka入门教程1.1消息队列(Message Queue)Message Queue消息传送系统提供传送服务。消息传送依赖于大量支持组件,这些组件负责处理连接服务、消息的路由和传送、持久性、安全性以及日志记录。消息服务器可以使用一个或多个代理实例...转载 2019-03-09 15:24:51 · 568 阅读 · 0 评论 -
Kafka最强教程
链接:https://blog.csdn.net/ychenfeng/article/details/74980531KafkaKafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、...转载 2019-03-09 15:17:48 · 1487 阅读 · 0 评论 -
震惊了!原来这才是kafka!
简介kafka是一个分布式消息队列。具有高性能、持久化、多副本备份、横向扩展能力。生产者往队列里写消息,消费者从队列里取消息进行业务逻辑。一般在架构设计中起到解耦、削峰、异步处理的作用。kafka对外使用topic的概念,生产者往topic里写消息,消费者从读消息。为了做到水平扩展,一个topic实际是由多个partition组成的,遇到瓶颈时,可以通过增加partition的数量来进行横...转载 2019-03-09 15:15:22 · 221 阅读 · 0 评论 -
KafKa基本入门教程
本教程开始前,假设你已经下载并解压到相应目录下windows 下启动kafka第1步:启动服务器进入到kafka安装目录1.先启动zookeeperbin\windows\zookeeper-server-start.bat config/zookeeper.properties2.再启动kafkabin\windows\kafka-server-start.bat con...转载 2019-03-09 15:13:24 · 253 阅读 · 0 评论 -
Kafka集群环境搭架
软件环境Linux 服务器,一台或者多台,这里我们设置三台ip6:centos-node6ip7:centos-node7ip8:centos-node8123zookeeper 集群环境之前我们已经有搭建好的zookeeper集群环境,参考http://blog.csdn.net/liulihui1988/article/details/77051145kafka 版本...转载 2019-03-14 10:41:10 · 119 阅读 · 0 评论