![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kafka
文章平均质量分 52
我在燕京有把刀
这个作者很懒,什么都没留下…
展开
-
Kafka的Topic删不掉
1、修改 kafka/config/server.properties文件,将delete.topic.enable设置为true然后重启2、如果已经设置为true,那么查看是否有生产者或者消费者在使用该topic,如果正在使用,那么即使删除了该topic,还会被创建,但是数据被清空。...原创 2021-04-25 16:53:03 · 1062 阅读 · 3 评论 -
Kafka(三)——eagle监控器配置
四、Kafka监控——Eagle1、修改kafka启动命令kafka/bin vim kafka-server-start.sh修改if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"fi为:if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then export KAFKA_HEAP_OPTS="-server -Xms2G -Xmx2G -XX:Per原创 2021-04-23 15:12:21 · 387 阅读 · 0 评论 -
Kafka(二)——架构学习
Kafka深入 ———学习尚硅谷Kafka课程视频笔记1、Kafka工作流程1.1、结构生产者生产的消息还会不断追加到log的末尾,如果log文件过大,则会导致数据定位效率低下。因此,Kafka有了分片和索引机制一个partition对应多个Segment。一个Segment有一个index和一个log文件,这些文件位于一个文件夹下。1.2、工作流程Kafka的消息以topic分类。topic是一个逻辑上的概念,log文件是实际产物。生产者原创 2021-04-23 11:50:28 · 135 阅读 · 0 评论 -
Kafka(一)——架构和基础操作
一、Kafka架构1、消息队列(Message Queue)1.1、点对点模式一对一,消费者主动拉取数据,消息收到后消息清除生产者将消息发送到Queue中,然后消费者从queue里拉取数据,一条消息被消费了之后,queue就删除了该消息。虽然queue支持存在多个消费者,但是一条消息只有一个消费者能消费到1.2、发布/订阅模式一对多,消费者消费数据之后不会清除数据生产者将消息发布到topic中,同时有多个消费者消费该消息,topic里面的消息会被所有消费者消费Kafka基于发布/订阅模式原创 2021-04-22 14:49:36 · 77 阅读 · 0 评论 -
Kafka/flume集群启动脚本无效
使用脚本启动kafka无效脚本如下for i in hadoop102 hadoop103 hadoop104doecho "========== $i ==========" ssh $i '/opt/module/kafka/bin/kafka-server-start.sh -daemon /opt/module/kafka/config/server.properties'echo $?done使用后在hadoop104 jps一把,发现没有Kafka进程,去监控Kafka日志,原创 2021-04-22 11:51:52 · 604 阅读 · 0 评论