发送kafka消息的shell脚本

echo ${messageContent} >> batchMessage.txt

fi

#取余数

modVal=$(( ${i} % ${batchNum} ))

#如果达到一个批次，就发送一次消息

if [ ${modVal} = 0 ] ; then

#在控制台显示进度

echo “${i} of ${totalNum} sent”

#批量发送消息，并且将控制台返回的提示符重定向到/dev/null

cat batchMessage.txt | ${kafkaPath}/bin/kafka-console-producer.sh --broker-list ${brokerlist} --sync --topic ${topic} | > /dev/null

#将标志设置为true，这样下次写入batchMessage.txt时，会将文件中的内容先清除掉

firstLineFlag=‘true’

fi

done

2. kafkaPath是客户端电脑上kafka安装的路径，请按实际情况修改；

3. brokerlist是远程kafka信息，请按实际情况修改；

4. topic是要发送的消息Topic，必须是已存在的Topic；

5. totalNum是要发送的消息总数；

6. batchNum是一个批次的消息条数，如果是100，表示每攒齐100条消息就调用一次kafka的shell，然后逐条发送；

7. messageContent是要发送的消息的内容，请按实际需求修改；

运行脚本

1. 给脚本可执行权限：chmod a+x sendmessage.sh

2. 执行：./sendmessage.sh

3. 每到一百条会有一次进度提醒：

(base) zhaoqindeMBP:07 zhaoqin$ ./sendmessage5.sh

“100 of 10000 sent”

“200 of 10000 sent”

“300 of 10000 sent”

“400 of 10000 sent”

“500 of 10000 sent”

“600 of 10000 sent”

“700 of 10000 sent”

“800 of 10000 sent”

…

4. 用shell命令消息此消息：

./kafka-console-consumer.sh \

–bootstrap-server 192.168.50.135:31090 \

–topic test001 \

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Java工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Java开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Java开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且会持续更新！

如果你觉得这些内容对你有帮助，可以扫码获取！！（备注Java获取）

Kafka实战笔记

关于这份笔记，为了不影响大家的阅读体验，我只能在文章中展示部分的章节内容和核心截图

• Kafka入门
• 为什么选择Kafka
• Karka的安装、管理和配置

• Kafka的集群
• 第一个Kafka程序
• 

afka的生产者

• Kafka的消费者
• 深入理解Kafka
• 可靠的数据传递

• Spring和Kalka的整合
• Sprinboot和Kafka的整合
• Kafka实战之削峰填谷
• 数据管道和流式处理(了解即可)

• Kafka实战之削峰填谷

《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门即可获取！

• Kafka实战之削峰填谷

[外链图片转存中…(img-r4gpGjIe-1711928889305)]

《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门即可获取！