kafka
文章平均质量分 85
Mr. 阿紫
关注我,阿紫陪你一起成为大牛
展开
-
Kafka数据持久化、高效传输设计原理
一、kafka解决的业务痛点 解决大量数据的实时传输问题。例如: 可能需要支持高吞吐量的实时日志聚合系统事件流 可能需要支持大量后台日志处理中,离线系统周期加载数据 低延时消息传输 这需要kafka系统支持分区,分布式,实时处理接收到的数据。此外,当数据被送到其他服务系统中时,kafka系统在机器出现问题是还必须有容错性保证。从某种程度上理解,kafka系统更像是一个日志数据库。 二、kafka持久化存储数据设计 kafka强依赖于文件系统和操作系统页缓存,摈弃java堆缓存机制,同时原创 2022-05-05 16:12:41 · 918 阅读 · 0 评论 -
1.kafka基本命令和配置说明
1.基本命令 cd /opt/program-files/kafka/kf/bin ./kafka-topics.sh --list --zookeeper zk:2181 #查看所以主题 ./kafka-topics.sh --create --zookeeper zk:2181 --replication-factor 1 --partitions 1 --topic test #创建主题test ./kafka-topics.sh --describe --zookeeper zk原创 2021-09-27 14:41:59 · 458 阅读 · 0 评论