Kafka
运维老司机
星光不问赶路人 时光不负有心人
展开
-
Kafka+Zookeeper+kafka-manager
环境准备安装zookeeper上传zookeeper安装包到服务器zookeeper安装包提取码:ghzg解压修改配置tar -xvf zookeeper-3.4.6.tar.gzvim zookeeper/conf/zoo.cfg需要修改得两项创建数据和日志目录mkdir -pv /data1/zookeeper/datamkdir -pv /data2/zookeeper/logs创建myid文件、zookeeper集群都需要echo "1" > /原创 2020-07-25 15:10:12 · 376 阅读 · 0 评论 -
Kafka基础操作命令
文章目录查看topic创建topic删除Topic生产数据消费数据查看Topic信息查看topic./kafka-topics.sh --list --zookeeper 192.168.17.52:2181 创建topic./kafka-topics.sh --create --zookeeper 192.168.17.52:2181 --replication-factor 2 --partitions 2 --topic zk删除Topic./kafka-topics.sh --del原创 2020-07-23 17:32:52 · 182 阅读 · 0 评论 -
Kafka组件介绍
brokerKafka集群包含一个或多个服务器,这种服务器被称为brokerTopic每条发布到Kafka集群的消息都有一个类别,这个类别被称为topic。(物理上不同topic的消息分开存储,逻辑上一个topic的消息虽然保存于一个或多个broker上但用户只需指定消息的topic即可生产或消费数据而不必关心数据存于何处)Partitionparition是物理上的概念,每个topic包含一个或多个partition,创建topic时可指定parition数量。每个partiti.原创 2020-07-16 16:56:42 · 163 阅读 · 0 评论 -
Kafka的特性、应用场景
文章目录特性:应用场景特性:高吞吐量页缓存追加写入零拷贝高可靠性消息持久化,副本机制解耦消息生产和消息消费消息重演高可用性负载均衡故障转移高伸缩性集群状态交由ZooKeeper管理应用场景消息投递能够很好的代替传统的message broker。它提供了更强大的吞吐量,内建分区,复本,容错等机制来解决大规模消息处理型应用程序。日志收集一个公司可以用Kafka可以收集各种服务的log,通过kafka以统一接口服务的方式开放给各种co原创 2020-07-16 10:27:42 · 171 阅读 · 0 评论