超级会员免费看
本文介绍了Kafka的安装步骤，包括在安装前先搭建Zookeeper集群，下载并解压Kafka，配置环境变量和修改配置文件。接着，文章演示了如何测试Kafka集群，包括在主节点创建生产者和消费者，以及验证数据传递。最后，文章讲解了两种删除topic的方法，一种是修改配置文件后删除，另一种是直接强制删除。
一、kafka
按照搭建hadoop完全分布式集群博文搭建完hadoop集群后，发现hadoop完全分布式集群自带了HDFS，MapReduce，Yarn等基本的服务，一些其他的服务组件需要自己重新安装，比如Hive，Hbase，sqoop，zookeeper，spark等，这些组件集群模式都在前面相关博文中有介绍，今天我们需要安装另外一个组件，它就是分布式消息系统Kafka。
Kafka介绍
Kafka是由LinkedIn开发的一个分布式基于发布/订阅的消息系统，使用Scala编写，它以可水平扩展和高吞吐率而被广泛使用。
Kafka是什么？举个例子，生产者消费者，生产者生产鸡蛋，消费者消费鸡蛋，生产者生产一个鸡蛋，消费者就消费一个鸡蛋，假设消费者消费鸡蛋的时候噎住了（系统宕机了），生产者还在生产鸡蛋，那新生产的鸡蛋就丢失了。再比如生产者很强劲（大交易量的情况），生产者1秒钟
订阅专栏 解锁全文
扫一扫
2174
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
