Kafka学习
student__software
这个作者很懒,什么都没留下…
展开
-
Kafka最全概述和架构
本篇是属于转载,在加上自己的理解,原文是https://blog.csdn.net/ychenfeng/article/details/74980531KafkaKafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基...转载 2018-08-14 20:36:41 · 1855 阅读 · 4 评论 -
Kafka集群部署和命令
一、部署注意:kafka启动之前一定是要先将zookeeper集群先起起来的broker:9092就是kafka的服务端口,zookeeper:21811)解压安装包$ tar -zxvf kafka_2.11-0.11.0.0.tgz -C /opt/module/2)修改解压后的文件名称$ mv kafka_2.11-0.11.0.0/ kafka3)在/o...原创 2018-08-14 20:56:17 · 699 阅读 · 0 评论 -
Kafka的生产者API(新)
主要是创建和设置KafkaProducer这个对象,分为两种:一个是带回调函数的,一个是不带的1、创建生产者这个是不带回调函数,其中像端口号等配置项都封装在了ProducerConfig这个类里,也可以使用 ProducerConfig.BOOTSTRAP_SERVERS_CONFIG 这种方式去设置属性,这样比下面这种好记public class NewProducer {...原创 2018-08-15 14:44:41 · 1851 阅读 · 0 评论 -
Kafka的消费者API
kafka官方文档APIhttp://kafka.apache.org/090/javadoc/index.html?org/apache/kafka/clients/consumer/KafkaConsumer.html一、高级APIkafka自己维护offset分区等等:创建和设置KafkaConsumer对象,记住要记得去订阅topic即调用subscribe方法publi...原创 2018-08-15 15:11:12 · 4349 阅读 · 2 评论