![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kafka
chak_16
人永远是要学习的。死的时候,才是毕业的时候。
展开
-
kafka版本1.1.0 javaAPI实现生产者、消费者
一、环境准备:1、maven工程中引入依赖: <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.12</artifactId> <version>1.1.0</version>原创 2018-06-19 22:14:45 · 6807 阅读 · 0 评论 -
spark streaming + kafka 找不到kafkaUtils类
maven构建streaming+kafka的项目问题:运行项目报找不到KafkaUtils类:(如下图)于是我打开idea但确实可以找到这个包下的KafkaUtils类,刚开始以为打包的问题,找半天都没错,上网说可能是scala和kafka版本的冲突,但是我检查了一遍都没问题,版本不冲突spark2.3、scala2.11、kafka0.10解决方式:1、去maven仓库找到KafkaUtils...原创 2018-07-03 07:51:38 · 9479 阅读 · 0 评论 -
kafka集群搭建
一、前提准备笔者在这里的使用版本,仅供参考名称 版本 地址 zookeeper 3.4.12 zookeeper官网下载地址 kafka 1.1.0 kafka官网下载地址 主要配置信息如下(这里的zookeeper集群是之前搭建的myid都是以前设置的,而broker.id怕混淆就和主机ip结尾设置一样的)主机IP ...原创 2018-07-16 21:28:53 · 1634 阅读 · 1 评论 -
Kafka+Spark streaming读取数据存hdfs
待更新原创 2018-07-05 08:30:24 · 11833 阅读 · 8 评论