Kafka
justry_deng
很多不会不懂不了解不明白,我只是一个善于记录的普通coder
展开
-
Kafka的安装(含相关指令)、基础配置、简单测试
目录安装启动查看某节点下的信息、创建主题、查看所有的主题使用测试本人测试时相关环境: 机器 jdk Kafka Linux CentOS7 1.8 kafka_2.11-2.1.0.tgz 安装第一步:下载Kafka安装包https://www....原创 2019-03-10 19:01:46 · 877 阅读 · 2 评论 -
SpringBoot整合并简单使用Kafka
目录准备工作编写消费者生产者 项目结构说明 生产者(示例) 消费者测试一下相关测试结论声明:本文部分内容,可能需要了解Kafka相关基础知识才能看懂。准备工作第一步:安装并启动Kafka(详见https://blog.csdn.net/justry_deng/article/details/88381595)。注:需要...原创 2019-03-10 19:51:31 · 549 阅读 · 0 评论 -
SSL认证之相关证书的生成
目录相关知识点之Kafka支持的认证处理SSL相关证书的生成服务器端SSL证书签发准备工作:修改/etc/hosts文件,自定义一个hosts名第一步:为了方便证书的保存管理,这里先专门创建几个目录来保存证书第二步:生成server.keystore.jks文件(即:生成服务端的keystore文件)第三步:生成CA认证证书(为了保证整个证书的安全性,需要使用CA进行证...原创 2019-03-10 20:51:56 · 9769 阅读 · 11 评论 -
Kafka配置SSL认证
目录Kafka配置SSL认证使用kafka自带的消费者生产者测试一下我是一只小小小小鸟~嗷!嗷!Kafka配置SSL认证准备工作:生成SSL相关证书注:详见https://blog.csdn.net/justry_deng/article/details/88383081。注:其实对于本节内容来说,有SSL的服务端证书就够了。第一步:修改kafka安装目录下conf...原创 2019-03-10 21:17:59 · 22092 阅读 · 8 评论 -
SpringBoot整合并简单使用SSL认证的Kafka
目录 准备工作 编写消费者生产者 测试一下昨天村口【托尼老师】,帮我设计了个发型,美滋滋~准备工作第一步:启动需要SSL认证的kafka。注:SSL证书的生成详见https://blog.csdn.net/justry_deng/article/details/88383081; Kafka配置SSL详见https://blog.csdn...原创 2019-03-10 21:43:08 · 12407 阅读 · 10 评论 -
Kerberos认证(服务端配置)
声明:本文不介绍Kerberos认证相关理论知识,想了解的可自行查阅相关资料。醉春风~我醉春风~喔喔……伤她心,我是万万不能。服务器端配置Kerberos的步骤:第一步:进行所有kerberos认证文件的管理,我们创建一个目录来专门存放相 关认证文件指令:mkdir -p /var/local/kafka/jaas执行效果如图:第二步:...原创 2019-03-10 23:41:15 · 5304 阅读 · 12 评论 -
SpringBoot整合并简单使用Kerberos认证的Kafka
早餐一个白鸡蛋吃得俺打嗝 -_-|||准备工作1、启动需要Kerberos认证的kafka。注:具体配置方式可详见https://blog.csdn.net/justry_deng/article/details/88386114。2、在本地将C:\Windows\System32\drivers\etc\hosts中指定kafka所在broker的ip地址以及其对应的主机名。...原创 2019-03-11 10:01:08 · 15026 阅读 · 3 评论 -
SpringBoot之Flume整合Logback
我还是喜欢比较浓一点的茶,比如,金骏眉。前言: Kafka的确可以处理千万条甚至更多的数据,但是这些数据从哪里来呢?如果是处于开发中的项目,我们的确可以在代码中主动生产消息并推送到kafka;但如果是那些已经写好了的项目,该怎么将消息推送到kafka呢,此时我们就可以借助Flume等框架来完成数据的采集,进而推送给kafka。 Flume一定要结合日志框架(如:L...原创 2019-03-11 10:43:44 · 4980 阅读 · 0 评论 -
SpringBoot之Flume整合Kafka
目录准备工作Flume整合Kafka 第一步:解压kafka_2.11-2.1.0.tgz文件,将kafka-clients-2.1.0.jar包拷贝至Flume安装目录下的lib文件夹中。 第二步:在flume安装目录下的conf文件夹下创建一个jaas配置文件kafka_client_jaas.conf。 第三步:修改Flume安装...原创 2019-03-11 11:38:54 · 3010 阅读 · 0 评论