摘要
本文主要内容是介绍如何使用kafka-connect进行导入导出数据,文章内容来自于kafka官方文档,对官方文档中一些内容作了简要补充。
简介
向console中写入数据然后再写回到console是非常方便的,但是你可能想从其他的数据源写入数据,然后将数据导出到kafka以外的其他系统,kafka connect 为很多系统提供导入导出数据功能,而不用写任何代码
1、准备数据源
>mkdir /data
> echo -e "foo\nbar" > /data/test.txt
(此处需要注意test.txt文件所在的路径,如果没有/data 文件夹需要先创建他)
2、修改配置文件
之后我们需要修改kafka配置文件 connect-file-source.properties,文件内容相当简单
name=local-file-sour