- 博客(4)
- 资源 (2)
- 收藏
- 关注
原创 Kafka1.0X之基础API的使用
今天在部署Kafka1.0.1的时候,发现Kafka的很多API结果有所调整,所以基于1.0.1版本开发了一个基本的producer和consumer 安装和之前基本类似,没有很多区别,需要注意的是很大地方需要填写主机名不要填写ip了记得需要修改window的hosts文件,将主机名配置进去测试生产端package xlucas.kafka;//依赖的API也变化import org.apac
2018-03-21 00:32:51 933
原创 DATAX之MysqlReader和MysqlWriter
核心 1、MysqlReader介绍 2、MysqlWriter介绍 3、案例测试Mysql Reader 1 、快速介绍 MysqlReader插件实现了从Mysql读取数据。在底层实现上,MysqlReader通过JDBC连接远程Mysql数据库,并执行相应的sql语句将数据从mysql库中SELECT出来。不同于其他关系型数据库,MysqlReader不支持Fetch
2018-03-18 23:38:14 9323 3
原创 DATAX之HDFSReader和HDFSWriter
核心 1、介绍HDFSReader的注意事项 2、HDFSReader的参数说明 3、介绍HDFSWriter的注意事项 4、HDFSWriter的参数说明 5、测试 HdfsReader提供了读取分布式文件系统数据存储的能力。在底层实现上,HdfsReader获取分布式文件系统上文件的数据,并转换为DataX传输协议传递给Writer。 目前HdfsReader支持的文
2018-03-11 23:07:13 17149 7
原创 DATAX之FTPReader
快速介绍 FtpReader提供了读取远程FTP文件系统数据存储的能力。在底层实现上,FtpReader获取远程FTP文件数据,并转换为DataX传输协议传递给Writer。 本地文件内容存放的是一张逻辑意义上的二维表,例如CSV格式的文本信息。功能与限制 FtpReader实现了从远程FTP文件读取数据并转为DataX协议的功能,远程FTP文件本身
2018-03-08 23:57:57 3460
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人