1 缘起
这个要从团队实时从kafka传输数据说起,
由于数据的实时性需求,决定使用Flink传输数据,
但是,直接使用公司的Flink平台,无法通过SQL拼接数据,
如with,
于是,决定使用java测试数据传输,
借助于Azkaban测试调度(只是测试Azkaban调度jar,实际没有使用这个方案),
于是,开始测试Azkaban调度jar,由于之前没有测试过Azkaban调度Java程序,
使用前先搜索了一番,一头雾水,都是片段式分享,
所有,我决定整理一篇完整的文章,填补空缺,供学习者参考,
真正做到从0到1完整实现Azkaban调度jar,并附带了测试的zip包,见具体的部分,有下载链接。
2 实战
以读取Redis集群数据为例,
文章所有配置,开箱即用,复制就行,一步一步来,必然会有正确的结果,
有任何问题,欢迎私信开聊,沟通。