![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
NIFI
supingemail
这个作者很懒,什么都没留下…
展开
-
NiFi 学习 — kafka入库mysql
好记忆不如烂笔头,能记下点东西,就记下点,有时间拿出来看看,也会发觉不一样的感受.介绍下从kafka中获取数据,然后放入到 mysql 的操作!目录目标一、准备工作1.kafka集群2.zookeeper集群3.数据表4. 造数程序5.发送程序二、NIFI UI配置1.kafka的处理器2.EvaluateJsonPath处理器配置3.Spl...原创 2019-11-01 14:09:22 · 2594 阅读 · 0 评论 -
NiFi 学习 —自己实现处理器
好记忆不如烂笔头,能记下点东西,就记下点,有时间拿出来看看,也会发觉不一样的感受.简单描述一下自己通过学习nifi和查看源码,然后自己通过nifi的体现很基础的实现自己的业务的处理器开发。适合刚入门的看,有nifi基础的,可以跳过!目录一、 获取一个json文件的文本信息.1.Json文档的输入端,需要一个GenerateFlowFile处理器,做如下配置:2.拖拽自己实现...原创 2019-11-01 12:00:00 · 1521 阅读 · 0 评论 -
Apache NiFi 简介
好记忆不如烂笔头,能记下点东西,就记下点,有时间拿出来看看,也会发觉不一样的感受.NiFi 总结一个易用、强大、可靠的数据处理与分发系统。基于Web图形界面,通过拖拽、连接、配置完成基于流程的编程,实现数据采集等功能一、什么是NiFi?NiFi是美国国家安全局开发并使用了8年的可视化数据集成产品,2014年NAS将其贡献给了Apache社区,2015年成为Apache顶级...转载 2019-11-01 10:11:03 · 1010 阅读 · 0 评论 -
Apache NiFi开发人员指南
好记忆不如烂笔头,能记下点东西,就记下点,有时间拿出来看看,也会发觉不一样的感受. 在csdn上找了篇翻译的比较好的nifi的开发指南,指南的地址是: https://blog.csdn.net/zhanglong_4444/article/details/88692667#introduction 对于想进一步学习nifi的人来说,还是不错的入门重点...原创 2019-10-25 10:16:28 · 602 阅读 · 0 评论 -
NiFi 学习 — 统计数
好记忆不如烂笔头,能记下点东西,就记下点,有时间拿出来看看,也会发觉不一样的感受.利用nifi统计单词出现的次数从工具栏中拖入一个Processor,在弹出面板中搜索GenerateFlowFile,然后确认,设置GenerateFlowFile 的属性如下:注意看属性的设置, 尤其要输入custom text的内容: 本例中输入的text内容是:With each releas...原创 2019-10-23 15:14:20 · 1111 阅读 · 0 评论 -
NiFi 学习 — 文件搬运实践
好记忆不如烂笔头,能记下点东西,就记下点,有时间拿出来看看,也会发觉不一样的感受.利用nifi搬运文件将指定目录input下的test.txt文件搬运到output文件夹下去.:a. 从工具栏中拖入一个Processor,在弹出面板中搜索GetFIle,然后确认设置GetFile的文件输出地址,每次移动多少个文件,是否保留文件等设置:(保证input文件夹下有要搬运的文件)...原创 2019-10-23 14:52:55 · 723 阅读 · 0 评论 -
NiFi 学习 — 外置集群安装
好记忆不如烂笔头,能记下点东西,就记下点,有时间拿出来看看,也会发觉不一样的感受.目录 1.准备机器: 2.安装zookeeper集群:a.下载b.配置zoo.cfgc.新建myid文件并写入集群标识d.检测是否安装成功3.下载nifi配置zk连接串:4.修改nifi的配置: 1.S to S 設置修改: 2.Web UI设置: ...原创 2019-10-23 14:39:52 · 1131 阅读 · 4 评论 -
NiFi 学习 — 内置集群安装
好记忆不如烂笔头,能记下点东西,就记下点,有时间拿出来看看,也会发觉不一样的感受.目录准备机器: 2.配置内部zookeeper的属性: 3.设置集群的通信连接串 4.修改nifi.properties的配置文件属性 5.创建zookeeper的myid文件 6.校验是否安装成功.7.注意项目. 准备机器: 1...原创 2019-10-23 14:08:02 · 871 阅读 · 0 评论