NiFi在大数据生态中的定位是成为一个统一的,与数据源无关的大数据集成平台。Cloudera将NiFi作为其新产品Cloudera Flow Management和Cloudera Edge Management的核心组件推出,可以方便地使用Cloudera Manager进行Parcel安装和集成。于此同时,Flume被移出了Cloudera Runtime,可见NiFi替换Flume的意图已经十分明显。
根据Cloudera官网介绍,CFM和CEM将为IOT场景的边缘数据收集和处理带来无限可能,这是最吸引我的地方。本篇文章主要介绍如何在CDH7.1.1中通过Parcel的方式安装NiFi,后续我们将围绕实际IOT场景,从架构,可用性,健壮性等方面来探索NiFi技术带来的改变。
部署CFM Parcel包
1.下载CFM的Parcel
http://archive.cloudera.com/CFM/parcels/1.0.1.0/manifest.jsonhttp://archive.cloudera.com/CFM/parcels/1.0.1.0/CFM-1.0.0.0-el7.parcelhttp://archive.cloudera.com/CFM/parcels/1.0.1.0/CFM-1.0.0.0-el7.parcel.sha1
2.将Parcel文件部署在