vertica-->kafka-->mongodb数据流

此连接件为confluent修改过的jar包，这里不提供下载（涉及公司机密！！）

Kafka Connnect有两个核心概念：Source和Sink。 Source负责导入数据到Kafka，Sink负责从Kafka导出数据，它们都被称为Connector。

由于这里是kafka到mongo，所以这里使用Sink Connector

首先安装kafka

1，Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。

Kafka拓扑结构：

 Broker
Kafka集群包含一个或多个服务器，这种服务器被称为broker
 Topic
每条发布到Kafka集群的消息都有一个类别，这个类别被称为Topic。（物理上不同Topic的消息分开存储，逻辑上一个Topic的消息虽然保存于一个或多个broker上但用户只需指定消息的Topic即可生产或消费数据而不必关心数据存于何处）
 Partition
Parition是物理上的概念，每个Topic包含一个或多个Partition.
 Producer
负责发布消息到Kafka broker
 Consumer
消息消费者，向Kafka broker读取消息的客户端。
 Consumer Group
每个Consumer属于一个特定的Consumer Group（可为每个Consumer指定group name，若不指定group name则属于默认的group）。
安装zookeeper
配置环境变量，/etc/profile添加以下内容：
[root@dba06 kafka]# export ZOOKEEPER_HOME=/