Flink+kafka根据埋点客户计算漏损率

今天开始有个新的需求：统计pv和uv

使用Flink整合kafka通过埋点计算评估分析客户行为

接下来一起从小白开始玩吧：

1.Flink-kafka-connector 

Kafka中的partition机制和Flink的并行度机制结合，实现数据恢复

Kafka可以作为Flink的source和sink

任务失败，通过设置kafka的offset来恢复应用

依赖

<dependency>

    <groupId>org.apache.flink</groupId>

    <artifactId>flink-connector-kafka_2.11</artifactId>

    <version>1.31.1</version>

</dependency>

2.kafka简单操作

启动zk：nohup bin/zookeeper-server-start.sh config/zookeeper.properties &

启动server: nohup bin/kafka-server-start.sh config/server.properties &

创建一个topic：bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

查看topic：bin/kafka-topics.sh --list --zookeeper localhost:2181

发送数据：bin/kafka-console-producer.sh --broker-list localho