流处理架构选型

greenplum + flink 做流处理

从批处理ETL到流式处理：一个来自Netflix的案例 https://juejin.im/entry/5aa73ccd6fb9a028c81285cb

greenplum = oracle12C 分布式RDB。 但是还是有局限性的。
flink、spark、storm

flink安装

docker run -t -p 8081:8081 flink local

greenplum安装

• yum方式安装不行。200的python是3.0的，语法不兼容2.7
• 在docker中安装greenplum: 不可以，到处都是坑。

总结

弄flink要把kafka 和 kafka connector做一下，flink不能从rdb抽取数据的话，用kafka connector弄一下
https://www.confluent.io/blog/kafka-connect-deep-dive-jdbc-source-connector

greenplum-boot集成的问题

• get url = null and ClassDriver = null
  获取不到配置：

1. 配置的默认mysql的Datasource没问题，
2. spring.datasource配置是有的
3. 获取不到配置文件?
   3.1 看jar的的classpath - 没有问题
   3.2 看appalication.ps里缺配置 - 没有