实时数仓在业界炒的火热,作为专注于数仓的博主来说不得不掌握。虽然博主对于实时数仓有着很深的理解,但一直在工作没有实践,不甘落后的我们决定自启项目。我们将从零到一搭建实时数仓,进行业务开发,数据分析,完成完整的实时数仓项目实践。我们将从本篇博客开始由浅入深的完成实时数仓落地。项目将放在git(持续更新)上:https://github.com/lanfz/flink-dw,期待你的关注或加入,喜欢的看官可以手动给个star!!!!
环境准备:
linux
flink https://mirrors.bfsu.edu.cn/apache/flink/flink-1.11.2/flink-1.11.2-bin-scala_2.12.tgz
kafka https://mirrors.bfsu.edu.cn/apache/kafka/2.6.0/kafka_2.12-2.6.0.tgz
scala https://downloads.lightbend.com/scala/2.12.12/scala-2.12.12.tgz
java