![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 91
这里提供大数据相关组件原理和实战技巧
Jack_hrx
在职全栈工程师。拥有多年系统架构和物联网研发经验!在博客中分享个人的技术总结,希望帮助更多IT朋友成长
展开
-
使用Apache Flink实现实时数据同步与清洗:MySQL和Oracle到目标MySQL的ETL流程
实现数据同步的ETL(抽取、转换、加载)过程通常涉及从源系统(如数据库、消息队列或文件)中抽取数据,进行必要的转换,然后将数据加载到目标系统(如另一个数据库或数据仓库)。在这里,我们将展示如何使用Apache Flink来实现一个从MySQL数据库抽取数据并同步到另一个MySQL数据库的ETL过程。原创 2024-06-18 13:43:55 · 5375 阅读 · 1 评论 -
深入解析 Flink CDC:实时数据捕获与处理的强大工具
Flink CDC (Change Data Capture) 是 Apache Flink 的扩展组件,用于捕获数据库中的变化数据,并将其作为流处理作业的一部分进行实时处理。原创 2024-06-20 10:58:57 · 4912 阅读 · 1 评论 -
Apache Flink详解:流处理与批处理的强大框架
Apache Flink是一种功能强大的流处理框架,适用于各种实时数据处理场景。其高性能、容错能力和灵活的时间处理特性,使其成为大数据处理的重要工具。通过对流和批处理的一体化支持,Flink为开发者提供了统一的数据处理平台。原创 2024-06-18 09:50:11 · 4966 阅读 · 0 评论