好消息！数栈FlinkX技术团队将FlinkX开源项目同步推送到Gitee啦！

最新推荐文章于 2021-12-17 16:01:32 发布
最新推荐文章于 2021-12-17 16:01:32 发布
阅读量522 收藏 1
点赞数
文章标签： flink github kafka 大数据 实时大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a958014226/article/details/115636159
版权

数栈是云原生—站式数据中台PaaS，我们在github上有一个有趣的开源项目：FlinkX

FlinkX是一个基于Flink的批流统一的数据同步工具，既可以采集静态的数据，比如MySQL，HDFS等，也可以采集实时变化的数据，比如MySQL binlog，Kafka等，是全域、异构、批流一体的数据同步引擎。

之前我们在github上开源了我们的FlinkX项目，但是由于github经常出现打不开链接的情况，因此我们将此代码同步推送到了Gitee，这样子大家就可以正常使用啦，欢迎给我们点个star！star！star！

https://gitee.com/dtstack_dev_0/flinkx

袋鼠云数栈
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
flink-local-train:flink入门到项目实践
05-06
Flink从入门到项目实践 Apache Flink是一个面向分布式数据流处理和批量数据处理的开源计算平台，提供支持流处理和批处理两种类型应用的功能。文章会对Flink中基本API如：DataSet、DataStream、Table、Sql和常用特性如：Time&Window、窗口函数、Watermark、触发器、分布式缓存、异步IO、侧输出、广播和高级应用如：ProcessFunction、状态管理等知识点进行整理。 代码涵盖Java和Scala版本（因笔者时间和能力有限，代码仅供参考，如有错误的地方请多多指证）。好手不敌双拳，双拳不如四手！希望和大家一起成长、共同进步！ DataStream测试kafka的生产者为统一的Mock类，可以指定不同的方法分别发送string、json、k/v格式数据。 Quick Start 在数据处理领域，WordCount就是HelloWorld。Fl
FlinkX--基于flink的分布式数据同步工具
热门推荐
HuFeiHu
02-07 2万+
GitHub地址：https://github.com/DTStack/flinkx.git 1 什么是FlinkX FlinkX是在是袋鼠云内部广泛使用的基于flink的分布式离线数据同步框架，实现了多种异构数据源之间高效的数据迁移。 不同的数据源头被抽象成不同的Reader插件，不同的数据目标被抽象成不同的Writer插件。理论上，FlinkX框架可以支持任意数据源类型的数据同步工作。作为...
上线啦丨FlinkX1.12 Beta版正式在Github开源
a958014226的博客
07-01 444
万众期待的FlinkX1.12的Beta版今天正式在Github社区开源上线啦！这是FlinkX技术团队潜心打造的新版本的FlinkX，设计文档和使用文档已在社区中推送，大家可以随时下载查阅，喜欢的同学记得给我们点个Star哦~ 本次上线的FlinkX1.12 Beta版做了以下更新： 1、FlinkX与FlinkStreamSQL融合 FlinkX作为分布式数据同步工具，FlinkStreamSQL基于开源的flink对实时sql进行扩展，我们将二者融合。融合后的FlinkX既支持原有的数据同步
docs oracle,docs/oraclewriter.md · 谢森/flinkx - Gitee.com
weixin_39625975的博客
04-03 87
# Oracle写入插件(oraclewriter)## 1. 配置样例```{"job": {"content": [{"reader": {"parameter": {"password": "wujing","where": "3 > 1","column": ["ID1","C1","C2"],"connection": [{"jdbcUrl": ["jdbc:oracle:thin...
Flink官方入门项目简介
wolfcode_cn的博客
02-16 860
本文作者：林伟兵，叩丁狼高级讲师。原创文章，转载请注明出处。 1. Flink简介 Flink 提供了三个核心的用户API： Batch Streaming Talbe & SQL ​ 本文不介绍Flink是什么，Flink的核心组件和特性，本文从用户的角度解读Batch和Streaming代码的实现方式，本文使用Flink1.6.1版本作为讲解。首先需要下载官方的案例，地址是...
java-Push开源实时消息推送系统
07-12
java-Push开源实时消息推送系统
基于Java的消息推送平台设计源码
最新发布
04-05
本资源提供了一套基于Java的消息推送平台的设计源码，包含349个文件，其中包括278个Java源代码文件，15个YAML配置文件，13个XML配置文件，以及8个JPEG图片文件。此外，还包括7个配置文件，5个SQL文件，4个Properties...
在线教育风口已来，这几个开源项目不能错过 | Gitee 项目推荐
01-07
Gitee 上也有很多关于在线教育的开源项目，比如下面这五个，一起来看看吧。 1、项目名称：学之思在线考试系统 项目简介：学之思在线考试系统是一款 java + vue 的前后端分离的考试系统。主要优点是开发、部署简单...
收藏的博客 -- Qt有关的GitHub-Gitee开源项目.docx
07-07
Qt技术博客1 Qt开源框架 KDE/Qt Qt Github精品收藏1 -- IDE Qt Github精品收藏2 -- frameless Qt Github精品收藏3 -- Ribbon Qt Github精品收藏4 -- DockWidget Qt Github精品收藏5 - Studio Qt Github精品收藏6 Qt ...
Gitee：开源项目的乐园与实战指南.zip
03-21
通过掌握Gitee的基本操作和扩展功能，开发者可以更好地管理项目、提升开发效率、推动开源项目的发展。未来，随着开源文化的不断普及和技术的不断进步，Gitee将继续发挥其在开源领域的重要作用，为更多开发者提供优质...
travel_data:基于flink的旅游平台项目
03-29
travel_data:基于flink的旅游平台项目
flink实践案例
12-20
本文档总结了国内各个互联网巨头使用flink的案例，有美团，唯品会，滴滴，360等，如何实现对flink的各种应用，同时里面也包含对flink使用的总结。
融合7大领域！Apache Flink 在开源生态下的应用实践
Ververica的博客
12-06 630
大数据从诞生到蓬勃发展已有十余年之久，在这个过程中，大数据生态的计算引擎、存储、调度、容器、分析等子系统也都有了长足的发展。Apache Flink 作为业界领先的开源大数据计算引擎，以...
Flink Remote Shuffle 开源：面向流批一体与云原生的 Shuffle 服务
Ververica的博客
11-30 870
▼ 关注「Apache Flink」，获取更多技术干货▼FlinkRemote Shuffle 正式开源作为支持 Flink 流批一体与云原生的重要组成部分，Flink Remote ...
连续三年蝉联第一，Flink 荣膺全球最活跃的 Apache 开源项目
阿里云开发者
02-04 1163
简介：Apache 软件基金会 2020 年度总结发布，Flink 多项排名领先！2020年，一个注定会被历史铭记的一年。在全球化合作受到挑战的大环境下，作为全球最大的开源软件基金会，Apache 软件基金所引领的开源社区，依然汇聚了全球的顶尖开发人员，交出了一份鼓舞人心的成绩单。2021年1月1日，Apache 基金会在其官方博客上发表了文章《Apache in 2020 - By The Digits》[1]，用数字回顾了2020 一整年的社区发展：Apache 软件基金会在过去的一年中，来自各个领域共
基于Flink SQL CDC的实时数据同步方案
zhengzaifeidelushang的博客
03-26 719
基于Flink SQL CDC的实时数据同步方案 本文总结于阿里巴巴Flink技术专家的视频分享，主要围绕以下4个方面展开： 传统数据同步方案 基于Flink SQL CDC的数据同步方案 Flink SQL CDC的更多应用场景 Flink SQL CDC的未来规划 目前个人主要在研究基于CDC的实时数据同步方案，后续会围绕这个主题，研究总结出一系列主题文章。 一、传统数据同步方案 典型问题： 面临的主要问题： 多写业务逻辑复杂 延时增加 数据一致性问题 二、CDC数据同步方案 优化方案：
Flink 利器：开源平台 StreamX 简介
I'm a 软件工程师
12-17 2866
开源 Flink 平台，SQL 化编程
flinkx基础学习
weixin_50665144的博客
12-08 1016
测试用例汇总 测试 配置 操作 测试结果 自动创建表（mysql） mysqltomysql.json 执行任务脚本 无法自动创建目标表，任务运行报错 自动创建表（hive） mysqltohive.json 执行任务脚本 自动创建目标表成功，同时可以指定分区 采集多表 mysqltomysqls.json 执行任务脚本 不支持采集多表，同时不支持写入多表 全量采集(mysql数据源到hdfs目标源) mysqltohdfs.json 执行任务脚本 采集成功 根据id增量采集
[flink]各种大厂开源案例
新一的技术笔记
08-10 1119
Flink 开源案例集 序号 志愿者 客户 标题 作者 文章链接 1 Bigo直播 流批一体生产应用！Bigo 实时计算平台建设实践 徐帅 @Bigo https://mp.weixin.qq.com/s?__biz=MzU3Mzg4OTMyNQ==&mid=2247491079&idx=1&sn=e6ce771ddb6b13e9515...
idea部署gitee开源项目
08-26
例如，使用git push origin master命令将本地库的master分支推送到Gitee远程仓库。 9. 现在你的项目已经部署到了Gitee上，其他用户可以在Gitee上访问你的开源项目。 请注意，这只是一个简单的步骤指南，具体的操作...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值