![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 88
小螺旋丸
公众号:螺旋编程极客
个人网站:zrxlh.top
展开
-
数睿通2.0版本升级:探索数据血缘的奥秘
数睿通 2.0 迎来了 4 月份的更新,该版本更新了许多用户期望的数据血缘模块,把原来外链跳转 neo4j 页面改为自研页面,方便后期的二次开发完善,此外,新版本摒弃了 neo4j 的血缘数据存储方案,一来是因为免费版只能单节点部署,数据量大了会受限,二来是因为很多用户对 neo4j 并不熟悉,上手需要学习其独特的 sql 语法,有一定的学习成本,所以新版采用了 mysql 的存储方案,通过合理的表结构把血缘数据存储到 mysql 中,简单且容易理解,更加利于维护拓展。下面我们一起来看一下本次更新的内容(想原创 2024-04-24 17:30:00 · 496 阅读 · 0 评论 -
数睿通2.0数据接入升级——支持增量字段同步,表单独映射
本次更新内容就是这些了,看上去不多,但背后也是付出了很多的劳动,希望平台以后能越做越好,给大家的工作带来便利。下个版本会优先更新自研数据血缘页面,完善数据标签,有时间的话会支持 excel,api 等非结构化的数据集成,这几个功能呼声较高,优先考虑,平台后期打算跟 AI 结合,争取让现有功能变得更加智能,强大,任重而道远!原创 2024-03-08 17:34:45 · 594 阅读 · 0 评论 -
数睿通2.0功能更新:支持多版本 Flink 切换,新增数据标签模块
本次数睿通 2.0 的功能更新介绍就到此结束了,比较大的改动是 Flink 多版本适配,这次更新之后,编译调试代码就无需勾选 profiles 了,打包的时候勾选 profiles 可以指定 win 或 linux 输出指定平台的安装包。后续数睿通 2.0 会完善标签剩下的两个模块,优化完善数据血缘等功能。目前源码,部署指南,讲解视频等相关资料是付费加入知识星球获取的,价格相比其他同系列的产品连个零头都不到,还是很良心的,星球内可以获取到数睿通 2.0 的最新源码资料等,功能发布之后也会第一时间分享。原创 2023-12-28 17:30:00 · 1266 阅读 · 1 评论 -
数睿通2.0:高效的数据处理,主数据与数据表功能全面升级
数睿通2.0:高效的数据处理,主数据与数据表功能全面升级原创 2023-10-14 20:15:00 · 563 阅读 · 1 评论 -
数睿通2.0数据服务功能模块发布
现在平台已经具备了拉数,造数,供数的能力,剩下需要开发的模块还有数据治理,数据资产和数据集市,预计五月底整体可以基本开发完毕,之后便会对系统做进一步的优化完善,提升交互和使用体验,更好的服务业务,创造更大的价值。目前源码,部署指南,讲解视频等相关资料是付费获取的,价格相比其他同系列的产品连个零头都不到,可以说是非常良心了。原创 2023-02-27 09:18:35 · 1117 阅读 · 0 评论 -
新年快乐—数睿通2.0数据中台全新功能模块发布
离上次发文已经有接近三个月了,这三个月主要在开发数睿通的数据生产模块,同时优化了一下数据集成,目前已经基本开发完毕了,集成了 Flink,Hadoop,可以在线开发 FlinkSql 作业任务,同时支持 Sql 任务开发,使平台初步具备了拉数,造数的能力,正值新年,在这里给大家拜年了,祝大家新年快乐!原创 2023-01-23 13:31:28 · 2593 阅读 · 0 评论 -
精品分享—数睿通ETL异构数据库迁移工具(支持集成开发)
今天分享一款非常实用的异构数据库迁移工具,可以进行多种常见数据库之间的数据或结构迁移,相比于其他的数据迁移工具,它还支持字段索引,默认值,字段约束的信息同步,mysql 的主键递增等,支持基于正则表达式转换的表名与字段名映射转换。同步方式分为全量和增量同步两种类型,同步算法借鉴了 kettle 的数据同步算法,支持手动和定时执行。原创 2022-08-22 09:06:54 · 5171 阅读 · 6 评论 -
精品源码分享:基于 SpringCloud 和 Vue 的企业一站式数据治理中台
精品源码分享:基于 SpringCloud 和 Vue 的企业一站式数据治理中台原创 2022-05-05 09:00:00 · 2903 阅读 · 2 评论 -
Apache Atlas精讲:由浅入深,从概念,原理,使用,到自定义数据模型,生成血缘关系,带你玩转Atlas
Apache Atlas精讲:由浅入深,从概念,原理,使用,到自定义数据模型,生成血缘关系,带你玩转Atlas原创 2022-04-20 08:30:00 · 21752 阅读 · 11 评论