Exchangis 是微众银行大数据平台 WeDataSphere 与社区用户共同研发的的新版数据交换工具,支持异构数据源之间的结构化和非结构化数据传输同步。
Exchangis 还抽象了一套统一的数据源和同步作业定义插件,允许用户快速接入新的数据源,并只需在数据库中简单配置即可在页面中使用。
基于插件化的框架设计,及计算中间件 Linkis,Exchangis 可快速集成对接 Linkis 已集成的数据同步引擎,将 Exchangis 的同步作业转换成 Linkis 数据同步引擎的数据同步作业。
借助于 Linkis 计算中间件的连接、复用与简化能力,Exchangis 天生便具备了高并发、高可用、多租户隔离和资源管控的金融级数据同步能力。
新版本内容说明
相比于 Exchangis1.0.0,Exchangis1.1.2 最大的特点是新增了 DataX 引擎并支持了 Oracle 数据源,同时修复了项目模块和任务模块中一些常见的问题,进一步提高了系统的稳定性。
Exchangis1.1.2 主要新增如下特性功能:
1、【作业引擎插件模块】新增 DATAX 引擎,支持多种数据导数链路
2、【项目管理模块】项目权限控制功能rtk,支持同步 DSS 的项目权限到 Exchangis
3、【数据源模块】新增 Oracle 数据源,支持与 MySQL、Hive、MongoDB 的双向导数,以及导入到 ElasticSearch
4、【数据源模块】数据源连接敏感信息加密,支持属主进行连接信息加密
5、【作业配置管理模块】字段规则映射管理功能,支持对不同引擎和不同数据源的字段映射规则和字段匹配策略进行管理,并在加载作业时在前端进行渲染
6、【作业配置管理模块】后台存储引擎配置和映射函数,支持后台存储引擎的导数配置顾泽以及任务字段映射时的函数列表存储
新特性
-
[Exchangis Plugin Management Module] 新增 DataX 引擎
-
[Exchangis Project Module] 新增项目权限同步功能,将 DSS 项目权限进行同步
-
[Exchangis Datasource Server Module] 新增 Oracle 数据源
-
[Exchangis Datasource Server Module] 新增数据源连接敏感信息加密功能
-
[Exchangis Job Builder Module] 新增字段规则映射管理功能
-
[Exchangis Job Builder Module] 新增后台存储引擎配置和映射函数列表
功能增强
-
[Exchangis Project Module] 在前端页面将修改项目时的” 项目名 “设置为不可编辑
-
[Exchangis Project Module] 删除项目时校验是否有任务,有则不能删除项目
-
[Exchangis Job Execution Module] 任务执行时子任务执行进度统计优化,保证了进度数据的最终一致性
-
[DSS Dependency] 将 DSS(DataSphereStudio)版本升级到 1.1.2
-
[Linkis Dependency] 将 Linkis 版本升级到 1.4.0,解决了引擎并发执行的一些问题
BUG 修复
-
[Exchangis Job Info Module] 在编辑任务时前端自动回显 “执行用户” 值
-
[Exchangis Job Builder Module] 子任务名长度过长时运行任务失败的问题修复
-
[Exchangis Job Log Query Module] 查看非当天日志时系统异常的问题修复
-
[Exchangis Job Log Query Module] 查询日志异常后切换日志 TAB 页后页面持续打印报错的问题修复
贡献者
Exchangis1.1.2 的发布离不开 Exchangis 社区的贡献者,感谢所有的社区贡献者!