高能分享,直击华坤道威(Fuzer)调度系统架构设计专题线上技术讨论沙龙

从「鲜为人知」的专业名词,到 2006 年的精准定义,再到如今全面上云时代的「百花齐放」,云计算的发展趟过蛮荒之地,已形成极具规模、高可靠性、通用性的服务,而开源是创新的基础,也是这一场技术革命中的重要力量,无论是在全球还是国内,开源正推动着信息技术的创新发展。

对于企业来说,如何使企业业务上云过程中利用开源打通专有软件的制约;再或者是数字智能化时代下,开源与闭源如何形成良好的闭环,使得企业技术战略完美融合开源生态体系,为企业自主创新、效能增长、核心竞争力筑造等多维度能力提升带来势不可挡的推动力。

众所周知,互联网发展至今的过程中,我们知晓最难或不是研发的过程,而是生态的构建。

华坤道威数据中台技术团队针对“Fuzer调度系统架构设计”为专题,组织了一场线上技术讨论沙龙,其中资深架构师天启、高级工程师大山、高级工程师大鹏一起围绕 Fuzer框架设计、功能、实例预生成、补数实例生成、开源社区现状和未来规划等方面展开讨论。

数据中台产品建设演进

在数据中台产品探索迭代过程中,我们在技术选型上从会用到逐步用好,到自行改良升级,从中攻克了一些的技术难题。华坤道威数据中台技术团队创新自研的Fuzer调度平台,结合产品需求,迭代遗留问题等充分贴合实际从0-1完成了第一个版本的上线,为中台调度赋能,并且高度融合我们内部使用的离线,实时丰富的计算组件,数据源组件,多租户设计思想。

(架构演进图一)

(架构演进图二)

Fuzer调度系统

华坤道威自研的Fuzer调度系统支持百万级任务的复杂调度,系统自动解析任务依赖,并生成任务流依赖关系,无需人工构建任务流,支持即时和定时的动态实例管理以及灵活调度编排(任务、任务流、组合依赖),多维任务保活机制。Fuzer调度系统能够充分融合数据治理的能力,把建设数仓,湖仓的单向架构能力,提升到架构融合,充分发挥其数据价值最终融合目标,为数据分析,联机算法等等计算场景,为企业数字化能力赋于新生服务力量。

未来愿景

近年来数字经济快速发展,人工智能、云计算等新技术、新理念在全球兴起,为经济社会发展注入了新的动能。华坤道威作为中国领先的DaaS服务商,通过开放的数字治理模式,构建适合企业发展的的开源生态,不断促进开源技术创新,打造出最大数据价值和最优的解决方案。Fuzer调度系统将会真正实现跨基础设施、跨计算和存储、跨调度的分布式部署,在高兼容性能的基础之上,为企业不同的数字化需求提供了更为自由的选择空间。而在未来,华坤道威也会在”开源“这条赛道上,致力于为开源社区做出力所能及的贡献,取于开源归于开源,不断的进行内存队列优化/事件机制(扩展支持mq)和任务执行支持快速编排容器化k8s,对于华坤道威来说,我们一直以来的愿景就是为每一个企业打造“万数互联”的世界。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值