1 行业趋势和背景
1.1 海外全球化——由中国制造到中国品牌全球造的全球化布局
为实现资源的最优配置、效率的最大化,现在越来越多的制造业企业,凭借着自己的品牌力和技术能力,进行全球化布局,加速从原来的“中国制造”到“中国品牌全球造”的转变,从而增强企业在全球范围内的竞争力和影响力。
1.2 制造多基地——打造多基地的制造中心,多套系统分别部署使用
在智能制造体系的大背景推动下,原来的单工厂模式逐步变成了制造中心。越是国际化、集团化的大型制造业企业,其多工厂的分布形态也越明显。多工厂部署多套 IT 系统,不仅可以满足现在大型制造业企业的生产管理需求,也可以为各工厂的业务数据收集打下坚实基础。
1.3 上下游协同——企业全产业链上下游需要进一步打通和协同
随着市场的不断发展,企业面临的竞争日益激烈。为了在竞争中脱颖而出,企业需要提高运作效率,以及快速响应市场变化。产业链上下游业务和信息的打通与协同可以帮助企业实现信息的快速流通,提高决策的准确性和及时性,从而更好地应对市场竞争。
2 遇到的挑战
2.1 管理重——亟需数据独立运营、互不干扰,数据跨基地间交互
要确保数据独立运营且互不干扰,必须有可靠的数据隔离技术。这包括物理隔离、逻辑隔离等手段,整体实现起来难度较大。而且随着数据量的不断增长,计算资源的管理变得困难。虽然要求数据独立运营,但在某些情况下,又需要数据的同步和交互。
例如,企业管理层关注的是集团整体经营结果,如财务状况、市场表现、资源配置和战略规划等,这就需要从各个基地数据系统获取生产、经营、库存等数据再次进行整合汇总。如何在保证数据独立性的同时,又实现安全、高效的数据同步和共享是一个挑战。
2.2 多套云——多云战略全球化布局,数据跨云统一管理难度大
为了满足数据合规性和主权要求,企业在不同的地理区域选择不同的云厂商或者自建 IDC 成为显著趋势。但是,不同云厂商各自独特的技术组件与解决方案所构建的系统间存在的显著差异性,开发、运维的技术组件和技术细节都不尽相同。因此,如何对这些系统实现有序且高效的管理,成为企业面临的又一重要挑战。
2.3 复制难——新建基地时数据系统无法快速复制,重建难
在快速建厂的场景中,实现工厂、设备、管理及系统的全面复制与快速部署至关重要,而数据系统的快速复制更是这一过程中的关键环节,除满足各区域的法律法规外,其复杂性主要体现在以下两个方面:
1. 数据量与多样性:现代工厂的数据系统通常包含海量的数据,这些数据不仅来源于生产设备,还涉及供应链管理、客户关系管理、财务管理等多个方面。同时,数据类型也多种多样,包括结构化数据(如数据库中的记录)、半结构化数据(如 XML、JSON 文件)。
2. 数据一致性与完整性:在数据系统复制过程中,必须确保业务数据和原数据的一致性和完整性。这要求复制过程能够准确无误地传输所有数据,并且在复制完成后,新系统的数据与原系统完全一致,无遗漏、无错误。
3 产品解决方案
本解决方案致力于实现跨云多 workspace 的高效管理,支持客户在国内外多个生产基地的灵活部署。这些生产基地可能分布在不同的资源环境中,例如国内部署在 IDC 机房,而国外则选择 AWS 云平台。
3.1 集成多个平台计算资源,进行整合管理并对计算资源进行优化
通过同一套 DataSimba 部署,集团统一整合了存算资源的管理调度,一方面关注云纳管,如云的计量计费、资源利用率等,另一方面要确保资源高可用,各业务单元系统运行独立稳定、互不影响,同时能跨云跨平台地完成统一的租户与账户管理、安全策略与审计,在保证足够安全的前提下,也可以对计算资源进行优化。架构如图示:
3.2 多 WorkSpace 统一运维和管理体系,提升工作效率
在运营跨国业务时,企业必须严格遵循各地的数据安全法律法规,以确保数据的安全性和合规性,数据通常需要进行数据隔离和独立管理。因此,各领域往往拥有独立的工作空间。然而,由于用户经常身兼多职,需要频繁切换访问多个工作空间的数据。
为了解决这一问题,DataSimba 提供了一套有序且灵活的统一运维和管理体系。通过这一体系,不同的 workspace 可以利用 DataSimba 的管理机制,实现多个 workpace 的灵活切换和统一管理。
结合 workspace/project 双层隔离的逻辑(workspace 用于物理资源隔离,project 在前者基础上进一步进行账户权限和存算资源配额的隔离),不仅能够极大地提高开发和运维效率,还确保了数据的合规性与安全性,从而为企业的健康发展奠定了坚实的基础。
3.3 快速共享和复制,保证业务的快速增长
数据的快速共享是企业规模化扩张中常见且关键的策略。为了支持业务的持续增长,大数据平台必须能够有效地复制现有的数据业务逻辑和关键数据,以便新的业务单元可以迅速上线。
为实现这一目标,企业可以利用 DataSimba 中的数据共享和复制功能进行数据、代码的共享和迁移。通过创建新的 workspace,并快速复制标准空间中的数据业务逻辑,企业能够迅速启动新基地的数据分析业务。
此外,在复制后的 workspace 基础上,企业还可以进行快速迭代和升级。这种方法不仅大幅降低了成本,而且提高了效率,从而推动新基地的业务发展。
4 产品带来价值
制造业企业的多基地一旦完成 DataSimba 跨云多域的多租户技术架构的部署后,在多个数据团队互不抢占资源的同时,相较传统方案,可以节约 50%的大数据集群计算节点。
集团型企业 IT 管理也可以整合不同的元数据,实现数据云平台统一管理,降低了运维的难度和成本。
同时,通过统一的权限控制和数据安全共享,新基地的快速开启业务也可以基于老基地的数据业务逻辑迭代升级,无需高迁移成本和时间成本。相比较传统迁移模式,此模式大大提升了管理效率,具有以下优势:
-
资源优化,保障运行稳定性同时对资源算法进行更好地优化。
-
统一管理,在数据物理隔离下,做到企业数据的统一管理。
-
快速复用,在企业业务高速扩张下,数据业务逻辑快速同步复用。