首先,附上产品链接AlphaIDE:https://github.com/meta-soul/MetaSpore,可搜索公众号元灵数智,在底部菜单了解我们 - 用户交流获取官方技术交流群二维码,进群与业内大佬进行技术交流。
AlphaIDE 简介
之前数元灵发布了流批一体表存储开源框架 LakeSoul,和一站式机器学习开源平台 MetaSpore,详见我们之前的公众号文章揭秘!新一代一站式机器学习平台MetaSpore的设计理念、重磅!开源湖仓平台 LakeSoul 设计理念详解 。通过使用 LakeSoul 和 MetaSpore,可以快速开发实时的数据分析和完整的机器学习在离线链路,参考重磅!基于新一代MetaSpore平台快速搭建工业级推荐系统。
然而在生产环境中部署分析计算任务和在线服务,仍然有较多的环境需要打通。在开发阶段需要有一个简便好用的集成开发环境,在部署阶段需要考虑容器化集群搭建、工作流的高可用调度、在线服务的负载均衡和弹性伸缩,以及不同公私有云平台的适配等。从业务开发到部署上线有着较多的衔接工作。在以往这些需要一个熟悉云原生、容器化等技术的运维团队来配合开发和部署,也带来一定的沟通和时间成本。
为了解决以上问题,数元灵正式推出 AlphaIDE 产品,提供了一套完整的开发和生产环境。通过容器化的方式,无缝对接国内外主流公有云,能够方便快捷地部署一个数据智能平台,提供 Web IDE 开发界面、数据分析、机器学习训练、在线预测和算法实验应用服务的一键部署运行。AlphaIDE 的整体功能和架构如下图所示:

AlphaIDE 主要特点
1.数据为中心的一站式开发生产平台
AlphaIDE 提供了完整的代码开发、作业调度、在线生产服务部署的功能,提供了丰富的 Data Ops 和 ML Ops 开发工具。开发者只需要专注于自己的数据和模型的计算流程,无需关心繁杂的底层基础设施,就能够开发并部署从数据摄入到模型计算再到线上实验的完整流程。AlphaIDE 帮助开发者屏蔽了集群底层运维和云商对接等细节,使得数据科学家、算法工程师都能够独立完成开发和上线。
2.集成常用开发组件
AlphaIDE 集成了 LakeSoul、MetaSpore 等数元灵自研的框架,同时也提供了 Spark、Flink 等开源计算框架。AlphaIDE 集成定制了 Kubeflow,支持 Notebook 的工作流生产调度,并提供了定制的 Jupyter/CodeServer 容器镜像,开发者无需自行打包运行时镜像。
3.云原生私有化部署
AlphaIDE 能够支持在用户自有的云服务账号下私有部署。用户只需要提供一个云账号的授权(集群创建完成后可以取消授权),无需人工干预,即可在用户自有云账号下自动化部署 AlphaIDE。整个集群的资源和数据完全在用户自有的云 VPC(虚拟子网) 内部,一方面保证了数据的隐私安全性,另一方面也能够和用户原有的各类数据库、存储系统实现内网连接,无需重复远程导入数据。
4.丰富的企业级功能
AlphaIDE 提供了 SSO 单点登录、RBAC(Role Based Access Control)权限管理等,并能够和企业自有的账号体系,如 LDAP,或第三方账号体系,如 Github Team 等打通。AlphaIDE 同时也支持资源quota 控制,集成了日志收集查询、服务状态和性能监控等。
试用 AlphaIDE
数元灵上线了一个 AlphaIDE Demo 服务,可以在登录注册后进入 Demo 集群免费体验 AlphaIDE 的核心功能。

AlphaIDE界面
可以通过 https://registry-alphaide.dmetasoul.com/链接,使用邮箱账号进行注册,通过邮箱验证后,点击进入免费测试集群,并通过注册时设置的邮箱和密码,登录到 demo 集群。详细操作说明可以参考:AlphaIDE服务使用指南
使用指南里除了基础的IDE使用说明,我们也提供了一些代码demo,可以运行测试。
运行 LakeSoul 流批一体的示例:https://github.com/meta-soul/LakeSoul/wiki/Lakesoul-IDE-Demo
运行 MetaSpore 模型训练的示例:https://github.com/meta-soul/MetaSpore/blob/main/tutorials/metaspore-getting-started.ipynb
也可以运行我们之前发布的 MovieLens 端到端推荐系统的 Demo :https://github.com/meta-soul/MetaSpore/blob/main/demo/movielens/offline/README-CN.md
欢迎大家注册登录试用 AlphaIDE ,也欢迎大家提供宝贵的意见和建议。
官方资料 GitHub:
LakeSoul:https://github.com/meta-soul/LakeSoul
MetaSpore:https://github.com/meta-soul/MetaSpore
AlphaIDE:https://registry-alphaide.dmetasoul.com/login
官网: https://www.dmetasoul.com
官方交流群: 微信群:关注公众号“元灵数智”,点击“了解我们-用户交流”即可获取二维码
Slack: https://join.slack.com/t/dmetasoul-user/shared_invite/zt-1681xagg3-4YouyW0Y4wfhPnvji~OwFg
AlphaIDE是数元灵推出的云原生数据智能开发平台,提供一站式的开发、调度、在线服务等功能,集成LakeSoul、MetaSpore等组件,支持私有化部署,并具备丰富的企业级功能。用户可通过邮箱注册试用Demo服务,体验包括数据处理、模型训练在内的核心功能。
323

被折叠的 条评论
为什么被折叠?



