工程师笔记｜浅析AI平台的架构设计

摘要

关于机器学习，很多人都强调算法而忽视了基础架构的作用，一种看似“高大上”的算法集成到实际环境中，也可能用起来“水土不服”，原因就在于基础架构的支持力度不够。所以，基础架构和算法同等重要，这里我们从AI平台基础架构中至关重要的存储架构，谈一谈AI平台的架构设计， 供相关人员参考。

目前，在政策和市场的双重驱动下，我国人工智能发展获得长足进步，“言必谈AI”已经成为各个科技公司技术峰会和企业间交流必不可少的话题。各家企业希望借力AI加速自身业务的发展和创新，通过AI帮助企业在数字化转型的浪潮中取得先发优势。

梦想回归现实，话语落到行动，因而，搭建自己的AI平台成为了最近两年很多企业的重点战略规划。

搭建一个AI平台，在哪里搭建？这是企业首先需要考虑的问题。是署在本地，还是部署在云端？这需要根据自身业务特点来选择，不过，无论你的AI平台在哪个地方，其基本流程都可分为四个步骤：

❶ 把原始数据从各种数据源导入到数据湖，进行数据拆分、清洗等数据预处理工作；

❷ 把数据交给AI训练集群通过