机器学习
文章平均质量分 94
busy yang
这个作者很懒,什么都没留下…
展开
-
flyte平台部署iris分类任务(pytorch+tensorflow)
本笔记记录采用flyte搭建简易机器学习平台。默认已安装docker、flyte、python3.7。实验操作系统:Ubuntu 18.04 amd64分为以下几个步骤:1. 搭建flyte平台关于flyte平台介绍,参考该博客1.1 初始化阶段初始化一个flyte项目目录:flytectl init iris_project进入该目录,并开启sandbox,其中,–source后将指定的目录作为拟生成flyte平台的根目录,该步骤耗费大约5分钟:cd /path/to/flyte原创 2022-03-29 15:11:45 · 1969 阅读 · 0 评论 -
机器学习平台的简单调研
MLOps总结在机器学习的任务过程中,可能面对以下几个问题:随着项目体量增加,数据不足时,需要相关团队来负责数据采集、标注和清洗。然而,采集数据本身太复杂以至于需要多层级的组织来完成,例如当采集的数据量暴增时又需要开发分布式系统。将数据放入模型以后,可能会一直有新的模型迭代,因此需要不断对同一份数据尝试新的算法。每个模型又有非常多的超参,又需要调优不同的超参数。由于数据漂移、概念漂移,需要重新收集数据,重新训练。静/动态学习时模型的评估、可视化、应用、部署等步骤非常繁杂。…面对这样繁杂的原创 2022-03-29 14:29:14 · 2695 阅读 · 1 评论