作者：山治
这些日子讲了很多东西，但比较乱，我这里补充一下完整的业务和测试流程。
生命周期流程图
根据数据闭环，我画出了上面的图，并标记了其中测试人员要参与的活动（浅蓝色）。下面我一一分析一下这些测试活动的含义。
- 离线模型测试阶段：在模型的生命周期中，会涉及到 3 种数据。 训练集，验证集和测试集，其中训练集用来训练模型，验证集用来算法自测。 而测试人员需要自行采集/挖掘（要根据用户画像每种类别的数据都要采集到）符合场景的测试的数据。 根据测试数据对模型进行完整的评估（AUC，召回，精准等等）
- 线上线下一致性测试： 模型的离线和在线是采取完全不同的代码进行的特征工程（模型不接受原始数据，数据需要经过特征工程后输入到模型），要保证两边的特征工程完全一致是很难的。 所以要进行一致性的测试。
- A/B Test： 模型即便在离线进行了充分的测试，但线上的情况瞬息万变，模型上线是一个严谨的过程。 我们希望模型更新的过程更加严谨。 所以往往会让新旧模型共存一段时间。比如我们先把 10% 的流量切给新模型， 90% 的流量依然发送到老模型中。 然后待观察效果没有问题后，再切 20% 的流量到新模型上，以此类推， 直到最后新模型完全替代老模型。
- 线上模型监控：因为用户行为瞬息万变，可能随便一个社会性时间用户的行为就发生了重大的改变。 所以我们需要实时的监控线上效果。
- 数据质量测试：新采集的数据要加入到自学习之前，需要验证数据本身的质量。以免犹豫数据本身出现了问题导致模型效果的偏差。
推荐学习
【霍格沃兹测试开发】7天软件测试快速入门带你从零基础/转行/小白/就业/测试用例设计实战
【霍格沃兹测试开发】最新版！Web 自动化测试从入门到精通/ 电子商务产品实战/Selenium （上集）
【霍格沃兹测试开发】最新版！Web 自动化测试从入门到精通/ 电子商务产品实战/Selenium （下集）
【霍格沃兹测试开发】明星讲师精心打造最新Python 教程软件测试开发从业者必学（上集）
【霍格沃兹测试开发】明星讲师精心打造最新Python 教程软件测试开发从业者必学（下集）
【霍格沃兹测试开发】精品课合集/ 自动化测试/ 性能测试/ 精准测试/ 测试左移/ 测试右移/ 人工智能测试
【霍格沃兹测试开发】腾讯/ 百度/ 阿里/ 字节测试专家技术沙龙分享合集/ 精准化测试/ 流量回放/Diff
【霍格沃兹测试开发】Pytest 用例结构/ 编写规范 / 免费分享
【霍格沃兹测试开发】JMeter 实时性能监控平台/ 数据分析展示系统Grafana/Docker 安装
【霍格沃兹测试开发】接口自动化测试的场景有哪些？为什么要做接口自动化测试？如何一键生成测试报告？
【霍格沃兹测试开发】面试技巧指导/ 测试开发能力评级/1V1 模拟面试实战/ 冲刺年薪百万！
【霍格沃兹测试开发】腾讯软件测试能力评级标准/ 要评级表格的联系我
【霍格沃兹测试开发】Pytest 与Allure2 一键生成测试报告/ 测试用例断言/ 数据驱动/ 参数化
【霍格沃兹测试开发】App 功能测试实战快速入门/adb 常用命令/adb 压力测试
【霍格沃兹测试开发】阿里/ 百度/ 腾讯/ 滴滴/ 字节/ 一线大厂面试真题讲解，卷完拿高薪Offer ！
【霍格沃兹测试开发】App自动化测试零基础快速入门/Appium/自动化用例录制/参数配置
【霍格沃兹测试开发】如何用Postman 做接口测试，从入门到实战/ 接口抓包（最新最全教程）
【霍格沃兹测试开发】6 小时轻松上手功能测试/ 软件测试工作流程/ 测试用例设计/Bug 管理
【霍格沃兹测试开发】零基础小白如何使用Postman ，从零到一做接口自动化测试/ 从零基础到进阶到实战
【霍格沃兹测试开发】建议收藏全国CCF 测试开发大赛Python 接口自动化测试赛前辅导 / 项目实战
更多软件测试开发视频教程点此
软件测试职业发展
零基础入门
测试必备编程篇
自动化测试
性能测试
测试管理
工程效能篇
面试求职篇
软件测试的面试宝典，内含一线互联网大厂面试真题、面试技巧、软件测试面试简历指导，免费领取！
414
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
