1. 互联网AbTest系统的背景介绍
https://www.jianshu.com/p/de8d9f0b14f4
背景
长期以来,搜索需求迭代比较频繁,包活搜索模块排序,搜索相关性调优,客户端展现等多种需求。针对每次策略调整,新策略全量上线,则存在以下问题:
1 全量上线新策略风险较大,实际效果可能与期望不符,小流量上线更加合理
2 新策略上线后无法精确给出新旧策略结果对比,无法精确评估出新策略导致的变化
3 同时上线多个策略,无法评估单个策略产生的影响
针对以上存在的问题,对搜索结果新策略上线添加ab-test机制,先小流量上线,方便对比以得出新策略对搜索结果带来的影响