这是一篇很详细的具有实操意义的AB实验方法论,为你揭秘一线大厂是如何进行AB实验设计与分析的,
码字(画图)不易,求各位看官点赞、收藏、关注~
Par 1 实验设计
基本思想
提出假设 -> 验证假设 -> 产品决策 -> 长期观察
应用场景
AB实验不是万能的,之前写过一篇AB实验的局限性 复习点这里
适合 回答的问题 | 例子 | 不适合回答的问题 | 例子 |
---|---|---|---|
更优解问题 | 两种push策略哪个更好 | 最优解问题 | 如何创造一个最优的push策略 |
估测短期影响 | 七夕打榜活动能否提高直播流水? | 长期影响 | 魔表功能能否提升平台长期直播流水? |
做了A会导致B | 分享红包能否提高分享拉新量? | 结果的分析 | 最近分享拉新量大幅提升原有是啥? |
战术性迭代 | 直播是否增加pk模式? | 战略性决策 | 某个创新产品的定位 |
基本流程
- 流量的样本单位