A/B test
1、概念
A/B测试目的:快速验证新版本是否比旧版本好。
例如:对于商品详情页进行改版,希望提升商详版到支付页的比例。
采用抽样验证:选一定比例的用户(对照组)使用A版本统计日均PV,UV,日均页面转化率,再选一定比例的用户(实验组)使用B版本统计日均PV,UV,日均页面转化率。用样本去体现总体。
2、统计学应用
统计学能告诉我们如何抽样才能具有充分的代表性,以及如何从样本反应出的信息中推测总体状况。
要保证样本具有足够的代表性需要做到2点:
- 随机抽样
- 足够的样本量
随机抽样
随机抽样可以保证样本中的每个研究个体均有相等的机会被抽中的抽样方法。常用的随机抽样法有:
- 简单随机抽样(simple randomsampling)
- 系统抽样(systematicsampling)-也称等距抽样
- 分层随机抽样(stratified randomsampling)
- 整群抽样(cluster sampling)
足够的样本量
样本量越大,通过样本去评估总体的误差就越小。当误差小于我们需要的精度时,样本量就足够了。
3、中心极限定理
大数定律揭示了大量随机变量的平均结果,