AB实验是将测试对象随机分为A、B两组,然后比较两组之间差异的验证方法。
有的企业会在同一时间开展多个AB实验,彼此之间可能存在相互干扰。
错误案例:(1)所有的AB实验都采用相同的分组方法。就算两组的表现有所差异,也不可能知道差异到底是由哪个测试引起的;
(2)各组中参与其他测试的用户比例不同。会出现测试项目以外的条件性差异,这种情况下,需要事先考虑分组时如何才能不包含已参与其他测试的用户,这样测试结果才可信。
AB实验是将测试对象随机分为A、B两组,然后比较两组之间差异的验证方法。
有的企业会在同一时间开展多个AB实验,彼此之间可能存在相互干扰。
错误案例:(1)所有的AB实验都采用相同的分组方法。就算两组的表现有所差异,也不可能知道差异到底是由哪个测试引起的;
(2)各组中参与其他测试的用户比例不同。会出现测试项目以外的条件性差异,这种情况下,需要事先考虑分组时如何才能不包含已参与其他测试的用户,这样测试结果才可信。