列表
详情
120. A/B test显示B组提升了20%,如何验证是否属于正常波动
回答思路
对试验结果我们要积极的进行多维度的细分分析,除了总体对比,也看一看对细分受众群体的试验结果,不要以偏盖全,也不要以全盖偏。一个试验版本提升了总体活跃度,但是可能降低了年轻用户的活跃度,那么这个试验版本是不是更好呢?一个试验版本提升总营收0.1%,似乎不起眼,但是可能上海地区的年轻女性iPhone用户的购买率提升了20%,这个试验经验就很有价值了。
上一题
下一题