阅读任务-阅读提问 0920
我今天看了 第八章 需求分析 ,在获取用户需求—用户调研这一节有一个A/B测试,书上说A/B测试看起来简单,有弱点。这个问题(那么A/B测试怎样选择结果).我查了资料,有这些说法(
增长黑客》作者范冰讲过一个百姓网的案例。百姓网之前有段时间销售员和产品经理撕逼,销售人员是觉得为了获得更多销售额,所以我们必须是用户给钱越多,我们给他越大的特权。
他们想像左图这样,用户在我这个平台上发布的小帖子以后,谁给的钱多,给得最多的我给你置顶,同时又给你一个广告位,就是红色标量,其他的给钱没那么多的,在相对置顶比较高的位置。就是你越给钱,我越给你一些标签把你位置提得越高,这是销售人员的思维;产品经理的思维是右边这种,虽然你给了钱,你是我们的金主,你很重要,但是我要重视我们的产品体验,如果说你给钱我就让你上去的话,其实这上面满眼看得都是广告,而且谁给钱谁就上,那就有点像百度了,像现在这个样子他们就提出我们的产品在右边,不管你给了多少钱,我最多就给你个高亮,所以你的位置我不给你提前。当时为了这个原因,双方激烈的撕逼。撕逼一般是没有结果的,因为公说公有理,婆说婆有理,后来他们想到组织一次 AB 测试,下发了两波用户,看这两波用户各自呈现两种不同的页面,哪波用户最后转化率高,带来的收入高,还有其他一些指标的综合判断。
结果是怎样的?
大家从直觉判断,一定觉得产品经理的决定是对的,最后一定是用了产品经理的方案。
测试结果,右边产品经理方案是好的,他的数据更高,但是最后用了左边的方案。为什么?因为测试结果反馈显示,这两个方案虽然右边更好,但是他这个好的方案只是精确到小数点后面的千分位,只是比前一种方案好了那么一点,虽然是好了那么一点,但是左边的方案更吸金,左边的能吸引到大家更多的往里投钱,更多的花钱,既然是只好了这么一点点,当然要用左边的。于是经过测试以后,他们最后用了左边的方案,这是大家没有想到的结果。
),根据我的实践,我得到这些经验(有的时候要结合实际,如果说差别不是很大的话,你可能要选一种赚钱更多的方式,这是 AB 测试一个很大的价值,不要偏信数据,不要被数据给完全左右,有的时候结合一些理性的思考。). 但是我还是不太懂,我的困惑是(A/B测试实行起来比较麻烦,劣势也不少,为什么还被广泛应用).