谈起头脑风暴,相信很多人都不陌生,或多或少我们都会在实际的创意工作中使用到这种方法。一个风暴下来,总会有那么几种天马行空的创意出来。但接下来问题就来了……究竟哪种创意才是好的呢?根本就没有那么多时间一个一个来测试啊!接下来,我们看一下biddingX的体验团队是怎么解决这个问题的。
日前,我们的团队进行了一次关于按钮数量的AB测试,发现小小的一个改动居然可以为注册率带来甚大的提升。根据这次实验的结果,我们特地进行了一次关于首页改版的讨论,在讨论中大家针对按钮的修改提出了不少新的方案,但谁也说不服谁,最后大家还是决定——做个测试吧,让数据和用户行为来说话。
考虑到网站流量的有限,我们还是在一堆方案中筛选出了大家都觉得比较靠谱的方案。(小Tips:当你想使用AB测试去测试多个版本的时候,你应该考虑一下每个版本是否能有足够的流量去支撑实验)


最终参与实验的方案包括:
一、 原始版本(为了作为参照)1二、 单一按钮的版本2三、 把按钮底色改成绿色3四、 把按钮的文字改成“立即申请”4  在实验开始之前,biddingX的PM姐姐再次强调别把她的网站玩坏了,于是我们为了保险起见,使用了AB tester中流量分配的功能。因为之前已经做过一次测试,发现单一按钮的版本效果很不错,所以这次就把主要的流量分配到单一按钮版本了。具体的流量分配是这个样子的(方案一 20%,方案二60%,方案三10%,方案四10%)。
实验马上就开始了,第一天的数据是这样的:1  看到这样的数据大家都吓了一跳,怎么和之前的结果差那么远,但是此时实验人数和转化人数都比较低,我们还是多等两天。
终于实验开始了一周之后,实验结果变得比较稳定,大家都松了一口气5  从测试结果上看,的确单一的按钮要比两个按钮更好一点。而在单一按钮的方案里,修改按钮文字的方案四最能让用户点击的。但是实际上,在我们的页面当中,能跳转到注册页面的按钮并不一只有一个(上面的导航栏中也有一个一样效果的按钮),这次我们也追踪了点击这个按钮的用户行为5  所以最终通过综合的考量,我们还是认为绿色的方案是更为适合的一个方案~但这次实验给我们留下了一个新的问题,当一个页面中有几个作用相同的按钮,我们有没有一种办法能直接追踪他们综合的转化率呢?答案当然是有的~有需要的朋友可以看一下的另外一篇文章《在AB测试中该如何建立统计目标

发表评论

电子邮件地址不会被公开。 必填项已用*标注

您可以使用这些HTML标签和属性: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>

Post Navigation