为了取得更好的转化效果,企业在营销、运营活动中往往会准备多套方案。如何高效快速地选取最优方案、顺利说服所有项目人员,是企业进行业务决策时必须思考的问题。
A/B测试就是一种数据驱动决策的有效手段。通过A/B测试工具,企业客户对小部分用户进行真实测试,通过用户的真实抉择,企业得以选出最优的活动方案并推行到所有用户,获取最优的转化效果。
然而,理想很丰满,现实很骨感。
如果企业不具备A/B测试能力怎么办?如果企业内技术资源紧张,不足以支持多个活动的A/B测试方案怎么办?
没关系!百度统计帮您解决这些问题!
百度统计A/B测试工具可以支持企业简单、快速地部署A/B实验,不管企业是想测试功能、文案、图片还是转化按钮的效果,都可以在百度统计内通过产品设置完成实验设计!除此以外,百度统计还可通过设置流量互斥、流量分层帮助企业同时进行多个A/B实验,并通过实验报告反馈实验结果,全方位满足企业的测试需求。
思杰马克丁是一家软件发行公司,其拥有基于全景决策的软件正版化发行平台,坚持“卖正版,做正事,走正道”,致力推进中国商业软件的正版化事业。
在盗版软件猖獗的国内,正版软件时常得不到用户的青睐,作为正版软件的发行商,思杰马克丁一直在寻找提升软件下载率和购买率的方法。
为了给予客户流畅的使用体验和转化引导,思杰马克丁需要经常对网站内新软件的宣传素材、详情页进行精细化设计。以多年的市场经验,设计方案的差之毫厘可能会给转化效果带来千里之别。
那么如何顺利找到用户转化流程的最佳运营方案呢?
A/B测试是思杰马克丁业务同事不可缺少的工具。
业务上的瞬息万变和技术资源有限有时会形成矛盾,作为百度统计的客户,得知百度统计推出AB测试工具后,思杰马克丁就与百度统计形成合作。借助百度统计AB测试快速部署、快速监控实验结果的能力,思杰马克丁对旗下某一软件的详情页进行了A/B测试。
【实验部署】
当用户抵达网站详情页时说明用户对于该软件是十分感兴趣的。
那么应该如何做好用户转化的“临门一脚”呢,详情页内的下载按钮的设计至关重要。关于下载文案,思杰马克丁考虑了“免费下载”、“免费试用”、“下载试用”3个方案,其中“免费下载”为对照组,“免费试用”及“下载试用”为实验组,并且设置按钮点击率和最终的购买转化率作为关注的核心指标。
3个文案相似但给予用户的预期不同,为了客观地得到实验结果,思杰马克丁对于3组方案进行平均分配流量。
为了将实验对线上环境的影响降低,思杰马克丁将所有进入该软件详情页用户中抽取20%进行实验。
【启动实验】
整个实验设置过程约为2天,完成实验调试后就可以启动流程。
百度统计会将设置的分流信息传输到统计的分流服务器,当有用户来访问网页时,就会按照设置的分流比例进行自动分流进到实验中。并且用户的行为数据也会被百度统计采集和处理,最后通过数据分析模型形成一份科学的实验报告。
【实验结果】
实验启动之时,百度统计A/B测试报告即开始累积数据。
经过1周的实验,百度统计A/B测试通过计算置信度和P值等统计学指标得出具有统计学意义的报告,即在没有外界干扰情况下,证明实验结论可信。(置信度为实验组中各个用户触发核心指标的变化区间,通常用来衡量业务指标的变化情况。P值为衡量实验组和对照组差别是否明显的指标,通常来说P值越小越好。)
首先,百度统计的分流能力,让进入客户3种方案的用户分布均匀且随机,通过本轮实验的用户行为结论可以推论是几乎可以代表所有用户行为的客观结论。
然后,3种方案的对比实验结果证明,对照组的按钮点击率是远远高于实验组,也就是说“免费下载”相较于“免费试用”和“下载试用”更能吸引用户点击下载。同时,对于购买转化率这个指标对照组要较于其他两组高50%,“免费下载”能带来更高的试用率和转化率!
另外,在2个实验组中,“免费试用”的按钮点击率和下单转化率都要略高于“下载试用”。
本轮实验通过可信的数据证明:“免费下载”、“免费试用”、“下载试用”的确会给用户带来不同的预期,用户倾向“免费”的方案,但是“试用”带有“试一试就要付费”的概念,如果用户付费意愿不强,就容易在看到下载按钮的环节就流失。但如果软件好用,用户开始使用后也是很有可能转化的!
在本轮实验后,思杰马克丁确定“免费下载”为最优的按钮文案,并且决定将这个文案应用到平台其他的软件详情页中。
如果不进行A/B测试,贸然上线新策略,带来的后果可想而知!A/B测试工具帮助他们避免掉进了转化率跌50%的大坑!
如果您同样有产品功能设计、运营素材设计、营销页设计、流程设计等方面的A/B测试需求,而且您公司的技术无法支持您进行A/B测试的话,欢迎扫描下方二维码留咨体验百度统计A/B测试工具,让您的每一个决策都掷地有声!
扫描二维码,立即体验百度统计A/B测试工具