许多市场营销专家都在谈论转化率优化(CRO),这包括从A/B测试(最明显的)到设计和可用性改变的所有内容。您可能同意测试是一件很棒的事情。你甚至可以做一些实验。但是你得到你所希望的结果了吗?
既然测试需要资源,那么您如何才能使您的组织获得最大的利益呢?
在运行了几十个A/B测试之后AmsterdamPrinting.com在过去的两年里,我收集了关于成功执行a /B测试程序的8条最重要的经验。
1.获得你的支持之前开始测试
A/B测试似乎很简单,但从直觉决策转向数据驱动决策可能比你想象的要难。首席测试官的最终目标是在公司内部形成一种“测试文化”,这是一个巨大的飞跃;你需要循序渐进的方法。
设置测试需要额外的工作和资源,您应该得到高层的支持。让你的测试团队参与到网站的所有重大决策中来,这样你的团队就可以评估出适合测试的候选人。
2.一旦你得到管理层的支持,让更多的人参与进来
要有一个成功的测试项目,你需要让关键的参与者参与进来。在你的团队中拥有一名设计师和一名开发人员可以确保测试的及时实施。
通过分享测试结果,寻求反馈,甚至对获胜的测试配方进行投票,让组织的其他成员参与进来。当我们运行行动召唤测试(和获得测试奖),我们有7个版本的按钮文本,都是我们的同事建议的。作为一种有趣的转变,我们在内部举办了一场比赛来预测测试的前3个版本,并奖励获胜者一张亚马逊礼品卡。自然地,更多的人参与进来,并兴奋地检查结果。
3.在开始每个测试之前定义假设和成功指标
当启动一个新的测试时,你很容易偏向于它。通常,你会相信新版本更好。为了避免这种自我实现的预言,在运行测试之前定义你的假设和成功指标。
例如,如果你正在测试三个操作调用按钮(包括一个控件版本),定义如下:
你的假设
- 为什么按钮的第二个和第三个版本可能比控件更好?
- 如果版本二或版本三赢了,你会把它归因于什么?
你的成功指标
什么事件(例如,点击、下载、购买)或指标(花费的秒数、跳出率或平均订单值)将与控制进行比较?
一个成功的度量标准将最终定义你的测试是否成功。
注意你的假设:更多的点击并不意味着更多的购买,就像更多的购买并不意味着更高的销售总额一样(如果平均订单价值下降了呢?)
将你的成功指标与你的业务目标结合起来。
4.获得足够的统计显著性转换
所以,你启动了一个测试,然后…没有交通。最好的测试对象是那些流量大、接近转化漏斗底部的页面。(通常可以在交易结束时进行更大的影响测试,例如产品详细信息页面或结帐过程。)
经验法则是测试至少两周,并在测试中每个食谱获得100个转换(成功指标)。
5.细分你的流量
细分非常重要,因为不同类型的访问者可能对你测试的版本有不同的反应。忠实客户(直接或“品牌”流量)的行为与那些第一次登陆你网站的人不同。
其他部分可包括:
- 游客类型(客户、潜在客户、新客户、回头客)
- 吃嫩叶的动物(Internet Explorer, Firefox, Chrome, Safari)
- 操作系统(Mac、Windows、Linux)
- 屏幕分辨率(访问者可能会在页面上方看到的内容)
- 流量来源(直接,搜索引擎,和活动,如电子邮件,点击付费,展示,再营销等)
- 登陆页面:测试页面是用户登陆时看到的第一页吗?
创建大量细分可以提高A/B测试的结论性。同样,你应该与你的业务目标保持一致(当前客户转化率下降4%是否会被新访客转化率增加7%所抵消?)为不同的细分市场评估不同的成功指标!
6.不存在不成功的测试
即使您的测试是不确定的(没有产生统计上显著的提升或下降),它仍然是有价值的。不要让这样的结果让你失望。例如,您确实了解到,您测试的特定元素并不那么重要,也不会影响您的成功度量标准。
(注意:布莱恩·梅西为Search Engine Land写了一篇题为你可以用不确定的分割测试做四件事值得一试。)
记住,保留所有测试的详细记录,无论是否具有结论性,都将有助于将来测试或更改网站的决定。
7.大的改变等于大的影响
我们都听说过这样的成功故事:一个小小的改变会产生巨大的积极影响。然而,在现实中,这种情况很少发生。大的变化通常在公司内部有很高的“风险”,会产生很大的影响——好或坏。即使影响是负面的,回头看看第6条。您已经了解到被测试的元素确实很重要!
8.注意影响测试的隐藏变量(混淆)
即使有完美的设置,您的测试工具也无法解释“隐藏”变量。小心它们,并通过以下方式将风险降到最低:
- 不要同时运行针对同一组访问者的测试。
- 运行一个更长时间的测试(3-4周),因为季节性的流量变化会影响结果(例如,直接邮件目录的下降会带来合格的流量,扭曲你的测试结果)。
- 一次只测试一件事。如果你正在测试一个登陆页面,不要有不同的版本,混合和匹配布局的变化,设计的变化,并呼吁采取行动。通过几个阶段来进行这种测试,从布局测试开始,然后是设计,然后才是行动号召。尽管多变量测试(MVT)是很好的替代方法,但它们需要很长时间才能完成,除非您有成千上万的访问者。
漫长的过程
遵循本文中的经验教训将使您的转化率优化活动更加有效。我们在这里的目标是再次向您的公司介绍测试文化。当你获得更多的A/B测试时,你可以开始质疑网站的“基础”元素(例如,导航,布局,功能,甚至设计)。
乔安娜·洛德,公司的收购主管SEOmoz他称这些元素为“所有真理”并说他们是最难完成的任务。但改进/测试“所有真相”可能会对整个网站产生最大的影响。
当您执行更多的测试并了解如何你的听众会对这些变化做出反应,传达你的积极成果,更重要的是,把这些成果放在明年的展望中。例如,4%的转化率提升?这相当于每年增加23.6万美元的收入。这样做将有助于让你的高管关注A/B测试和转化率优化!
新想法和分享
为了让创意流动起来,你可以经常浏览一些网站,比如WhichTestWon.com或ABtests.com.您将看到其他人正在测试什么,并有机会猜测哪个版本具有更高的提升。这两个网站都接受了很好的测试,所以你可以自由地分享你的成功,同时让人们注意到你的品牌。
祝您和您的CRO团队好运!
(图片由Bigstock提供:教育的主题)