本节书摘来自异步社区《提高转化率!网页A/B测试与多变量测试实战指南》一书中的第2章,第2.3节,作者【英】Colin McFarland,更多章节内容可以访问云栖社区“异步社区”公众号查看
2.3 一切皆可测试
从测试起步开始,基本上你不可能一夜之间在公司里建立起测试文化。接下来我们就要讨论如何培养测试逐步成熟,渐渐地,你的工作环境可以达到一切皆可测试的状态。
2.3.1 测试日臻成熟
让我们想想,如果我们进行的每一次变更都是经过优化测试的结果,网站会变得更好还是更差?当然,没法对这个答案断定直言,但是我敢大胆估计:你的网站一定会更加成功!
测试达到成熟阶段是每个优化测试人员所追求的目标,这意味着可以让所有的变更通过测试变得能够度量。在这里,你专注的设计是基于测试的事实结果,而不是迎合高管或顾客的喜好。
在测试达到成熟阶段前,你需要做的是启动测试,找到优胜结果,甚至还有可能需要改变公司当前的传统工作方式。现在让我们讨论一下测试达到成熟前的几个阶段(图2.2)。
“Overstock.com一直以来将购物的舒适性奉为优质用户体验的核心要素,”Overstock.com客户价值部门主任Seth Moore如是说,“我们对待可用性并不是依靠猜测,而是对内容进行测试,让顾客通过自己的切实行为为自己偏好的内容投票。”
Overstock.com基本在很短的时间里,在世界范围内,将新产品页面布局与现有页面布局进行了对比测试,并因此提高了转化率和平均订单价值。为了监测到包括页面内容、分类等多种不同布局的效果,Overstock.com采用了并行性多变量测试,对一系列网站购物场景进行了分析。此外,他们还对促销标题进行了类似测试。
——Sitespect公司:Online businesses doing more with less in an uncertain economy via web optimization technology。
第一阶段:立刻测试!
现在开始,立刻测试,验证你的投资回报率(ROI)。想要在企业中开创测试文化,唯一的入门途径莫过于立刻行动,在你得到一些测试结果之后,后续的交流也会变得更加顺利。选一些容易的测试入手,找到一些问题去修正。当你的测试结果显示出价值,你便将优化测试成功提上了公司议程。
ROI:一种用于评估投资实效的效果类度量。ROI的计算方法为投资收益除以投资成本的比例。投资回报率的计算方法(也就是定义)可以根据实际情况灵活调整,这取决于你选作成本与收益的内容是什么。在使用这项指标时,一定要确保了解计算它的因数都是什么。
——Investopedia(投资百科)
别担心第一批测试结果是否失败,就算失败,也证明你通过防止网站上出现这样负面的变更而为企业节省了成本,它同成功结果一样具有说服力。
此外,无论测试结果成功还是失败,如果你的测试对象是一项非常简单的小变动,简单到公司里所有人都能明白,那你的测试效果就更好了。这会帮助你让大家意识到任何变化都可能波及盈亏,甚至有些人们不曾留意的小变化都同样如此。
第二阶段:测试,测试,还是测试!
你已经经历了起步阶段,现在的目标应当是进一步提升测试深度、加强学习、强化能力、提高技能、拓宽视野。划分好测试的优先级,一批测试常常会连带更多的后续测试,也会涉及更多的业务范围。
在一些公司这个阶段可能会相对短暂,大家能够很快接受测试并且将其视为一种优先性工作。但也有一些公司会让这个阶段更加漫长。
在此阶段,建议你专注于提升业务的回报价值,力争进入下一阶段——一切皆可测试(图2.3)!
第三阶段:一切皆可测试!
到了成熟阶段,测试会成为高管人员的首选方案。涉及修改页面的业务基本上都会通过对照测试。如果你成功抵达了这一阶段,那么恭喜你,你已经置身于非常优良的环境中。
没有完美的测试项目。总有能够提升的事物,总有可以做的测试。就算是行业中的佼佼者、测试界的大师,例如eBay、Amazon、Google、Microsoft、Etsy(图2.4)和Netflix等等,有时也没法测试一切。
这里我们不要太过重强调完美,而是要建立一种文化:不断提升、摒除欠佳的设计选择、尝试新的创意和挑战、通过优化测试竭尽所能地获取成果。
▲ 从做简单的优化测试开始,验证ROI,逐渐推动大家接受。
▲ 努力测试,加强能力,致力于促成一切以测试为核心的文化。>