本节书摘来自异步社区《提高转化率!网页A/B测试与多变量测试实战指南》一书中的第2章,第2.1节,作者【英】Colin McFarland,更多章节内容可以访问云栖社区“异步社区”公众号查看
第2章 关于测试方式
提高转化率!网页A/B测试与多变量测试实战指南
2.1 测试宜尽早,对象需主流
导致测试失败的原因常常出现在时间耗费之上,我们花在讨论上的时间、计划上的时间、开会讨论进展的时间,几乎将测试拖延得无法在合理时间内立即执行并收获经验。接下来我们就继续讨论一下这些
问题。
2.1.1 测试宜尽早
快速执行,这对于测试成功至关重要。你推进测试的速度越快、数量越多,学到的经验越多、成功的概率也越大。任何原因造成的拖延对你来说都是损失。
尽量缩短时间,促成创意形成,尽快落实测试。聚焦有效推动事情的进度,跳过可能造成拖延的工作。
在测试的问题上没有完美,不要将目标直接定位到完美的级别,我们只需要能够充分支持测试启动即可,剩下的事情在测试过程中再继续发掘,继续提升。
小型项目
对于小型项目,从你能够在两周内执行的测试入手,接下来逐渐发展为每两周进行一次测试。如果开会讨论测试事宜的时间比直接执行测试所需的时间还长,不如直接执行。
一旦测试时间可能超过两周,可以考虑将其视为大型项目。这样一来,很快你便能够自然而然地专注于提高每一点可以改善的小内容。这是一种好习惯,大型项目通常涉及太多痛苦的流程,容易出现前序工作费力、耗时、没结果,接下来再花时间去研究哪里出了问题,如何进行修正。与其如此不如尽早执行测试,未出结果而先行修正可能越改越差。
准备及开展小型测试需要的时间比较短,但这并不意味着小型测试只能局限于小型创意。本书中后续章节我们将会讨论更多关于细节变更(完善设计)与较大变更方案的话题。
大型项目
我们也不能完全忽视大型项目,大型项目也有特定的作用。有时候你必须为测试一个创意做许多工作。遇到这种情况也无须回避,找到一个平衡点,这样可以专注于必要环节上所需的时间。
测试得到的结果和测试的成熟程度会让你逐步了解到哪些是需要你专注对应的地方,不过根据经验,建议不要在一项大型项目中涉及10项以上的测试。
2.1.2 对象需主流
着重测试那些影响到较多客户的变更方案,这样能够保证你提升的意义更大,而不至于让自己偏离到边缘化环境中。同时,针对主流群体测试也意味着数据汇集能够更多、更快,这也就能够更快地得出结果,得到更多的优胜方案。
避免陷入边界化环境
在设计与搭建测试时的确要以完整性为目标,但是也需要认识到完整性的问题不一定能够体现在如此灵活的测试中。
如果你只是为了应对比例非常小的一部分顾客(例如,为IE6进行优化,或者优化一种罕见的用户操作流程)实际上都是在为你的测试拖后腿。所以,尽量绕开这些边界化的环境(或者接受它们的影响较小),进行测试,证实价值,找到最优结果,进而指导例行工作。
受众范围
你所设的目标及情景设想都需要得到高度集中的关注,这便需要让测试的辐射范围足够广,最大限度地捕捉受众流量与访客中的潜在机会。对于那些可能导致你错失许多访客、对机会造成局限性的情况要尽量避免。举例来说,如果测试针对的仅仅是极小的商品范围或流量极低的网站区域,那么你要仔细考虑一下是否能够对更大的范围使用相同的情景设想。
测试的受众范围越大,优胜方案产生的价值越多。
定位主流人群
在测试的初期,你会发现可以对你的访客人群进行细分,例如新访客与回访访客,不同人群对相同体验的反应也不尽相同。
继续将目标定位到顾客中的主流人群与价值人群。在测试项目的成本开销方面,也要确保将定位人群置于首位。
▲ 专注于小型项目(但并不局限于小型创意),同时也对较大型项目保持关注。
▲ 测试目的是逐步提升而不是一次性完美。
▲ 尽量缩短准备阶段的时间和启动新测试的时间。
▲ 重点实施覆盖网站主流访客的优化测试。