网站优化利器－网站在线测试

Posted on 五月 27, 2010
Filed Under 分析实践 | 5 Comments

原创文章，转载请注明： 转载自网站分析 Web Analytics
本文链接地址: 网站优化利器－网站在线测试

网站分析最终的目标是网站优化，提升网站的表现。通过各种网站分析的工具，抓取到了网站上用户行为的数据，形成了报表。同时，我们也通过分析，得出了一些结论，提出了一些改善的想法和计划。然而，我们得到的结论是正确的，提出的改善的想法是否真正的为用户所认可，这些是需要作出评判的。评判的方法就是通过测试，让用户来投票。通过对浏览过不同版本的用户的后续行为来作出判断。

前面已经有介绍过Google Website Optimizer这个工具来进行A/B测试和多变量测试。这篇文章想针对测试的概念，谈谈我的看法。

在实际工作中，常常会遇到，针对同一个页面的设计，不同的人有不同的看法，都认为自己的想法更好。或者针对以前的版本有一些修改，但拿不准到底修改后的版本是不是能比前一个版本有更好的效果。这个时候，需要的就是进行测试。

最简单的测试：分时段测试

最容易想到，也最容易实现的办法是，假设同一个页面我有3个版本的设计，但是拿不准哪个更好，那么就把第一个版本展示10天，第二个版本展示10天，第三个版本展示10天，最后通过对比，挑选出用户最喜欢的设计。这个方式的优点在最简单，实现很容易。缺点是误差也很大，因为是分成不同的时段，受广告、热淡季、线上活动等影响较大，得出的结果不是很准确。

复杂一些的测试：A/B测试

为了解决分时段测试的问题，我们会想到，让不同的版本在同一时间上，随机展示给访问者，然后来测定不同版本的效果。也就是说，还是假设同一个页面有3个版本的设计，那么当一个用户来到网站的时候看到每个版本的几率都是33％。3个版本平均的展示给访问者，最后通过跟踪访问者之后的反应，选出更好的设计。这个测试的方法是非常常用的，因为是同时进行展示，因此几乎不受外部因素影响，因而比较准确。

更复杂的测试：多变量测试

当测试的位置不再是几个版本，而是有N个位置，对应每个位置有M个版本的内容，那么测试的版本就有N×M种。举个例子，某个页面上，横幅广告的位置准备了几个版本，下方文字数据有几种排版的设计，右边的图片部分也有多种设计，等等，测试的目的是想知道，各个位置的多个版本，如何组合使用，效果更好。如果使用A/B测试，可能就需要准备很多（N×M个）的版本，会非常麻烦。那么使用多变量测试，只要划定多个区块，设置好这些位置上要展示的版本，多变量测试的工具会在各个位置上随机展示不同版本，同时跟踪各个组合的效果。也就是说，工具帮你完成了各个位置的组合，省去了你自己组合的麻烦。这个测试最大的问题就是，当组合的量比较大，比较几百种组合方式，而网站流量比较小的时候，需要较长的时间才能收集到足够的样本。

您也许还对以下内容有兴趣：

评论

5 Responses to “网站优化利器－网站在线测试”

  1. Keven发表：
    六月 3rd, 2010

    恩 正如博主所说，变量测试最大的问题在于—-是否有足够的精力去做N个同样精良的版本来进行测试。否则测试的基础就是错误的。越简单的测试方法却是最为耗费精力的。多变量测试虽然稍微复杂那么一点但是可以局部改变而不用改变整个页面，相对于测试结果来说，耗费很大精力做N个版本的成本是否值得就非常需要商榷了。

    [回复]

    深蓝 回复:
    六月 7th, 2010

    没错。我感觉做测试，时间花费最多是设计的阶段。考虑测试方法，准备各种版本，考虑效果的跟踪。

    [回复]

  2. Keven发表：
    六月 7th, 2010

    博主同学 交换友情链接~呵呵 请给我发邮件！谢谢！

    [回复]

    深蓝 回复:
    六月 8th, 2010

    已密你，多多交流啊！

    [回复]

    Keven 回复:
    六月 9th, 2010

    恩恩~我加你Gtalk了

    [回复]

Leave a Reply