<?xml version="1.0" encoding="UTF-8"?>
<rss version="2.0"
	xmlns:content="http://purl.org/rss/1.0/modules/content/"
	xmlns:wfw="http://wellformedweb.org/CommentAPI/"
	xmlns:dc="http://purl.org/dc/elements/1.1/"
	xmlns:atom="http://www.w3.org/2005/Atom"
	xmlns:sy="http://purl.org/rss/1.0/modules/syndication/"
	xmlns:slash="http://purl.org/rss/1.0/modules/slash/"
	>

<channel>
	<title>网站分析 Web Analytics &#187; A/B测试</title>
	<atom:link href="http://www.webanalytics.org.cn/tag/ab%e6%b5%8b%e8%af%95/feed/" rel="self" type="application/rss+xml" />
	<link>http://www.webanalytics.org.cn</link>
	<description>专注于网站分析工具、网站分析方法与网站分析实践</description>
	<lastBuildDate>Fri, 25 Jun 2010 05:55:20 +0000</lastBuildDate>
	<generator>http://wordpress.org/?v=2.8.4</generator>
	<language>en</language>
	<sy:updatePeriod>hourly</sy:updatePeriod>
	<sy:updateFrequency>1</sy:updateFrequency>
			<item>
		<title>网站优化利器－网站在线测试</title>
		<link>http://www.webanalytics.org.cn/website-optimizer-method-online-testing/</link>
		<comments>http://www.webanalytics.org.cn/website-optimizer-method-online-testing/#comments</comments>
		<pubDate>Thu, 27 May 2010 07:22:36 +0000</pubDate>
		<dc:creator>深蓝</dc:creator>
				<category><![CDATA[分析实践]]></category>
		<category><![CDATA[A/B测试]]></category>
		<category><![CDATA[Google Website Optimizer]]></category>
		<category><![CDATA[多变量测试]]></category>
		<category><![CDATA[网站优化]]></category>

		<guid isPermaLink="false">http://www.webanalytics.org.cn/?p=382</guid>
		<description><![CDATA[网站分析最终的目标是网站优化，提升网站的表现。通过各种网站分析的工具，抓取到了网站上用户行为的数据，形成了报表。同时，我们也通过分析，得出了一些结论，提出了一些改善的想法和计划。然而，我们得到的结论是正确的，提出的改善的想法是否真正的为用户所认可，这些是需要作出评判的。评判的方法就是通过测试，让用户来投票。通过对浏览过不同版本的用户的后续行为来作出判断。

前面已经有介绍过<a title="Google Website Optimizer" href="http://www.google.com/websiteoptimizer" target="_blank">Google Website Optimizer</a>这个工具来进行<a title="A/B测试" href="http://www.webanalytics.org.cn/ab-testing-via-google-website-optimizer/" target="_blank">A/B测试</a>和<a title="多变量测试" href="http://www.webanalytics.org.cn/multivariate-testing-via-google-website-optimizer/" target="_blank">多变量测试</a>。这篇文章想针对测试的概念，谈谈我的看法。]]></description>
			<content:encoded><![CDATA[<p>网站分析最终的目标是网站优化，提升网站的表现。通过各种网站分析的工具，抓取到了网站上用户行为的数据，形成了报表。同时，我们也通过分析，得出了一些结论，提出了一些改善的想法和计划。然而，我们得到的结论是正确的，提出的改善的想法是否真正的为用户所认可，这些是需要作出评判的。评判的方法就是通过测试，让用户来投票。通过对浏览过不同版本的用户的后续行为来作出判断。</p>
<p>前面已经有介绍过<a title="Google Website Optimizer" href="http://www.google.com/websiteoptimizer" target="_blank">Google Website Optimizer</a>这个工具来进行<a title="A/B测试" href="http://www.webanalytics.org.cn/ab-testing-via-google-website-optimizer/" target="_blank">A/B测试</a>和<a title="多变量测试" href="http://www.webanalytics.org.cn/multivariate-testing-via-google-website-optimizer/" target="_blank">多变量测试</a>。这篇文章想针对测试的概念，谈谈我的看法。</p>
<p>在实际工作中，常常会遇到，针对同一个页面的设计，不同的人有不同的看法，都认为自己的想法更好。或者针对以前的版本有一些修改，但拿不准到底修改后的版本是不是能比前一个版本有更好的效果。这个时候，需要的就是进行测试。</p>
<h3>最简单的测试：分时段测试</h3>
<p>最容易想到，也最容易实现的办法是，假设同一个页面我有3个版本的设计，但是拿不准哪个更好，那么就把第一个版本展示10天，第二个版本展示10天，第三个版本展示10天，最后通过对比，挑选出用户最喜欢的设计。这个方式的优点在最简单，实现很容易。缺点是误差也很大，因为是分成不同的时段，受广告、热淡季、线上活动等影响较大，得出的结果不是很准确。</p>
<h3>复杂一些的测试：A/B测试</h3>
<p>为了解决分时段测试的问题，我们会想到，让不同的版本在同一时间上，随机展示给访问者，然后来测定不同版本的效果。也就是说，还是假设同一个页面有3个版本的设计，那么当一个用户来到网站的时候看到每个版本的几率都是33％。3个版本平均的展示给访问者，最后通过跟踪访问者之后的反应，选出更好的设计。这个测试的方法是非常常用的，因为是同时进行展示，因此几乎不受外部因素影响，因而比较准确。</p>
<h3>更复杂的测试：多变量测试</h3>
<p>当测试的位置不再是几个版本，而是有N个位置，对应每个位置有M个版本的内容，那么测试的版本就有N×M种。举个例子，某个页面上，横幅广告的位置准备了几个版本，下方文字数据有几种排版的设计，右边的图片部分也有多种设计，等等，测试的目的是想知道，各个位置的多个版本，如何组合使用，效果更好。如果使用A/B测试，可能就需要准备很多（N×M个）的版本，会非常麻烦。那么使用多变量测试，只要划定多个区块，设置好这些位置上要展示的版本，多变量测试的工具会在各个位置上随机展示不同版本，同时跟踪各个组合的效果。也就是说，工具帮你完成了各个位置的组合，省去了你自己组合的麻烦。这个测试最大的问题就是，当组合的量比较大，比较几百种组合方式，而网站流量比较小的时候，需要较长的时间才能收集到足够的样本。</p>
]]></content:encoded>
			<wfw:commentRss>http://www.webanalytics.org.cn/website-optimizer-method-online-testing/feed/</wfw:commentRss>
		<slash:comments>5</slash:comments>
		</item>
		<item>
		<title>使用Google Website Optimizer做A/B测试</title>
		<link>http://www.webanalytics.org.cn/ab-testing-via-google-website-optimizer/</link>
		<comments>http://www.webanalytics.org.cn/ab-testing-via-google-website-optimizer/#comments</comments>
		<pubDate>Thu, 14 Jan 2010 06:52:40 +0000</pubDate>
		<dc:creator>深蓝</dc:creator>
				<category><![CDATA[分析工具]]></category>
		<category><![CDATA[A/B测试]]></category>
		<category><![CDATA[Google Analytics]]></category>
		<category><![CDATA[Google Website Optimizer]]></category>
		<category><![CDATA[自定义]]></category>

		<guid isPermaLink="false">http://www.webanalytics.org.cn/?p=323</guid>
		<description><![CDATA[在<a title="网站分析的步骤" href="http://www.webanalytics.org.cn/steps-of-web-analytics/" target="_blank">以前的文章</a>中提到，在网站分析的过程中，我们通过数据分析出结果，往往提出改进的建议，需要有新的创意，如果没有行动，之前所做的一切都没有意义。这里可能会有各种建议：调整页面头部的布局，修改导航，增加一些元素，调整文字的排版等等。那么这些建议，是不是真的能够提升网站呢？这就需要测试。也许你会说，这好办，把这些调整做好，观察一段时间，把两个时间段上网站的监控数据进行比较。不过，随着时间的推移，各种条件也在发生变化，会影响最终的结果。比如，广告的发布，促销活动，淡季旺季的影响等等。所以，一个更好的办法是，在同一时间展示不同版本的页面给不同的用户，通过不同版本的后续转化来评定优劣。而Google Website Optimizer就是做这样测试的不错的选择。

比如我的<a title="网站分析博客" href="http://www.webanalytics.org.cn" target="_blank">这个博客</a>，Page Views/Visits只有2，也就是说，一次访问访问者平均就浏览两个页面，而且略微还有减少的趋势。这说明网站的粘性有问题。通过分析，我认为网站的导航不是很好，很多文章被埋在几页以后，访问者很难找到。我准备在首页的右下角增加一个悬浮的窗口，提示访问者，查看<a title="网站分析博客地图" href="http://www.webanalytics.org.cn/sitemap/" target="_blank">网站地图</a>可以看到更多文章。这个改进真的能起作用吗？我需要测试一下。]]></description>
			<content:encoded><![CDATA[<p>在<a title="网站分析的步骤" href="http://www.webanalytics.org.cn/steps-of-web-analytics/" target="_blank">以前的文章</a>中提到，在网站分析的过程中，我们通过数据分析出结果，往往提出改进的建议，需要有新的创意，如果没有行动，之前所做的一切都没有意义。这里可能会有各种建议：调整页面头部的布局，修改导航，增加一些元素，调整文字的排版等等。那么这些建议，是不是真的能够提升网站呢？这就需要测试。也许你会说，这好办，把这些调整做好，观察一段时间，把两个时间段上网站的监控数据进行比较。不过，随着时间的推移，各种条件也在发生变化，会影响最终的结果。比如，广告的发布，促销活动，淡季旺季的影响等等。所以，一个更好的办法是，在同一时间展示不同版本的页面给不同的用户，通过不同版本的后续转化来评定优劣。而Google Website Optimizer就是做这样测试的不错的选择。</p>
<p>比如我的<a title="网站分析博客" href="http://www.webanalytics.org.cn" target="_blank">这个博客</a>，Page Views/Visits只有2，也就是说，一次访问访问者平均就浏览两个页面，而且略微还有减少的趋势。这说明网站的粘性有问题。通过分析，我认为网站的导航不是很好，很多文章被埋在几页以后，访问者很难找到。我准备在首页的右下角增加一个悬浮的窗口，提示访问者，查看<a title="网站分析博客地图" href="http://www.webanalytics.org.cn/sitemap/" target="_blank">网站地图</a>可以看到更多文章。这个改进真的能起作用吗？我需要测试一下。</p>
<p>现在我准备了一个新的页面，其实就是原来页面的基础上，增加了网站地图的点击提示。下面就登录到Google Website Optimizer。</p>
<p><img class="alignnone size-full wp-image-325" title="website optimizer step1" src="http://www.webanalytics.org.cn/wp-content/uploads/2010/01/website-optimizer-step1.jpg" alt="website optimizer step1" width="480" height="135" /></p>
<p>因为是新的帐号，现在还没有建立任何的测试。点击“Create a new experiment”。</p>
<p><img class="alignnone size-full wp-image-326" title="website optimizer step2" src="http://www.webanalytics.org.cn/wp-content/uploads/2010/01/website-optimizer-step2.jpg" alt="website optimizer step2" width="480" height="285" /></p>
<p>接下来，需要确定是做A/B测试还是多变量测试。本文主要讨论A/B测试。然后，Google Website Optimizer会提示你需要准备的内容。再点击下一步，会进入一个表单页。</p>
<p><img class="alignnone size-full wp-image-327" title="website optimizer step3" src="http://www.webanalytics.org.cn/wp-content/uploads/2010/01/website-optimizer-step3.jpg" alt="website optimizer step3" width="480" height="439" /></p>
<p>可以看到，会要求输入不同版本的页面的URL。这里是两个版本：原版本和新版本。当然，你也可以创建多个版本，只要点击“Add another page variation”就可以了。在设定好目标页的URL。我这里设置的是留言页面。这样的话，Google Website Optimizer就会按照到达留言页面的次数来衡量两个版本。</p>
<p>进入下一页，选择“You will install and validate the JavaScript tags”。那么，就会看到各个页面应该添加的代码。这里也没有什么好说的，Google都帮你准备好了。按照要求添加好。验证通过后，就可以开始测试了。</p>
<p>好了，现在开始两个版本的页面会被随机的对访问者展示，然后统计最后到达留言页面的情况，然后根据统计学的算法选出优胜者。</p>
<p>有人会问，你之前不是说想提高Page Views/Visits吗，这会儿怎么以访问留言页面为目标了呢？因为在Google Website Optimizer中，目标只能制定某个页面。其实要解决这个问题并不难，只要把Google Website Optimizer和Google Analytics结合起来使用。还记得前面的关于<a title="Google Analytics自定义变量的实际运用" href="http://www.webanalytics.org.cn/google-analytics-custom-variables-in-practice/" target="_blank">Google Analytics自定义变量</a>的文章吗？只要设置一个自定义变量来记录用户访问了哪个版本的页面，那用户后续的情况就都可以了解了。</p>
]]></content:encoded>
			<wfw:commentRss>http://www.webanalytics.org.cn/ab-testing-via-google-website-optimizer/feed/</wfw:commentRss>
		<slash:comments>0</slash:comments>
		</item>
	</channel>
</rss>
