如何对整个网站设计进行A/B测试

Question

我们正在构建一个新的网站设计，而不是将其切入100％，我们希望能够轻松进入，因此我们可以随时进行测试。目标是让访问http://oursite.com的用户既可以访问“旧”网站，也可以访问新网站，并且我们可以控制获得新网站的人员比例达到10％，50％等。

我是熟悉网页的A/B测试，但不是整个网站域名。我们在LAMP堆栈上，所以也许这可以通过Apache VHosts来完成？我们有两台云服务器在生产中的云负载平衡器后面运行。新网站完全包含在svn分支中，并且当前生产网站用完了svn主干。

有关我如何解决这个问题的任何建议？

谢谢你！

Answer 1

您绝对可以做到这一点，它是快速识别改善转换率方面重大差异的好方法。它取决于几件事：

1. 您的网站有一个共同的标头。您将进行A/B测试CSS文件，因此只有在整个站点（或站点的​​一部分）都有一次CSS调用时才能使用。
2. 你只测试网站设计的差异。在这种情况下，版本之间的所有内容，表单，号召性用语等都是相同的。在技​​术上可以同时对其他页面元素执行单独的测试。我不建议这样做，因为结果的解释会让人困惑。
3. 您选择的A/B测试平台支持在访问过程中向访问者显示相同的版本。每当他们点击另一个页面时，看到一个网站的主题会发生变化，这将是非常令人沮丧的。我使用过的大多数A/B测试平台都有一个选项。

由于您正在测试版本之间的实质差异，因此我还建议您在开始之前计算样本大小。这样可以防止您向很多人展示失败的版本，并且还会让您对结果充满信心（这是一个mistake，让测试运行到达到统计意义）。有几个在线计算器，您可以使用（VisualWebsiteOptimizer,Evan Miller）。