A/B测试完整指南:来自谷歌，HubSpot和更多的专家提示

这可能不是你第一次读到A/B测试。你甚至可能已经A/B测试你的电子邮件主题行或你的社交媒体帖子。

尽管市场营销领域有很多关于A/B测试的说法，ob欧宝娱乐app下载地址很多仍然有很多人会弄错。结果呢?根据不正确测试的不准确结果做出重大商业决策的人。

A/B测试通常过于简化，特别是在为商店所有者编写的内容中。下面你会发现你需要知道的关于电子商务的不同类型的A/B测试的所有内容，并尽可能简单地进行了解释。OB欧宝娱乐APP

A / B测试是什么?

A/B测试，有时被称为分割测试，是比较相同网页、电子邮件或其他数字资产的两个版本，以确定哪个版本表现更好的过程。

这个过程可以让你回答重要的商业问题，帮助你产生更多的收入你已经拥有的交通，并为以数据为导向的营销策略奠定基础。ob欧宝娱乐app下载地址

了解更多:如何进行SWOT分析为您的业务

A/B测试是如何运作的

当你在市场营销环境中使用A/B测试时，你会向50%的访问者展示你的资产版本A(我们ob欧宝娱乐app下载地址称之为“控制”)，向50%的访问者展示你的资产版本B(我们称之为“变体”)。

转化率最高的版本获胜。例如，假设变体(版本B)产生了最高的转化率。然后你将宣布它为获胜者，并将100%的访问者推到该变体。

然后，变体成为新的控件，您必须设计一个新的变体。

值得一提的是，A/B测试转化率并不是衡量成功的完美标准。为什么?你可以通过商店中的所有东西都是免费的来立即提高转化率。当然，这是一个糟糕的商业决策。

这就是为什么你应该跟踪转换的价值，直到收银机响的声音。

什么是A/B/n测试?

通过A/B/n测试，您可以针对控件测试多个变量。所以，不是向50%的访问者展示对照，向50%的访问者展示变异，而是向25%的访问者展示对照，25%展示第一种变异，25%展示第二种变异，25%展示第三种变异。

注意:这与多元测试不同，多元测试也涉及多个变量。当运行多变量测试时，您不仅要测试多个变量，还要测试多个元素，例如A/B测试UX或SEO拆分测试。目标是找出哪种组合表现最好。

你需要很多来运行多变量测试，所以您现在可以忽略这些测试。

A/B测试应该运行多长时间?

在至少一个，最好是两个完整的商业周期中运行A/B测试。不要因为你达到了意义就停止你的测试。你还需要满足预定的样本量。最后，不要忘记在整个星期的增量中运行所有测试。

为什么有两个完整的商业周期?首先:OB欧宝娱乐APP

1. 你可以解释“我需要考虑一下”的买家。
2. 你可以解释所有不同的流量来源(Facebook，电子邮件通讯，有机搜索等)。
3. 你可以解释异常现象。例如，你的周五电子邮件通讯。

如果你使用过任何类型的A/B或登陆页面测试工具，你可能会熟悉绿色的“统计显著性”图标。

不幸的是，对许多人来说，这是“考试完了”的通用标志。正如你将在下文中了解到的，仅仅因为A/B测试达到了统计显著性并不意味着你应该停止测试。

你的预定样本量是多少?这并没有看上去那么吓人。打开一个样本容量计算器，比如这个来自埃文·米勒．

这个计算的意思是，如果你当前的转化率是5%，而你希望能够检测到15%的效果，那么你需要13,533个样本。所以，如果这是一个标准的a /B测试，总共需要超过25000名访客。

如果你想检测一个较小的影响，看看会发生什么:

唯一改变的是最小可检测效应(MDE)。从15%下降到8%。在本例中，每个变体需要47127个样本。因此，如果这是一个标准的a /B测试，总共需要近10万名观众。

无论你是进行A/B测试UX还是SEO拆分测试，你都应该在测试开始前预先计算样本大小。OB欧宝娱乐APP你的测试不能停止，即使它达到显著性，直到达到预定的样本量。如果是，测试就无效。

这就是为什么你不能漫无目的地遵循最佳实践，比如“100次转换后就停止”。

为整个星期的增量运行测试也很重要。你的流量可以根据一周的一天和一天的时间变化，所以你要确保包括每周的每一天。

你为什么要进行A/B测试?

假设你花了100美元Facebook的广告送10个人到你的网站。你的平均订单价值是25美元。其中8名游客什么都没买就离开了，另外两名游客每人花了25美元。结果呢?你丢了50美元。

现在让我们假设你花100美元在Facebook上投放广告，将10个人吸引到你的网站上。你的平均订单价值仍然是25美元。但这一次，只有5名游客什么都没买就离开了，另外5名游客每人花了25美元。结果呢?你赚了25美元。

当然，这是一个更简单的A/B测试例子。但通过提高现场转化率，你让相同的交通更有价值。

A/B测试图像无论你的测试是赢是输，复制也能帮助你发现真知灼见。这个价值是非常可转移的。例如，从一个广告文案的洞察力产品描述A/B测试可以帮助了解你的价值主张产品视频，或其他产品描述。

您也不能忽视专注于持续改进您的商店的有效性的内在价值。

你是否应该进行A/B测试?

不一定。如果你运行的是一个低流量的网站、网页或手机应用，a /B测试可能不是最佳优化方法。例如，通过进行用户测试或与客户交谈，您可能会看到更高的投资回报(ROI)。

尽管人们普遍认为，转化率优化不以测试开始和结束。

考虑上面的样本容量计算器中的数字。47,127访问者每个变异检测8%的影响，如果你基准转换利率是5%。假设你想测试a产品页面．它能在两到四周内接待近10万名游客吗?

为什么是两到四周?记住，我们希望至少为两个完整的业务周期运行测试。通常需要两到四周的时间。现在你可能在想，“没问题，Shanelle，我将进行超过两到四周的测试，以达到所需的样本量。”那也不行。

你看，测试运行的时间越长，它就越容易受到外部有效性威胁和样本污染的影响。例如，访问者可能会删除他们的cookie，最终以新访问者的身份重新进入A/B测试。或者有人从手机切换到桌面，就会看到另一种变化。

从本质上说，让测试运行太长时间和让它运行时间不够长一样糟糕。

对于能够在两到四周内满足所需样本量的商店来说，测试是值得投资的。无法做到的商店应该考虑其他形式的优化，直到他们的流量增加。

Shopify的数据科学家Julia starostko对此表示赞同，并解释道:

你应该做什么A/B测试?

我不能告诉你A/B测试是什么。我知道，我知道。如果我能给你一个包含99件事的清单，让你现在就去测试，那肯定会让你的生活更轻松。愿意这样做以换取点击率的营销人员并不缺乏。ob欧宝娱乐app下载地址

事实是，唯一值得运行的测试是基于您自己的数据的测试。我不能访问你的数据，你的客户等，任何人也不能策划那些A/B测试想法的巨大列表。没有人能做到有意义的告诉你要测试什么。

惟一值得运行的测试是基于您自己的数据的测试。

相反，我鼓励你自己通过定性和定量分析来回答这个问题。一些流行的A/B测试例子有:

• 技术分析。你的商店在每个浏览器上都能正确快速加载吗?在每个设备上?你可能有一部闪亮的新iPhone 11，但在某个地方有人还在挥舞着2005年的摩托罗拉Razr。如果你的网站不能正常快速地运行，它肯定不能很好地转换。

• 现场调查。当你的顾客浏览你的商店时，它们就会弹出。例如，一项现场调查可能会询问那些已经浏览同一页面有一段时间的访问者，是否有什么东西阻碍他们今天进行购买。如果有，是什么?你可以使用这些定性数据来提高你的拷贝和转化率。

• 客户面试。没有什么能取代拿起电话和你的客户交谈。为什么他们选择你的店而不是其他竞争对手的店?当他们到达你的网站时，他们试图解决什么问题?为了深入了解你的客户是谁，你可以问很多问题为什么他们真的从你这里购买。

• 客户调查。顾客调查是针对已经购买过商品的人(而不是访客)进行的全面调查。当设计一个调查时，你要关注:定义你的客户，定义他们的问题，定义他们在购买前的犹豫，确定他们用来描述你的商店的词汇和短语。

• 分析分析。你的分析工具是否正确地跟踪和报告你的数据?这听起来可能很傻，但你会惊讶于有多少分析工具配置错误。分析分析就是要弄清楚你的访问者是如何表现的。例如，你可能专注于漏斗。你最大的在哪里?转换漏斗泄漏？换句话说，大多数人会从你的漏斗中掉到哪里?这是开始测试的好地方。OB欧宝娱乐APP

• 用户测试。你可以在一个付费的、可控的实验中观察真人在你的网站上执行任务。例如，你可以让他们找到一款价格在40 - 60美元之间的电子游戏，并将其添加到购物车中。当他们在执行这些任务时，他们会大声叙述自己的想法和行动。

• 会话回放。会话回放类似于用户测试，但现在你面对的是拥有真金白银和真正购买意愿的真人。您将看到实际的访问者如何浏览您的站点。他们很难找到什么?他们在哪里感到沮丧?他们在哪里感到困惑?

还有其他类型的研究，但首先要选择最适合你的A/B测试方法。OB欧宝娱乐APP如果你浏览了其中的一些，你就会有一大堆值得测试的基于数据的想法。我保证你的列表会比任何“现在要测试的99件事”的文章带给你更多的价值。

优先考虑A/B测试想法

大量的A/B测试想法是令人兴奋的，但对决定测试内容并没有多大帮助。从哪里开始呢?OB欧宝娱乐APP这就是优先级的作用。

你可以使用一些常见的优先排序框架:

• 冰。ICE代表冲击、自信和轻松．这些因素都得到了1-10的排名。例如，如果您可以在没有开发人员或设计人员帮助的情况下轻松地自己运行测试，那么您可能会给ease打8分。您在这里使用自己的判断，如果有多个人运行测试，那么排名可能会变得太主观。制定一套指导方针来保持每个人的客观是有帮助的。

• 派。PIE代表潜力、重要性和轻松度．同样，每个因素都得到了1-10的排名。例如，如果测试将达到90%的流量，您可能会给重要性打8分。PIE和ICE一样具有主观性，因此指导方针对该框架也有帮助。

• PXL。PXL是CXL的优先级框架。它有点不同，更可定制，迫使玩家做出更客观的决定。而不是三个因素，你会发现是/否问题和一个容易实现的问题。例如，框架可能会问:“测试是为了增加动机而设计的吗?”如果是，它得到1。如果没有，它得到一个0。您可以了解更多关于这个框架和在此下载电子表格．

现在你知道该从哪里开始了，但这也有助于对你的想法进行分类。OB欧宝娱乐APP例如，在我最近做的一些转换研究中，我使用了三个类别:实现、调查和测试。

• 实现。只管去做。它坏了或者很明显。
• 调查。需要额外的思考来定义问题或缩小解决方案。
• 测试。这个想法是合理的，数据也是有依据的。测试它!

在这种分类和优先级之间，你就确定了。

A/B测试统计速成班

在运行测试之前，深入研究统计数据是很重要的。我知道，统计通常不是粉丝们的最爱，但把它看作是你不情愿毕业的必修课。

统计数据是a /B测试的重要组成部分。幸运的是，A/B测试工具和分割测试软件使优化器的工作变得更容易，但对幕后发生的事情的基本理解对于稍后分析测试结果是至关重要的。

Alex Birkett，成长营销经理ob欧宝娱乐app下载地址HubSpot的解释:

这是什么意思?

均值是平均值。你的目标是找到一个代表整体的均值。

例如，假设你想要找出电子游戏的平均价格。你不可能把世界上所有电子游戏的价格相加然后除以世界上所有电子游戏的数量。相反，您将分离出一个小样本代表世界上有那么多电子游戏。

你可能会发现几百个电子游戏的平均价格。如果你选择了一个具有代表性的样本，那么这200款电子游戏的平均价格便能够代表世界上所有的电子游戏。

什么是抽样?

样本量越大，变异性越小，这意味着平均值更可能是准确的。

所以，如果你将样本从200款游戏增加到2000款游戏，你的方差就会更小，而均值也会更精确。

什么是方差?

方差是平均变异性。从本质上说，变异性越高，预测单个数据点的平均值就越不准确。

那么，每款电子游戏的平均价格与实际价格有多接近呢?

什么是统计意义?

假设A和B之间没有区别，你有多少次会偶然看到这种效果?

统计显著性水平越低，获胜变量根本不是赢家的可能性就越大。

简单地说，低显著性水平意味着你的“赢家”很有可能不是真正的赢家(这被称为假阳性)。

请注意，大多数A/B测试工具和开源A/B测试软件调用统计显著性，而无需等待预先确定的样本大小或时间点。这就是为什么你可能会注意到你的测试在统计上重要和统计上不重要之间来回切换。

Peep Laja，创始人CXL研究所他希望更多的人这样做真的理解A/B测试的统计显著性和重要性:

什么是回归均值?

在A/B测试开始时，您可能会注意到极端的波动。

回归均值是一种现象，即如果某物在第一次测量时非常极端，那么它在第二次测量时很可能接近平均值。

如果你进行测试的唯一原因是它达到了统计显著性，那么你可能会看到假阳性。随着时间的推移，你的获胜变量可能会回归到平均值。

什么是统计力量?

假设a和B之间存在差异，你多久能看到这种影响?

权力等级越低，获胜者不被认可的可能性就越大。能量水平越高，获胜者不被发现的几率就越低。实际上，你所需要知道的是，80%的统计能力是大多数A/B测试工具和/或任何分裂测试服务的标准。

Ton Wesseling，创始人在线对话他希望更多人了解统计的力量:

什么是外部有效性威胁?

有一些外部因素会威胁到测试的有效性。例如:

• 黑色星期五网络星期一(BFCM)销售
• 正面或负面的新闻报道
• 一个主要的付费活动启动
• 星期几:星期几
• 季节的变化

一个更常见的A/B测试例子是在季节性事件期间，外部有效性威胁会影响您的结果。假设你要在12月进行一次测试。主要的购物假期将意味着该月你的商店客流量的增加。你可能会在1月份发现，12月份的赢家不再表现出色。

为什么?

因为一个外部的有效性威胁:假期。

您的测试决策所依据的数据是异常的。当事情在1月份稳定下来时，你可能会惊讶地发现你的赢家输了。

您无法消除外部有效性威胁，但可以通过运行测试来减轻它们(例如，不要在周一开始测试，而在周五结束测试)，包括不同类型的流量(例如，不要只测试付费流量，然后将结果推广到每个流量源)，并注意潜在的威胁。OB欧宝娱乐APP

如果您碰巧在繁忙的购物季节运行一个测试，比如BFCM，或者通过一个主要的外部有效性威胁，您可能想要阅读我们的完成A/B测试指南．

如何设置A/B测试

让我们先来看看a /B测试教程。在测试之前任何东西，你需要有一个可靠的假设。(太好了，我们刚上完数学课，现在开始讲科学了。)

别担心，这并不复杂。基本上，你需要测试的是一个假设，而不是一个想法。假设是可测量的，渴望解决特定的转换问题，关注洞察而不是胜利。

你需要进行A/B测试的是假设，而不是想法。

每当我写假设的时候，我都借用了一个公式克雷格·沙利文的假设套件：

• 因为你看到[从研究中插入数据/反馈]
• 你期望[正在测试的更改]会引起[预期的影响]，并且
• 你可以使用[数据度量]来衡量这一点

容易,对吧?你所要做的就是填空，然后你的测试想法就变成了假设。

选择A/B测试工具

现在你可以开始选择A/BOB欧宝娱乐APP测试工具或分割测试服务了。通常情况下，你会想到谷歌优化，优化,VWO第一。

这些都是好的、安全的选择。

• 谷歌优化。免费的，除了一些多元限制，如果你刚刚开始，这应该不会真正影响你。OB欧宝娱乐APP它在执行谷歌Analytics A/B测试时工作得很好，这是一个加分项。

• 优化。即使没有技术技能，也很容易启动和运行次要测试。数据引擎使分析测试结果更容易。通常，Optimizely是三个选项中最昂贵的。

• VWO。VWO已经SmartStats使分析更容易。此外，它有一个很棒的WYSIWYG编辑器为初学者。每个VWO计划都附带热图、现场调查、表单分析等。

我们也有一些A/B测试工具Shopify App Store这可能对你有帮助。

一旦您选择了A/B测试工具或分割测试软件，请填写注册表并按照所提供的说明进行操作。这个过程因工具而异。不过，通常情况下，你会被要求在你的网站上安装一个代码片段并设定目标。

如何分析A/B测试结果

还记得我说过写假设会把焦点从胜利转移到见解吗?Krista Seiden，分析倡导者和产品经理谷歌，解释了这意味着什么:

如果你的假设是正确的，即使是失败者也会成为赢家，因为你将获得对未来测试和其他业务领域有用的见解。因此，当您在分析测试结果时，您需要专注于洞察，而不是测试是赢还是输。总有东西要学，总有东西要分析。不要轻视失败者!

如果你的假设是正确的，即使是输家也是赢家。

这里需要注意的最重要的事情是需要细分。一个测试可能总体上是失败的，但它至少有一个部分表现得很好。分段是什么意思呢?

• 新访客
• 返回的游客
• iOS的游客
• Android的游客
• Chrome的游客
• 旅行的游客
• 桌面的游客
• 平板电脑的游客
• 有机搜索访问者
• 游客支付
• 社交媒体访问者
• 登录买家

你明白了吧?

当您在测试工具中查看结果时，您看到的是整盒糖果。你需要做的是把Smarties按颜色分开，这样你就可以最后吃红色的了。我的意思是，这样你就能发现更深层的，细分的见解。

这种假设在某些部分被证明是正确的。这也告诉了你一些事情。

分析不仅仅是测试的赢家或输家。分割你的数据，发现隐藏在表面之下的见解。

A/B测试工具不会为你做分析，所以这是一项需要长期培养的重要技能。

如何存档过去的A/B测试

假设您明天运行第一个测试。两年后的明天，你还记得那次考试的细节吗?不太可能。

这就是为什么存档A/B测试结果如此重要。如果没有一个维护良好的档案，你所获得的所有见解都会丢失。另外，我不骗你，如果你没有存档，很容易测试同一件事两次。

然而，并没有“正确”的方法来做到这一点。你可以使用像这样的工具项目或有效的实验，或者你也可以使用Excel。这完全取决于你自己，尤其是当你刚刚开始的时候。OB欧宝娱乐APP只要确保你在跟踪:

• 假设
• 控制和变化的截图
• 不管它是赢还是输
• 通过分析获得的见解

随着你的成长，你会感谢自己保存了这些档案。它不仅对你有帮助，对新员工和顾问/利益相关者也有帮助。

A/B测试过程的专业人士

现在您已经完成了标准的a /B测试教程，让我们来看看来自谷歌和HubSpot等公司的专业人员的确切过程。

克里斯塔·塞登，谷歌

我对网页和应用A/B测试的逐步过程是从分析开始的——在我看来，这是任何优秀测试程序的核心。OB欧宝娱乐APP在分析阶段，目标是检查你的分析数据，调查或UX数据，或任何其他客户洞察来源，以便了解优化的机会在哪里。

一旦从分析阶段获得了良好的思路，就可以继续假设可能出现的问题，以及如何修复或改进这些优化领域。

接下来，是时候构建和运行测试了。确保在合理的时间内运行它们(我默认为两周，以确保我每周都在考虑变化或异常)，当您有足够的数据时，分析结果以确定您的赢家。

在这个阶段花点时间分析输家也是很重要的，你能从这些变化中学到什么?

最后，您可能只有在为一个可靠的优化程序打下基础之后才会到达这个阶段，现在是时候研究个性化了。这并不一定需要一个奇特的工具集，而是可以从您拥有的关于用户的数据中得到。

ob欧宝娱乐app下载地址营销个性化可以简单到将正确的内容定位到正确的位置，也可以复杂到根据用户的个人行为进行定位。不过，不要一下子就陷入个性化的问题。一定要先花足够的时间做好基本的工作。

我是HubSpot的Alex Birkett

在较高的层面上，我试着遵循这个过程:

• 收集数据并确保分析实现是准确的。
• 分析数据并找到见解。
• 把见解变成假设。
• 根据影响和容易程度确定优先级，并最大限度地分配资源(特别是技术资源)。
• 运行一个测试(尽我所知和能力遵循统计最佳实践)。
• 分析结果，根据结果实施或不实施。
• 基于发现进行迭代，并重复。

简单地说，就是研究、测试、分析、重复。

虽然这个过程可以根据上下文的不同而偏离或改变(我测试的是业务关键型产品特性吗?一篇博文CTA?创新和降低风险之间的风险分布和平衡是什么?)，它非常适用于任何规模或类型的公司。

关键是这个过程是敏捷的，但它也收集了足够的数据定性的客户反馈还有定量分析，能够提出更好的测试想法和更好的优先级，这样你就可以为你的在线商店增加流量欧宝体育官网入口首页．

Ton Wesseling，在线对话

当我们想要优化客户旅程时，我们总是回答的第一个问题是:这个产品或服务在我们在在线对话创建的ROAR模型中处于什么位置?你是否仍处于风险阶段，即我们可以进行大量研究，但却无法通过A/B测试在线实验(每月转化率低于1000)验证我们的发现，或者你是否仍处于优化阶段?或者甚至更高?

• RIsk阶段:大量的研究，这将转化为从商业模式转向全新设计和价值主张的任何内容。
• O优化阶段:将优化价值主张和商业模式的大型实验。
• O优化阶段:验证用户行为假设的小实验，这将为更大的设计更改积累知识。
• 一个utomation:你仍然有实验能力(访问者)，这意味着你不需要充分的测试潜力来验证你的用户旅程。剩下的应该用来开发，现在就可以更快地增长(不要专注于长期学习)。这可以通过运行土匪/使用算法实现自动化。
• RE-think:你停止添加大量的研究，除非它是一个转向新事物的枢纽。

所以网页或应用A/B测试只是ROAR优化阶段的一件大事。

我们运行实验的方法是FACT & ACT模型:

我们所做的研究是基于5V模型:

我们收集了所有这些见解，提出了一个主要的研究支持的假设，这将导致基于桌面或移动a /B测试收集的数据优先排序的子假设。假设成立的概率越高，它的排名就越靠前。

一旦我们知道了我们的假设是对还是错，我们就可以开始结合经验教训，通过重新设计/调整客户旅程的更大部分来采取更大的步OB欧宝娱乐APP骤。然而，在某个时刻，所有获胜的实现都将导致局部最大值。然后你需要迈出更大的一步才能达到潜在的全局最大值。

当然，主要的学习成果将在整个公司传播，这将导致基于你的第一方有效见解的各种更广泛的优化和创新。

你是面向国际受众ob欧宝娱乐app下载地址营销吗?学习如何让这个过程变得简单pseudo-localization．

Julia starostonko, Shopify

实验的目的是验证对现有网页进行更改是否会对业务产生积极影响。

在开始之前，确定进行一个实验是OB欧宝娱乐APP否真的有必要是很重要的。考虑以下场景:有一个按钮的点击率极低。要降低这个按钮的性能几乎是不可能的。因此，验证对按钮所提议的更改的有效性(例如，运行一个实验)是没有必要的。

类似地，如果提议的按钮更改很小，那么可能不值得花费时间设置、执行和取消实验。在这种情况下，应该将更改推广到每个人，并且可以监视按钮的性能。

如果确定运行一个实验实际上是有益的，那么下一步就是定义应该改进的业务指标(例如，提高按钮的转化率)。然后我们确保适当的数据收集到位。

一旦完成了这一任务，我们便会在两组用户间随机进行分裂测试;一组显示的是按钮的现有版本，而另一组显示的是新版本。监测每个观众的转化率，一旦达到统计显著性，就确定实验结果。

Peep Laja, CXL研究所

A/B测试是更大的转换优化画面的一部分。在我看来，80%是关于研究，只有20%是关于测试。转换研究将帮助你决定从什么测试开始。

我的过程通常是这样的(一个简化的总结):

• 使用这样的框架进行转换研究ResearchXL识别网站上的问题。
• 选择一个高优先级的问题(影响很大一部分用户并且是一个严重的问题)，然后头脑风暴尽可能多地解决这个问题。用你的转换研究见解告诉你的构思过程。确定您想要在哪个设备上运行测试(您需要将移动A/B测试与桌面分离运行)。
• 确定您可以测试的变体的数量(基于您的流量/事务级别)，然后为解决方案选择最好的一到两个想法来针对控制进行测试。
• 根据改变的范围，你可能还需要包含一个设计人员来设计新元素。
• 让前端开发人员在测试工具中实现处理。建立必要的整合(谷歌Analytics)，设定适当的目标。
• 在测试中进行QA(失败的测试是迄今为止A/B测试的最大杀手)，确保它适用于所有浏览器/设备组合。
• 启动测试!
• 一旦测试完成，进行测试后分析。
• 根据结果，要么实施赢家，要么迭代治疗，要么去测试其他东西。

为您的业务优化A/B测试

你有了过程，你就有了力量!所以，走出去，使用最好的A/B测试软件，开始测试你的商店。OB欧宝娱乐APP在你意识到之前，这些洞见将为你银行增加更多的钱。

如果您想继续学习关于优化的知识，可以考虑参加免费课程，例如谷歌对Udacity的A/B测试．你可以了解更多关于网页和移动应用的A/B测试，以提高你的优化技能。

---

准备好创业了吗?OB欧宝娱乐APP开始你的14天免费试用shopify -不需要信用卡。

电子邮件地址 OB欧宝娱乐APP开始免费试用