一.什么是A/B测试

A/B 测试功能，通过将用户平均分成两组的方式，对聚合策略进行测试。当功能开启后，被分配的用户会固定在A组或B组，并采用其分组的聚合规则，直到测试停止。您可以根据A，B组的表现，和策略差异，对数据进行分析，已达到提升收益的目的。

二.如何使用A/B测试

1.创建AB测试

导航至【媒体聚合】的【聚合规则】页面，选择计划做A/B测试的聚合规则，点击操作列中的【设置A/B测试】。

2.配置AB测试基础信息

在A/B测试配置界面，原有的聚合规则名字，定向地区，ATT的设置，以及高级设置不能修改。确定所设置的聚合规则正确后，输入A/B测试的名字。

注：为了测试更具有说服力，AB组人员比例为 50% : 50% 。

3.配置B组广告层级

A组作为基础组，在A/B测试期间不能进行调整。B组的初始配置与A组一致，您可以根据期望测试的策略，对广告层级进行调整。

4.开启AB测试

当您完成A/B 测试配置，点击【保存修改】后，A/B测试便开启运行，直到您做出选择。

5.查看数据

在A/B测试期间，您可以通过聚合规则列表页面，或者聚合规则详情页面进行查看。

a.聚合规则列表

点击操作列中【设置A/B设置】中的下推三角，查看数据概览。也可以在当前页面做出对AB组的选择，结束AB测试。

b.聚合规则详情

进入A/B测试详情页面后，可以查看聚合规则的数据详情。可以通过总览卡片，了解数据概括信息。然后通过聚合规则的广告层级数据，了解策略数据的详情，分析表现的原因。

点击【查看更多信息】，你可以了解AB两组的广告性能表现，以及用户活跃数据。

6.停止AB测试

当您积累了足够的数据的时候，您可以通过对AB组的选择，停止A/B测试。您可以在聚合规则列表页，或者A/B测试详情页，进行选择。

三.最佳实践

您可以通过设置不同聚合策略的方式，了解用户和广告的互动趋势。在经过置信的测试周期后，选择获胜的策略，已达到提升广告收益和业务增长的目的。

1.广告位流量

为了使结果更具备说服力，建议您在测试期间的请求次数，尽量大于10000次。足够的数据积累，可以拉开AB两组数据的差异，使您的决策更加简单。

2.测试变量个数

每次测试仅测试一个策略点。这样可以帮助您更明确的知道，是什么原因导致的数据差异。

3.测试时间周期

每一次测试都需要足够的时间，才能产生有效的数据，这里建议每次测试至少1周左右。如果您希望策略得到足够的支持，建议2周或更久后再做决策。

4.测试也需要迭代

您可以依据A/B测试的结果，对聚合规则进行优化，但这并不是终点。可以依据不同的时间维度，广告平台的选择，广告层级的排序等，持续对聚合规则进行优化。