A/B 测试功能升级！多重 Buff 让有效策略显而易见

关于 A/B 测试测什么，怎么测，我们在之前的文章中已经进行了详细说明，感兴趣的开发者可以点击【A/B 测试到底测什么？怎么测？】进行回顾。经过不断的打磨和使用反馈，TradPlus VisiM 团队对 A/B 测试进行了全新升级，让 A/B 测试的颗粒度和有效性都得到更深度挖掘！

更细颗粒度的切分

让测试范围更加灵活

全新升级的 A/B 测试功能除了支持广告位级别的测试之外，还进一步支持了针对中介组级别的测试。这就意味着开发者可以将测试范围进一步缩小，灵活针对不同中介组开展测试。

例如，开发者希望针对插屏广告位下面的美国地区进行 A/B 测试，就可以单独针对美国的中介组进行分组测试，测试内容可以包含并行请求、广告平台和瀑布流层数等维度。

多重维度置信度评估

让测试结果更加可靠

实验置信度评估是 A/B 测试全新上线的另一个重要功能，目的是辅助开发者更好地判断实验结果的可靠性。置信度评估在关键结果指标的基础上添加了置信水平评估、样本量评估和实验时间评估。这些指标会帮助开发者多维度判断本轮测试结果是否可信。

例如，识别关键结果指标中是否存在极限值影响测试结果？DAU 的样本量级是否足够大？测试时长是否足够长？若三个维度均无问题，则实验结果可信。

反转验证

进一步确认测试结果

为了避免随机样本的差异性，全新升级的 A/B 测试还支持开发者进行反转实验，即将实验组与对照组的用户进行调换再次进行测试，这样可以减少由用户特征、地域、时间等带来的干扰因素。如果反转实验之后的结果与之前相同或接近，则可以进一步验证原测试结果的可靠性。

历史数据一键查询

全新的 A/B 测试面板还支持开发者进行历史测试记录查询，包括测试配置和测试结果。一方面可以查看测试过程的变量调整对测试结果的影响，另一方面，也方便开发者对历史测试进行总结，为新的测试提供指导。

TradPlus VisiM 的产品团队在不断精进产品功能的提升，在 2025 年里也会有更多的升级功能上线，大家敬请期待！

现在就开启 VisiM 的使用体验！欢迎联系我们进行咨询。

商务联系：contact@tradplus.com

MKT：marketing@tradplus.com