拆分对比测试最佳实践

确定要测试的假设内容

在设置拆分对比测试之前，请确定要测试的内容，以及测试内容可以如何帮助你制定广告策略。考虑假设内容有助于你专注于要测试的变量，并确保你设计和运行良好的拆分对比测试。

设置变量差异较大的测试组

我们建议你在设置变量时，尝试确保两个测试组采用有显著差异的设置。差异应较为显著，以确保两个广告组不会产生相似的结果，这样，系统才能确定胜出的广告组。

设置合适的测试预算

拆分对比测试的预算应能产生足够的成效，让你有信心确定效果最佳的策略。你在创建拆分对比测试时，系统将根据你设置的预算展示“预估实验 Power”。确保你设置的预算能表明测试拥有足够的“预估实验 Power”。

分配足够的测试时间

为了获得最可靠的测试结果，我们建议测试时间不少于 7 天。拆分对比测试最长可运行 30 天。如果测试时间不到 7 天，则可能不足以确定优胜组，而长时间的测试可能会导致预算不足。

设置规模足够大的受众

建议你扩大受众群体，避免在运行拆分对比测试时样本量不足。

确保预估统计功效值较高

统计功效值是在你的广告组中发现潜在差异的概率，可帮助确定你找到胜出结果的可能性。我们建议你的预算为你提供的统计功效值至少为 80%。

测试中避免更改

在开始运行拆分对比测试后对广告组进行更改，可能会影响测试结果，或导致广告组再次接受审核。建议在开始运行测试后不要更改拆分对比测试设置。