说明

以假设检验为理论依据的A/B实验，适用于AB两组进行对比的场景，能够帮助大家从A策略和B策略之中选择一个更好的：在95%的置信水平下，假设新策略没用，我们做一次对比，犯第一类错误（即我的策略没用，但实验结论显示我的策略有用）的概率是5%。但是，如果实验是AABB实验，或者ABCD实验，或者ABCDEFG实验等实验版本多于2个的场景，那么我们将面临多重比较问题——我们犯错的概率将大大增加，不再是5%。此时打开多重比较修正的按钮即可自动为您修正多重比较，更多流量计算器的介绍请参见流量计算器。

说明

当前AI智能文案能力为灰度发布，如果您希望使用此功能，可联系火山引擎技术支持人员开启试用。