功效理解

统计功效是在真实存在差异时检测到的概率。低功效意味着很多改进被忽略。80%功效是常见标准。

样本量优化

样本量直接影响功效。根据预期效应和指标方差计算所需样本。确保实验设计满足功效要求。

方差减少

CUPED利用历史数据减少指标方差。Stratification通过分层减少组内方差。这些技术显著提高功效。

协变量调整

利用与目标指标相关的协变量进行调整，提高检测敏感度。选择合适协变量是关键。