AB实验，有哪些重要却不为人知的知识？｜课代表数据大师课5

本播客由一位在亚马逊和 Meta 有经验，目前在 Statsig 担任 Evangelist 的专家主讲，系统地讲解了 A/B 实验的顶级认知。内容包括为什么要做实验以及实验的真正价值在于发现 “惊喜”，如何围绕实验目标去设置实验体系，A/B 实验中最重要的统计知识，以及如何纠正课本上关于假设检验的错误。此外，还介绍了 CUPED、贝叶斯和频率学派的区别，以及为什么要做 Sequential Testing。专家强调了 feature gate 和实验结合的重要性，以及如何通过实验文化赋能工程师。最后，讨论了如何通过数据质量和统计方法（如 CUPED 和 Sequential Testing）来提高实验的决策质量，并减少错误发现率。