本播客由一位在亚马逊和 Meta 有经验,目前在 Statsig 担任 Evangelist 的专家主讲,系统地讲解了 A/B 实验的顶级认知。内容包括为什么要做实验以及实验的真正价值在于发现 “惊喜”,如何围绕实验目标去设置实验体系,A/B 实验中最重要的统计知识,以及如何纠正课本上关于假设检验的错误。此外,还介绍了 CUPED、贝叶斯和频率学派的区别,以及为什么要做 Sequential Testing。专家强调了 feature gate 和实验结合的重要性,以及如何通过实验文化赋能工程师。最后,讨论了如何通过数据质量和统计方法(如 CUPED 和 Sequential Testing)来提高实验的决策质量,并减少错误发现率。
Sign in to continue reading, translating and more.
Continue