【美团】可信实验白皮书系列02:AB实验基础
可信实验白皮书系列02:AB实验基础
2025年05月23日 作者: 履约数据&外卖数据 文章链接 2807字 6分钟阅读
2.1 实验基础原理概述
AB实验原理源于统计学中经典的Rubin潜在结果模型(也称反事实因果推断框架)。考虑最简单的情况,当我们想要比较两个策略的差异以获得更优策略时。如图2-1所示,最理想的方案是面向同一拨用户或者全部用户,假设存在两个完全相同的平行时空,平行时空一中所有用户体验实验策略B,类似的平行时空二中所有用户体验对照策略A,那么直接对比2个平行空间用户行为指标表现,则可决定哪个策略胜出以及观测真实的平均实验效应。
然而,现实世界中不存在两个平行时...