女士品茶

在统计实验的设计中，女士品茶是罗纳德·爱尔默·费雪（Ronald Fisher）设计的随机实验，并在他的《实验设计》（The Design of Experiments，1935）一书中得到记录。^[1]该实验是费雪对虚无假设“从未被证明或建立，但可能在实验过程中被推翻”概念的原始阐述。^[1]

实验询问，当一杯茶备好时，受试者能否分辨出是否在冲茶之前添加了牛奶

罗纳德·费希尔（Ronald Fisher），1913年

受试者是费希尔的同事，也是一位藻类学家缪丽·布里斯托尔（英语：Muriel Bristol），她声称能够辨别冲茶时先放的是茶还是牛奶。费希尔提出随机给她8杯茶，其中4杯先放茶，4杯先放牛奶，然后便可知道她碰巧猜对特定杯数的可能性。

费希尔的描述只有不到10页，以其在术语、计算和实验设计方面的简洁和完整而著称。^[2]该示例大致基于费希尔生活中的一个事件。使用的测试是费希尔精确检验（英语：Fisher's exact test）。

实验内容

事先准备八杯奶茶，其中四杯先加牛奶再加入茶，另外四杯先加茶再加牛奶，共有两种冲泡方式。之后由受试者以随机顺序试喝八杯奶茶。过程中，受试者可以多次试喝同一杯茶以前后比较，并已经明确知晓两种冲泡方法的茶各有四杯。最终由受试者回答每杯茶分别属于何种冲泡方式。

这项检验的零假设是受试者并没有任何能力区别冲泡方法。在费雪的方法中并没有对立假说，^[1]不同于内曼-皮尔逊引理的方法。

统计检定量的形式很简单，是受试者正确地选出其中一项冲泡方式（例如先加牛奶再加茶）的次数。也就是说，受试者从八杯中选出四杯属于先加牛奶者，再事后比对该四杯中有几杯确实属于先加牛奶。在此例中要求受试者从八杯茶选出四杯茶，可利用组合数计算所有可能组合数：

${\displaystyle {\binom {8}{4}}={\frac {8!}{4!(8-4)!}}=70}$

并可区分为0至4杯正确，共五种情况：

各种正确次数对应的组合数。

正确次数	组合	组合数
0正确	(, xxxx)	${\displaystyle {\binom {4}{0}}\times {\binom {4}{4-0}}={\frac {4!}{4!\times 0!}}\times {\frac {4!}{0!\times 4!}}=1}$
1正确	(o, xxx)	${\displaystyle {\binom {4}{1}}\times {\binom {4}{4-1}}={\frac {4!}{3!\times 1!}}\times {\frac {4!}{1!\times 3!}}=16}$
2正确	(oo, xx)	${\displaystyle {\binom {4}{2}}\times {\binom {4}{4-2}}={\frac {4!}{2!\times 2!}}\times {\frac {4!}{2!\times 2!}}=36}$
3正确	(ooo, x)	${\displaystyle {\binom {4}{3}}\times {\binom {4}{4-3}}={\frac {4!}{1!\times 3!}}\times {\frac {4!}{3!\times 1!}}=16}$
4正确	(oooo, )	${\displaystyle {\binom {4}{4}}\times {\binom {4}{4-4}}={\frac {4!}{0!\times 4!}}\times {\frac {4!}{4!\times 0!}}=1}$
总和		70

上述正确次数所对应的组合次数有以下关系；若是0次正确，很明显地仅对应一种情况，即受试者完全错误地挑出其中四杯茶；若是1次正确，表示受试者仅正确挑出四杯中的一杯（共${\displaystyle {\binom {4}{1}}=4}$种情况），同时错误地挑出四杯中的三杯（共${\displaystyle {\binom {4}{3}}=4}$种情况）为独立事件，故共有4 × 4 = 16种情况；以此类推。这显示了正确次数的机率分布X属于超几何分布：

${\displaystyle X\sim \operatorname {Hypergeometric} (n=4,K=4,N=8)}$

若虚无假说（即受试者不能区别冲泡方式）为真，在型一错误率上限5%的设定下，此例应拒绝虚无假设（受试者无法区别冲泡方式）的拒绝域仅包括了受试者达成“4正确”结果。这是因为在所有70种情况下，发生“4正确”结果的机率为1/70（约1.429%），但发生“4正确”或“3正确”的机率则有(16 + 1) / 70≈24.286%，超过先前设定的型一错误率上限。换句话说，唯有当受试者完全正确地挑出属于先加牛奶再加茶的4杯茶，费雪才会有信心认为受试者有区别冲泡方式的能力（因为在实际上受试者不能区别冲泡方式时，这个结论错误的几率只有1.429%），尽管量化这一能力不在他考虑范围之内。

费雪在书中亦讨论了增加测试杯数与重复测试对检验的益处。例如，增加茶杯数至12杯（二种冲泡方式各6杯），或是原本8杯的实验重复进行二次，则可以提高检验的检定力而更敏感地侦测出能够区别冲泡方式的受试者。^[1]

在戴维·萨尔斯伯格（英语：David Salsburg）的的著作《女士品茶：统计学如何变革了科学和生活（英语：The Lady Tasting Tea）》中，费雪的同事费尔菲尔德·史密斯（H. Fairfield Smith）透露了故事的结尾：这位叫缪丽的女士确实地猜中了全部8杯茶的冲泡方式^[3][4]，成功地证明了自己。

反响

德巴布拉塔·巴苏（英语：Deb Basu）认为“女士品茶”这一知名案例是实验数据随机化分析的两大支柱之一。^[5][6]

参见

• 超几何分布
• 排列检验
• 随机分配（英语：Random assignment）
• 重抽样