紅茶にミルクを入れるとき、ミルクを先に注ぐか紅茶を先に注ぐかで味は変わるのでしょうか。ほとんどの人は違いはないと思うでしょうが、1919年、イギリスのある研究所で一人の科学者がはっきり違うと言いました。この小さな言い争いが、統計学の歴史で最も有名な実験「紅茶を味わう婦人(Lady Tasting Tea)」につながりました。
紅茶を味わう婦人とは、簡単に言えば「偶然だけでは起こりにくい結果かどうかを、前もって組み立てた実験で確かめる方法」を意味します。統計学者ロナルド・フィッシャー(Ronald Fisher)が1935年の著書『実験計画法(The Design of Experiments)』で紹介したもので、今日では仮説検定と無作為化実験の出発点とされています。
この記事では、実験の始まりとなった一杯の紅茶、8杯の実験の設計、70通りの組み合わせと1.4%という確率、そしてこの実験が今日の研究に残したものまで、順に見ていきます。
紅茶8杯で証明する方法
1. ロザムステッドの一杯の紅茶

物語の舞台はイギリスのロザムステッド農事試験場(Rothamsted Experimental Station)です。1919年、そこで働いていたフィッシャーが同僚に紅茶を一杯差し出したことから、すべてが始まりました。
(1) ミルクを先に入れてください
紅茶を受け取ったのは、藻類を研究していた科学者ミュリエル・ブリストル(Muriel Bristol)でした。ブリストルはミルクを先に注いだ紅茶のほうが好きだと言って断り、フィッシャーは注ぐ順番で味が変わるはずがないと一笑に付しました。
(2) では試してみましょう
そばで会話を聞いていた同僚ウィリアム・ローチ(William Roach)が「試してみよう」と言い出しました。フィッシャーとローチは、ブリストルが本当に味を見分けられるのかを確かめる方法を一緒に考えました。ローチは数年後の1923年にブリストルと結婚しています。
(3) 言い争いを問いに変える
この逸話の核心は、どちらが正しいかを言葉で争う代わりに、結果を見て判断できる問いに変えた点にあります。「偶然当たったのか、本当に見分けているのか」を見極める基準を実験の前に決めておくことが、この話の出発点です。
2. 8杯の実験の設計

フィッシャーが『実験計画法』にまとめた実験はシンプルです。8杯のうち4杯はミルクを先に、4杯は紅茶を先に注ぎ、順番を無作為に混ぜて出します。味わう人はこの方法を前もって知っていて、カップ同士を比べながら、ミルクを先に注いだ4杯を選び出します。

- 帰無仮説(Null Hypothesis):味わう人に見分ける能力はないという仮定で、実験はこの仮定を捨てるだけの証拠が出るかどうかを確かめます。
- 無作為化(Randomization):カップの順番を偶然に任せ、カップの位置や出し方の癖など、ほかの手がかりが結果に混じらないようにすることです。
- 有意水準(Significance Level):偶然とは考えにくいと判断する確率の基準で、一般に5%が使われます。
- 超幾何分布(Hypergeometric Distribution):8杯から4杯を選ぶときに当たったカップの数が従う確率分布で、この計算を使う方法がフィッシャーの正確確率検定(Fisher’s Exact Test)です。
重要なのは、正解する確率を実験前に計算できるように設計した点です。順番を無作為に混ぜたからこそ、「見分ける能力がないなら、どんな結果がどれくらいの頻度で出るか」を正確に数えられます。
3. 70通りの組み合わせと1.4%

見分ける能力のない人が適当に4杯を選ぶと考えてみましょう。8杯から4杯を選ぶ方法は全部で70通りあり、そのうち正解はただ一つです。
(1) すべて当たる確率
偶然4杯すべてが当たる確率は1/70、約1.4%です。よく使われる5%の基準より小さいので、この結果が出れば「ただ運がよかった」という説明を捨てることができます。
(2) 3杯だけ当たったら
4杯のうちちょうど3杯が当たる方法は16通りで確率は約22.9%、3杯以上当たる確率は17/70、約24.3%です。偶然でも4回に1回ほど起こる結果なので、証拠とするのは難しいでしょう。そこでフィッシャーは、8杯すべてを正しく分けたときだけ帰無仮説を棄却することにしました。
(3) 実際の結果
統計学者デイヴィッド・サルツブルグ(David Salsburg)は2002年の著書『The Lady Tasting Tea』で、同僚のH. Fairfield Smithから聞いた話として、ブリストルが8杯すべてを当てたと伝えています。ローチも、彼女は自分の主張を証明して余りあるほど当てたと振り返っています。
4. 今日の実験に残したもの

紅茶の実験は小さな逸話でしたが、その中の考え方は、新薬の臨床試験からウェブサイトのA/Bテストまで、今日の数多くの実験の骨組みになりました。
(1) 無作為割り付け
何をどちらに置くかを偶然に任せると、研究者の期待や気づかなかった違いが結果に入り込む余地が小さくなります。フィッシャーはロザムステッドの農業試験でも同じ原則を強調しました。
(2) 証明ではなく反証
フィッシャーは、帰無仮説は実験によって「証明も確立もされることはなく、反証されうるだけだ」と書きました。8杯すべてを当てられなかったからといって、見分ける能力がないと確定はできないということです。
(3) 何杯あれば十分か
カップが8杯しかないと、4杯すべてを当てなければ証拠になりません。フィッシャーも試行を増やし実験を繰り返すことの利点を論じており、今日の研究でサンプルサイズを前もって決めるのも同じ問題意識から来ています。仮説の立て方は帰無仮説と対立仮説の記事で詳しく読めます。
「言い争う前に、偶然ならどんな結果が出るかをまず数えてみる」という単純な考え、それが紅茶を味わう婦人を理解する第一歩です。