實驗設計與 A/B 測試
隨機對照實驗
一種研究方法:把使用者(或任何受測對象)純粹靠運氣分成幾組,只對某些組做出某項改變、其他組維持不變,再比較結果。因為分組是隨機的,各組在一開始平均而言是相似的,所以後來出現的差異就可以歸功於你做的改變,而不是「剛好分到哪一組的是哪些人」。
這是回答「我的改變到底有沒有造成這個結果?」的黃金標準,因為隨機分派(randomization)會同時平衡你有量到的因素,以及你根本沒想到要量的因素。沒有它你只能看到相關(correlation),有了它你才能宣稱因果(causation)。代價是你需要足夠的人數,以及一個乾淨、沒有被汙染的分組,這套魔法才會奏效。
醫院隨機讓一半的新進病人服用新藥、另一半服用舊藥,再比較康復率。
又稱