显著性水平

烟雾报警器面临一个抉择：要么灵敏到一缕轻烟就尖叫，要么迟钝到真起火也睡得过去。你把它的触发点设在哪里，是关于「你愿意多频繁地被误报惊扰」的一个有意的决定。显著性水平之于统计检验，就是同一类旋钮。

显著性水平，记作 α，是你愿意接受的「误报」概率——即在零假设其实为真时却否定了它的概率。它要事先选定，最常见的是 0.05，意思是你接受有 5% 的机会，把其实只是噪声的东西宣布成差异。越过这道门槛的结果，就被称为「统计显著」。

它之所以重要，是因为它逼你在偷看答案之前就先定下证据标准，从而让检验保持诚实。但有双重提醒：把 α 调小以避免误报，会让你更容易漏掉真实的效应；而且「统计显著」不等于「实际重要」——一个差异可以越过门槛，却小到在现实世界里根本无关紧要。