統計推論
顯著水準(α)
顯著水準(significance level,記作 α)是你事先設定的門檻:p 值要小到什麼程度才推翻虛無假設——等價地說,就是你願意容忍的假警報率。慣用值是 0.05,意思是在其實沒有效果時,有 5% 的機會喊出「有效果!」。
說一個結果「統計上顯著」只是表示 p < α;那是一個是/否的決定,不是重要性的度量。0.05 這條線是一種社會慣例,不是自然律,而且追著它跑(一直做檢定直到越過它)會膨脹假陽性——所以事先登錄 α 並回報效果大小,比那個標籤重要得多。
顯著水準(significance level,記作 α)是你事先設定的門檻:p 值要小到什麼程度才推翻虛無假設——等價地說,就是你願意容忍的假警報率。慣用值是 0.05,意思是在其實沒有效果時,有 5% 的機會喊出「有效果!」。
說一個結果「統計上顯著」只是表示 p < α;那是一個是/否的決定,不是重要性的度量。0.05 這條線是一種社會慣例,不是自然律,而且追著它跑(一直做檢定直到越過它)會膨脹假陽性——所以事先登錄 α 並回報效果大小,比那個標籤重要得多。