IT用語入門：有意水準【偶然とみなす確率の基準】

有意水準とは

有意水準とは、統計的仮説検定で、偶然のばらつきとみなすか、差があると判断するかを分ける境界となる確率です。検定を始める前に決めておくルールで、一般には5％や1％が用いられます。

まず「差はない」という前提（帰無仮説）を立て、観測データからP値を計算します。P値が有意水準以下なら、偶然だけでは起こりにくいと考え、帰無仮説を棄却し、対立仮説を支持します。P値が有意水準を上回る場合は、帰無仮説を誤りと断定できず、結論を保留します。ここで重要なのは、帰無仮説が正しいと“採択”するのではなく、否定できる根拠が足りないと解釈する点です。

有意水準は、誤って帰無仮説を棄却してしまう確率（第1種の誤り）をどこまで許容するかを示します。5％なら、その誤りのリスクを20分の1までに抑える方針ということです。影響が大きい意思決定では、より厳しい1％を採用することもあります。

まとめると、有意水準は検定の判断基準を事前に定め、偶然に左右された早合点を避け、再現性のある結論に導くための土台です。値の選び方は目的やコスト、リスク許容度に応じて決めます。