仮説検定とは？

仮説検定とは、「差がない」とする帰無仮説を立て、観測されたデータがその仮定のもとでどれほど起こりにくいかを調べ、あらかじめ定めた有意水準（5%など）を下回れば棄却する手続き。改善施策の効果を偶然のばらつきと区別して判断するための枠組みで、A/Bテストの判定に使われる。

かせつけんてい

ITパスポートの頻出用語／ストラテジ系／別名：仮説検定と有意水準、有意水準、帰無仮説、第1種の誤り、第2種の誤り、仮説検定（帰無仮説・p値）、帰無仮説・p値、p値

仮説検定の意味

「差がない」とする帰無仮説を立て、観測されたデータがその仮定のもとでどれほど起こりにくいかを調べ、あらかじめ定めた有意水準（5%など）を下回れば棄却する手続き。改善施策の効果を偶然のばらつきと区別して判断するための枠組みで、A/Bテストの判定に使われる。

画面改修前後で申込率が2.0%から2.3%に上がったとき、この差が偶然の範囲かを検定する。有意水準5%で棄却できれば施策の効果ありと判断し、できなければ標本を増やすか、効果がないものとして次の案へ移る。

棄却できないことは「差がないと証明された」ことではなく、判断を保留する状態にすぎない。また第一種の誤り（本当は差がないのに差ありとする）を減らそうと有意水準を下げると、第二種の誤りが増えるトレードオフがある。

最終更新：2026-08-25／解説は資格暗記が独自に作成しています。過去問の出典は各問題に記載のとおりです。