帰無仮説、アルファ、および有意性の概念を説明するために、私が生徒によく使用する例を挙げましょう。
ポーカーのラウンドをプレイしているとしましょう。私はカードを配り、私たちは賭けをします。ねえ、ラッキー!私は最初のハンドでフラッシュしました。あなたはあなたの運を呪い、私たちは再び対処します。私は別のフラッシュを得て勝ちます。次のラウンドで、再び 4 つのエースを獲得しました。この時点で、あなたはテーブルを蹴り、私を詐欺師と呼んでいます。
これを確率の観点から説明しましょう: 最初のハンドでフラッシュが発生する可能性があります: 誰でもラッキーになる可能性があります。2 回連続で運が良すぎる確率は低くなります。ついに3回連続で本当にラッキーになる確率が出てきました。しかし、3 番目のショットでは、「あなたが SO LUCKY を得る確率は小さすぎます。あなたがただの幸運だという考えは拒否します。私はあなたを詐欺師と呼んでいます」と述べています。つまり、帰無仮説 (何も起こっていないという仮説!) を棄却しました。
帰無仮説は、すべての場合において、「私たちが観察していることは、ランダム性の影響です」です。この例では、帰無仮説は次のように述べています。
p 値は、イベントがランダムに発生する場合の、イベントに関連付けられた値です。デッキを適切にシャッフルした後、ポーカーで良いハンドを得る確率を計算できます。または、たとえば、公正なコインを 20 回投げた場合、20 回連続で表が出る確率は 1/(2^20) = 0.000000953 (非常に小さい) です。これは、20 回トスして 20 回連続で表が出た場合の p 値です。
「統計的に有意」とは、「この出来事は奇妙に思える。偶然に起こる可能性は非常に小さい。したがって、帰無仮説を棄却する」という意味です。
アルファ、または重要な p 値は、「テーブルをキック」して帰無仮説を棄却する魔法のポイントです。実験的なアプリケーションでは、これを前もって定義します (例: alpha=0.05)。このポーカーの例では、ラッキー ハンドが 3 回の場合、または 12 回中 10 回のハンドの後、チーターと呼ぶことができます。確率の閾値です。