menu

分散分析⑤ t検定を繰り返してはいけない?

3群以上の場合は分散分析とお伝えし、多重比較などの話をすると、「t検定を繰り返したら良いのではないですか?」というご質問をいただきます。
結論から申し上げますと、ダメです。

例えば3群でt検定を繰り返すと、5%水準で有意水準を設定していた場合、(1-0.05)×(1-0.05)×(1-0.05)となり、約0.86となってしまいます。

これは14%水準になってしまい、本来有意差が出ないデータでも有意差があると判断してしまいがちになります。すなわち第1種の誤りのリスクが増えるのです。

ですので、「t検定を繰り返すと、第1種の誤りのリスクが増える」と覚えておきましょう!