読み方のヒント

矢印ボタン(または ← → キー)でページを移動できます。

第1節 正解率だけでは分からないこと

1.2 当たり外れを4つに分ける

そこで、当たり外れを4つに分けて数えます。拓海は、モデルQを、苦情20件を含む200件の新しいテストデータで試しました。

本当は苦情本当はそれ以外
モデルが「苦情」と判断15件(見つけた)18件(誤検出)
モデルが「それ以外」と判断5件(見逃し)162件(正しく見送った)

4つのますの意味は次のとおりです。

  1. 見つけた:本当に苦情で、苦情と判断した
  2. 見逃し:本当は苦情なのに、それ以外と判断した
  3. 誤検出:本当はそれ以外なのに、苦情と判断した
  4. 正しく見送った:本当にそれ以外で、それ以外と判断した

正解率は、当たった(1と4)の合計を全体で割って、(15+162)÷200=88.5%です。この数だけでは、苦情20件のうち5件を見逃したことも、苦情でない声を18件も苦情としたことも分かりません。4つのますを見ると、どんな誤りが、何件起きているかが分かります。

解答
  1. 見つけた10件、見逃し20-10=10件、誤検出12-10=2件、正しく見送った180-2=178件
  2. (10+178)÷200=94%

Rの正解率(94%)はQ(88.5%)より高いですが、苦情の見逃しは10件で、Qの5件の2倍です。

3 / 20