読み方のヒント

矢印ボタン(または ← → キー)でページを移動できます。

第2節 見逃しと誤検出(どちらを減らしたいか)

2.2 どちらを重く見るか

「AIの仕組み徹底学習 機械学習の基本の手法」で見たように、分類のモデルは苦情らしさを出し、しきい値で苦情かどうかを決めます。モデルQのしきい値を変えると、2つの割合は次のように変わりました。

しきい値苦情と判断した件数見つけた件数再現率適合率
30%63件19件95%約30%
50%33件15件75%約45%
70%14件10件50%約71%

しきい値を下げると再現率が上がり、適合率が下がります。見逃しは減りますが、人が読む件数が増えます。しきい値を上げると、その逆になります。

どちらを重く見るかは、誤りの重さで決めます。

仕事重い誤り重く見る割合
苦情の見つけ出し見逃し(お客さんの信用を失う)再現率
迷惑メールの振り分け誤検出(大事な注文のメールが迷惑メールに入る)適合率
偽の注文の見つけ出し見逃し(商品をだまし取られる)再現率
解答
  1. 50%(33件)と70%(14件)
  2. 50%。再現率が75%で、70%のしきい値(50%)より見逃しが少ない

読める件数という条件の中で、重く見る再現率が最も高いしきい値を選んでいます。条件が「60件まで読める」に変われば、答えも変わります。

7 / 20