要件に合う閾値の選択
カード会社のI社は、不正取引を検知する分類モデルの判定閾値を決める。業務要件は「不正取引の見逃しを不正全体の5%以下に抑え、そのうえで正常取引の誤検知をできるだけ少なくする」ことである。検証データで閾値ごとに真陽性率と偽陽性率を求め、ROC曲線上の点として次の表にまとめた。採用すべき閾値を1つ選べ。
- A
0.6
- B
0.2
- C
0.4
- D
0.8
正解と解説を見る
正解:C
見逃し率は 1 − 真陽性率 なので、「見逃し5%以下」は真陽性率0.95以上を意味する。この制約を満たす閾値のうち、偽陽性率が最も低いものを選ぶ。閾値を下げるほど、真陽性率と偽陽性率はどちらも上がる。
| 閾値 | 真陽性率(再現率) | 偽陽性率 |
|---|---|---|
| 0.8 | 0.70 | 0.05 |
| 0.6 | 0.85 | 0.10 |
| 0.4 | 0.95 | 0.20 |
| 0.2 | 0.98 | 0.40 |
- A
誤り。真陽性率が0.85なので、不正の15%を見逃してしまい、見逃し5%以下の条件を満たさない。
- B
誤り。見逃しの条件は満たすが、偽陽性率が0.40と高い。「誤検知をできるだけ少なく」という条件に反する。
- C
正しい。見逃しを5%以下にするには、真陽性率が0.95以上必要。条件を満たすのは0.4と0.2で、そのうち偽陽性率が低い(0.20)0.4を選ぶ。
- D
誤り。偽陽性率の0.05を「5%以下」と取り違えている。真陽性率は0.70で、不正の30%を見逃す。
このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。