閾値を下げたときの変化
I社は、カード取引1,000件(うち不正100件)で不正検知モデルを評価した。不正と判定する閾値を0.5から0.3に下げたときの結果は下の表のとおりである。適合率 = TP ÷ (TP + FP)、再現率 = TP ÷ (TP + FN)、正解率 = (TP + TN) ÷ 全件数とする。正しい記述を2つ選べ。
- A
閾値0.3では、再現率が0.60から0.85に上がる
- B
閾値0.3では、適合率が0.75から0.50に下がる
- C
閾値0.3では、正解率が0.94から0.96に上がる
- D
閾値0.5の再現率は0.75で、閾値0.3より高い
正解と解説を見る
正解:A・B
閾値を下げると陽性と判定する件数が増え、一般に再現率は上がり、適合率は下がる。今回は再現率が0.60から0.85に上がり、適合率は0.75から0.50に、正解率は0.94から0.90に下がった。
| 閾値 | TP(不正を不正と判定) | FP(正常を不正と判定) | FN(不正を正常と判定) | TN(正常を正常と判定) |
|---|---|---|---|---|
| 0.5 | 60 | 20 | 40 | 880 |
| 0.3 | 85 | 85 | 15 | 815 |
- A
正しい。再現率は閾値0.5で 60 ÷ 100 = 0.60、閾値0.3で 85 ÷ 100 = 0.85。閾値を下げると、見逃していた不正をより多く拾える。
- B
正しい。適合率は閾値0.5で 60 ÷ 80 = 0.75、閾値0.3で 85 ÷ 170 = 0.50。不正と判定する件数が増え、誤検知の割合も増える。
- C
誤り。正解率は閾値0.5で (60 + 880) ÷ 1,000 = 0.94、閾値0.3で (85 + 815) ÷ 1,000 = 0.90 となり、下がっている。
- D
誤り。0.75 は閾値0.5の適合率(60 ÷ 80)。再現率は 60 ÷ 100 = 0.60 で、閾値0.3の 0.85 より低い。
このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。