不正検知モデルの評価指標
カード会社C社は、不正利用を見つける分類モデルを、検証用データ1,000件で評価した。結果は表のとおりである。担当者は「実際の不正をどれだけ見逃さずに検出できたか」を最も重視している。この観点で見るべき指標とその値として、最も適切なものを1つ選べ。
- A
正解率で、(40+890)÷1,000=93%
- B
再現率で、40 ÷(40+10)=80%
- C
適合率で、40 ÷(40+60)=40%
- D
再現率で、40 ÷(40+60)=40%
正解と解説を見る
正解:B
再現率=TP÷(TP+FN)で、見逃しの少なさを表す。適合率=TP÷(TP+FP)で、誤検知の少なさを表す。データに偏りがあると正解率は高く出やすい。
| 予測:不正 | 予測:正常 | |
|---|---|---|
| 実際:不正 | 40 | 10 |
| 実際:正常 | 60 | 890 |
- A
誤り。正解率は全体の当たりの割合。正常のデータが大部分を占めるため高く出やすく、見逃しの多さはわからない。
- B
正しい。再現率は、実際に不正だった50件のうち、正しく不正と予測できた割合。見逃し(10件)の少なさを表す。
- C
誤り。適合率は、不正と予測した100件のうち、本当に不正だった割合。見逃しではなく、誤検知の少なさを見る指標。
- D
誤り。指標の名前は合っているが、分母に予測の列(予測:不正の合計)を使っている。これは適合率の計算。
このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。