分類別の誤り率の判断
G社は、顧客向けAIチャットボットの回答200件を抜き取って点検し、表の結果を得た。この結果に基づく判断として、最も適切なものを1つ選べ。
- A
分類ごとの誤り率を平均すると15%になるため、全体の誤り率は15%として社内に報告する。
- B
誤りの件数が9件と最も多い手続きの分類が最も誤りやすいため、ここを最優先で人の確認の対象にする。
- C
誤りは合計20件あるため全体の誤り率は20%であり、すべての分類で自動回答を停止する。
- D
全体の誤り率は10%だが、契約・法務は25%と高いため、この分類は人が確認してから回答する運用にする。
正解と解説を見る
正解:D
評価は全体の数値だけでなく、分類別にも見る。誤りやすく影響も大きい分類に、人が確認する工程を入れる。
| 質問の分類 | 点検件数 | 誤りの件数 |
|---|---|---|
| 料金 | 120 | 6 |
| 手続き | 60 | 9 |
| 契約・法務 | 20 | 5 |
| 合計 | 200 | 20 |
- A
誤り。点検件数が分類ごとに違うので、率を単純に平均してはいけない。全体は20÷200=10%。
- B
誤り。件数と率を取り違えている。手続きの誤り率は15%で、契約・法務の25%より低い。
- C
誤り。誤りの件数を、そのまま率と取り違えている。正しくは10%。
- D
正しい。全体は20÷200=10%。分類別では、料金5%、手続き15%、契約・法務25%で、契約・法務が最も高い。
このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。