BLEU
機械翻訳の訳文が、人が作った参照訳とどれだけ一致しているかを、単語の並び(n-gram)の一致の割合で評価する指標として、最も適切なものを1つ選べ。
- A
IoU
- B
AUC
- C
BLEU
- D
決定係数
正解と解説を見る
正解:C
BLEU は、参照訳との n-gram の一致で機械翻訳を評価する指標。
| 指標 | 何を測るか | 良いのは |
|---|---|---|
| BLEU | 翻訳文と参照訳のn-gramの一致(適合率ベース) | 大きいほど |
| ROUGE | 要約と参照要約の重なり(再現率ベース) | 大きいほど |
| 単語誤り率(WER) | (置換+削除+挿入) ÷ 参照の単語数(例:(1+1+0)÷5 = 0.4) | 小さいほど |
| パープレキシティ | 次の語の予測のしにくさ(交差エントロピーの指数) | 小さいほど |
- A
誤り。物体検出で、枠の重なりを評価する指標。
- B
誤り。2値分類の評価指標。
- C
正しい。機械翻訳の自動評価で広く使われてきた。意味が同じでも言い方が違うと点が低くなるという限界もある。
- D
誤り。回帰モデルの評価指標。
このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。