AI資格 模擬試験

G検定 模擬問題 第2回 問84・ディープラーニングの応用例(自然言語処理)

BLEU

機械翻訳の訳文が、人が作った参照訳とどれだけ一致しているかを、単語の並び(n-gram)の一致の割合で評価する指標として、最も適切なものを1つ選べ。

  1. A

    IoU

  2. B

    AUC

  3. C

    BLEU

  4. D

    決定係数

正解と解説を見る

正解:C

BLEU は、参照訳との n-gram の一致で機械翻訳を評価する指標。

言語の評価指標:BLEUは翻訳のn-gram一致、ROUGEは要約の再現、WERは音声認識の誤り率、パープレキシティは言語モデルの予測の困りやすさ。
指標何を測るか良いのは
BLEU翻訳文と参照訳のn-gramの一致(適合率ベース)大きいほど
ROUGE要約と参照要約の重なり(再現率ベース)大きいほど
単語誤り率(WER)(置換+削除+挿入) ÷ 参照の単語数(例:(1+1+0)÷5 = 0.4)小さいほど
パープレキシティ次の語の予測のしにくさ(交差エントロピーの指数)小さいほど

学習のポイント:タスクごとの評価指標(分類、物体検出、翻訳)を整理する。

この問題を演習で解く →

問題一覧へ

このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。