AI資格 模擬試験

G検定 模擬問題 第3回 問66・ディープラーニングの要素技術(Attention)

Source-Target Attention

機械翻訳のエンコーダ・デコーダのモデルで、デコーダが訳語を生成するときに、入力の文のどの単語に注目するかを決める Attention を何というか。最も適切なものを1つ選べ。

  1. A

    Self-Attention

  2. B

    マスク

  3. C

    位置エンコーディング

  4. D

    Source-Target Attention(エンコーダ・デコーダ Attention)

正解と解説を見る

正解:D

Source-Target Attention は、デコーダが入力の文のどこに注目するかを決める Attention。

デコーダからQueryが出て、エンコーダの出力のKeyとValueを参照し、注目の重みで足し合わせる流れ図。

Source-Target Attention(交差注意):デコーダの現在の状態をQuery、エンコーダの出力をKey・Valueにして、入力のどこに注目するかを決める。

学習のポイント:Self-Attention との違い(クエリとキー・バリューの出どころ)を押さえる。

この問題を演習で解く →

問題一覧へ

このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。