AI資格 模擬試験

G検定 模擬問題 第1回 問70・ディープラーニングの要素技術(Attention)

Self-Attention

Self-Attention の説明として、最も適切なものを1つ選べ。

  1. A

    エンコーダの出力とデコーダの状態の関係から、入力のどこに注目するかを決める。

  2. B

    未来の単語を参照しないように、注意の重みを隠す。

  3. C

    同じ系列の中の要素どうしの関係を計算し、各要素が系列内のどこに注目するかを決める。

  4. D

    単語の位置の情報をベクトルに加える。

正解と解説を見る

正解:C

Self-Attention は、同じ系列の中の要素どうしの関係を計算する仕組み。

文の各単語が他の単語に向ける注目の重みを色の濃さで示した行列。

Self-Attentionは、各単語が他の単語にどれだけ注目するかを重み(色の濃さ)で表す。

学習のポイント:Self-Attention と Source-Target Attention の違いを押さえる。

この問題を演習で解く →

問題一覧へ

このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。