AI資格 模擬試験

G検定 模擬試験 第4回 問63・ディープラーニングの要素技術(回帰結合層)

Seq2Seqの固定長ベクトル

エンコーダの最後の隠れ状態だけをデコーダに渡す初期のSeq2Seqの課題と、その解決のために導入された仕組みの組み合わせとして、最も適切なものを1つ選べ。

  1. A

    固定長ベクトルが大きすぎることが課題で、Dropoutで解決した

  2. B

    長い文章の情報を1つの固定長ベクトルに押し込む限界があり、Attentionで解決した

  3. C

    出力の語彙が少ないことが課題で、GANで解決した

  4. D

    学習データが多すぎることが課題で、データ拡張で解決した

正解と解説を見る

正解:B

固定長ベクトルでは長い入力の情報が失われやすい。Attentionで、デコーダが入力の必要な部分に注目できるようになった。

入力の系列がエンコーダで文脈ベクトルにまとめられ、デコーダが出力の系列を順に生成するSeq2Seqの流れ図。

Seq2Seq:エンコーダが入力列を1つのベクトルにまとめ、デコーダがそこから出力列を1つずつ生成する。

学習のポイント:この流れの先にTransformer(Attentionのみ)がある。

この問題を演習で解く →

問題一覧へ

このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。