AI資格 模擬試験

G検定 模擬問題 第2回 問89・ディープラーニングの応用例(深層強化学習)

Double DQN

DQN では行動の価値(Q値)を実際より高く見積もりやすいという問題があった。行動を選ぶネットワークと価値を評価するネットワークを分けて、この問題を改善した手法として最も適切なものを1つ選べ。

  1. A

    AlphaGo

  2. B

    Double DQN

  3. C

    k-means法

  4. D

    CycleGAN

正解と解説を見る

正解:B

Double DQN は、行動の選択と評価を分けて、Q値の過大評価を抑えた。

Double DQN:DQNは行動の選択と価値の評価に同じネットワークを使い価値を過大評価しやすい。Double DQNは選択と評価を別のネットワークで行う。
手法行動の選択価値の評価傾向
DQNターゲットネットワークの最大値を取る(選択と評価が同じ)ターゲットネットワーク価値を過大評価しやすい
Double DQNオンラインネットワークターゲットネットワーク過大評価を抑える

学習のポイント:DQN の改良(Double DQN、Dueling Network、Rainbow)を押さえる。

この問題を演習で解く →

問題一覧へ

このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。