AI資格 模擬試験

G検定 模擬問題 第1回 問41・ディープラーニングの概要(最適化手法)

Adamの考え方

最適化手法 Adam の説明として、最も適切なものを1つ選べ。

  1. A

    過去の勾配の二乗をすべて足し合わせて学習率を調整するため、学習が進むにつれて学習率が小さくなり続ける。

  2. B

    勾配の移動平均と、勾配の二乗の移動平均の両方を使って、パラメータごとに更新の大きさを調整する。

  3. C

    ランダムに選んだデータで求めた勾配に、一定の学習率を掛けてパラメータを更新する。

  4. D

    2階微分(ヘッセ行列)を使って、最小値の位置を直接求める。

正解と解説を見る

正解:B

Adam はモーメンタムと RMSprop を組み合わせた最適化手法で、広く使われている。

細長い谷の損失の上で、SGD、モーメンタム、Adamが進む軌跡を比べた図。

最適化手法の比較:SGDは一定の学習率、モーメンタムは速度をためる、RMSprop・Adamは勾配の大きさに合わせて学習率を調整する。

学習のポイント:SGD → モーメンタム → AdaGrad → RMSprop → Adam の流れと、それぞれ何を改善したのかを押さえる。

この問題を演習で解く →

問題一覧へ

このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。