AI資格 模擬試験

生成AIパスポート 模擬試験 第2回 問52・第5章 生成AIの実践と活用事例(プロンプトエンジニアリング)

出力例と形式の安定

B社のサポート部門では、問い合わせ100件を生成AIで「料金」「不具合」「解約」「その他」の4種類に分類し、ラベル1語だけを出力させている。プロンプトを表のように3回改訂し、指定した形式から外れた出力の件数を数えた。この結果の解釈として、最も適切なものを1つ選べ。

  1. A

    v2では例を示したことで形式がそろい、12件減った。v3では自由な説明も求めたため形式が崩れやすくなったと考えられ、理由は別の項目として出力させるなどの工夫が必要である。

  2. B

    v3の悪化は、生成のランダムさが足りずに出力が単調になったためであり、温度を上げて出力に変化を持たせれば形式から外れる件数は減る。

  3. C

    v3で増えたのは、v2の例でモデルが追加学習した内容が、新しい指示で上書きされて失われたためであり、例を再び学習させれば元に戻る。

  4. D

    v1からv2で例を3組足して12件減ったので、例を6組に増やせばさらに12件減り、v3の指示を加えても形式から外れる件数は0件になる。

正解と解説を見る

正解:A

出力例(Few-shot)は形式を安定させる。一方で、形式の指定とぶつかる指示を加えると、出力が崩れることがある。説明が必要なら、出力の項目を分けて指定する。

版プロンプトの内容形式から外れた件数(100件中)
v14つのラベルの説明だけ18件
v2v1に、入力と出力ラベルの例を3組追加6件
v3v2に「分類の理由も詳しく説明してください」を追加11件

学習のポイント:改訂で悪化したときは、まず指示どうしの矛盾を疑う。例による改善は重みの学習ではない。

この問題を演習で解く →

生成AIパスポートのトップへ 問題一覧へ

このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。