AI資格 模擬試験

生成AIパスポート 模擬試験 第2回 問18・第2章 生成AI(LLM(大規模言語モデル)の基礎)

知識の期限と古い回答

法務部のFさんが、先月改正された規制の内容をLLMに質問したところ、改正前の内容が自信のある言い方で返ってきた。LLMには検索機能や外部文書を参照する機能は付いていない。この状況の理解と対応として、最も適切なものを1つ選べ。

  1. A

    学習データの収集時点より後の改正を知らないため、古い情報が出た可能性がある。最新の公的資料を確認するか、資料を入力して参照させる。

  2. B

    存在しない条文を作り出すハルシネーションが起きているので、temperatureを0にすれば改正後の内容を正しく答えられる。

  3. C

    プロンプトインジェクションで古い情報を答えるよう誘導されているので、会話をリセットすれば改正後の内容を答えられる。

  4. D

    コンテキスト長が足りずに改正の部分が切り捨てられたので、質問を短くすれば改正後の内容を答えられる。

正解と解説を見る

正解:A

LLMの知識は、学習データの期限で止まっている。期限後の情報について古い内容を答えるのは、もっともらしい作り話(幻覚)とは原因が異なる。検索や資料の入力で最新情報を補う必要がある。

学習のポイント:「古い情報」と「幻覚」は別物。温度を下げても、知らない情報は答えられない。

この問題を演習で解く →

生成AIパスポートのトップへ 問題一覧へ

このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。