AI資格 模擬試験

生成AIパスポート 模擬試験 第3回 問26・第3章 AIエージェント(RAG(検索拡張生成))

チャンクサイズの調整

C社は社内規程を検索して答えるRAGを作った。「出張費の上限」を聞くと、例外の条件が抜けた回答になることがある。チャンクの長さを3通りに変えて100問で試した結果が表である。結果の読み方として、最も適切なものを1つ選べ。

  1. A

    チャンクは短いほど検索の精度が上がり、回答も正確になるので、Xにすれば例外の条件も抜けなくなる。

  2. B

    チャンクは長いほど必要な情報が含まれるので、Zにすれば検索の順位も回答の正確さも最も高くなる。

  3. C

    チャンクの長さは検索に影響せず、回答の質は生成モデルだけで決まるので、モデルを追加学習させる。

  4. D

    Xは条件が途中で切れやすく、Zは関係の薄い内容が混じって上位に入りにくいので、Yを基準に調整する。

正解と解説を見る

正解:D

チャンクが短いと見つけやすいが文脈が切れ、長いと文脈は残るが検索の精度が落ちる。評価用の質問で両方を測って調整する。

設定チャンクの長さ正しい箇所を含むチャンクが検索の上位5件に入った割合そのチャンクに、答えに必要な前後の条件まで含まれていた割合
X100トークン90%40%
Y500トークン85%80%
Z3,000トークン55%95%

学習のポイント:「短いほど良い」「長いほど良い」のどちらも、片方の指標しか見ていない。

この問題を演習で解く →

生成AIパスポートのトップへ 問題一覧へ

このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。