型番が検索で漏れる原因
E社は製品マニュアルを埋め込みベクトルにして、類似度で検索するRAGを使っている。「AX-2041の保証期間は?」と聞くと、別の製品AX-2014の資料や保証一般の説明が上位に来て、AX-2041の資料が使われないことがある。原因と対策の組合せとして、最も適切なものを1つ選べ。
- A
生成モデルの幻覚が原因なので、温度を下げれば、正しい型番の資料が検索で上位に来るようになる。
- B
検索で渡す件数が多すぎることが原因なので、上位1件だけを渡せば関係の薄い資料が除かれ、正しい資料だけが残る。
- C
コンテキストウィンドウが足りないことが原因なので、より長い文脈を扱えるモデルに替えれば解決する。
- D
埋め込みは意味の近さで探すため、型番のような文字列の一致に弱い。キーワード検索を併用するハイブリッド検索にする。
正解と解説を見る
正解:D
ベクトル検索は言い換えに強い一方で、型番・固有名詞・数値の完全一致には弱い。キーワード検索との併用や再ランクで補う。
- A
誤り。資料を取り違えているのは検索の段階。生成時の温度を変えても、検索結果は変わらない。
- B
誤り。上位1件がAX-2014の資料なら、正しい資料はかえって確実に漏れる。件数を絞っても、並び順の誤りは直らない。
- C
誤り。問題は、正しい資料が検索で選ばれないこと。モデルに渡せる量を増やしても、検索の誤りは直らない。
- D
正しい。似た表記の型番は、ベクトル上で近くなりやすい。完全一致に強いキーワード検索と組み合わせ、必要なら再ランクで並べ直す。
このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会(JDLA)・一般社団法人生成AI活用普及協会(GUGA)の公式サービスではありません。