データ資格 模擬試験

DS検定 模擬試験 第5回 問83・データエンジニアリング(生成AIの実装と運用)

埋め込みモデルの変更

S社は社内文書を検索して回答するRAGシステムを運用している。埋め込み(ベクトル化)のモデルを新しいものに切り替えたが、切り替えたのは質問をベクトル化する部分だけで、蓄積済みの文書のベクトルは旧モデルのままだった。その後、関係のない文書ばかりが検索されるようになった。最も適切な対処を1つ選べ。

  1. A

    文書も新しいモデルでベクトル化し直し、検索用の索引を作り直す

  2. B

    LLMのtemperatureを下げ、回答の文章のぶれを小さくする

  3. C

    類似度の計算をコサイン類似度から内積に変え、モデルの差を吸収する

  4. D

    検索で取り出す文書の件数を増やし、関係する文書が含まれるようにする

正解と解説を見る

正解:A

ベクトル検索では、質問と文書を同じ埋め込みモデルでベクトル化する。モデルを変えたら、蓄積済みの文書も全てベクトル化し直す。

学習のポイント:RAGの不調は、検索の段階と生成の段階のどちらで起きているかを切り分けてから対処する。

この問題を演習で解く →

DS検定のトップへ 問題一覧へ

このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。