データ資格 模擬試験

DS検定 模擬試験 第2回 問26・データサイエンス(生成AIの基礎と活用)

LLMの学習段階の違い

M社の社内勉強会で、対話型の大規模言語モデル(LLM)がどのように作られるかを説明することになった。LLMの学習段階の説明として最も適切なものを1つ選べ。

  1. A

    事前学習で文章を検索用データベースに保存し、応答時にはそこから該当する文を探して返している

  2. B

    人が正解を付けた質疑応答だけで事前学習を行い、その後に大量の文章を読み込ませて知識を追加する

  3. C

    人の評価を使った調整では、利用者との会話からモデルが自動で学び続け、応答がその場で更新される

  4. D

    大量の文章で次の語を予測する事前学習を行い、その後に人の評価を使った調整で応答を好ましいものに近づける

正解と解説を見る

正解:D

LLMは、大量の文章による次の語の予測(事前学習)で土台を作り、指示に沿った応答例や人の評価(RLHF)による調整で、対話に適した振る舞いを身につける。

学習のポイント:「事前学習は大量・ラベルなし、調整は少量・人が関与」と規模で区別し、RAGとも混同しない。

この問題を演習で解く →

DS検定のトップへ 問題一覧へ

このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。