データ資格 模擬試験

DS検定 模擬試験 第6回 問66・データエンジニアリング(AIシステムの運用(MLOps))

PSIで分布の変化を測る

保険会社K社は、加入審査モデルの入力データの変化を監視するため、年齢帯の構成比についてPSI(母集団安定性指標)を計算する。PSI = 各区分の (直近の構成比 − 学習時の構成比) × ln(直近の構成比 ÷ 学習時の構成比) の合計 とする。ln(0.8) = −0.223、ln(1.5) = 0.405 を使う。判断の目安は、0.1未満が「安定」、0.1以上0.25未満が「要注意」、0.25以上が「大きな変化」である。下の表から求めたPSIと判断の組合せとして正しいものを1つ選べ。

  1. A

    約0.63で、目安の「大きな変化」に当たる

  2. B

    約0.018で、目安の「安定」に当たる

  3. C

    約0.20で、目安の「要注意」に当たる

  4. D

    約0.063で、目安の「安定」に当たる

正解と解説を見る

正解:D

PSIは、入力データの分布が学習時からどれだけずれたかを測る指標で、データドリフトの監視に使う。ただし、PSIが安定でも、入力と正解の関係が変わるコンセプトドリフトは別に精度を見て確かめる。

年齢帯学習時の構成比直近1か月の構成比
20〜39歳0.50.4
40〜59歳0.30.3
60歳以上0.20.3

学習のポイント:各項は(差)×ln(比)で、必ず0以上になる。答えが負の項を含んだら符号の誤りを疑う。

この問題を演習で解く →

DS検定のトップへ 問題一覧へ

このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。