データ資格 模擬試験

DS検定 模擬試験 第2回 問42・データサイエンス(アプローチ設計とデータの理解・検証)

需要予測の検証データの切り方

スーパーE社は、過去3年分の日次売上データで翌週の需要予測モデルを作った。全データの日付をランダムに選んで学習用8割・検証用2割に分けたところ、検証の精度は非常によかった。しかし、本番で将来を予測させると精度が大きく下がった。検証方法の改善として最も適切なものを1つ選べ。

  1. A

    ランダムに分ける比率を学習用9割・検証用1割に変える

  2. B

    曜日の比率がそろうように層化してからランダムに分ける

  3. C

    古い期間で学習し、それより後の期間で検証するように時間で区切る

  4. D

    日付をランダムに5分割して交差検証し、平均の精度で評価する

正解と解説を見る

正解:C

時系列データをランダムに分けると、検証期間より後のデータが学習に混ざり(リーク)、精度が過大に評価される。本番と同じ時間の向きで、学習期間と検証期間を区切って検証する。

学習のポイント:時系列の検証は「過去で学習し、未来で検証する」。ランダム分割や通常の交差検証はそのままでは使えない。

この問題を演習で解く →

DS検定のトップへ 問題一覧へ

このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。