データ資格 模擬試験

DS検定 模擬試験 第5回 問42・データサイエンス(モデル利活用と評価)

時系列データの交差検証

スーパーのI社は、3年分の日次データで商品の需要予測モデルを作った。データを無作為に5分割する交差検証では高い精度だったが、本番で翌月の需要を予測すると精度が大きく下がった。モデルの評価方法として最も適切なものを1つ選べ。

  1. A

    5分割を10分割に増やし、各分割で得た精度の平均でモデルを評価する。

  2. B

    3年分すべてで学習し、同じ3年分のデータで精度を測って本番との差を確かめる。

  3. C

    過去の期間で学習してその後の期間で検証する分割を、時点をずらしながら繰り返す。

  4. D

    分割の前にデータを日付ごとにシャッフルし、季節が偏らないようにしてから分ける。

正解と解説を見る

正解:C

時系列データでは、学習期間の後ろに検証期間を置く分割(時系列交差検証)で評価する。無作為に分けると未来の情報が学習に漏れ、本番より高い精度が出てしまう。

学習のポイント:時系列データは「過去で学習し、未来で検証」。無作為な分割やシャッフルはリークのもとになる。

この問題を演習で解く →

DS検定のトップへ 問題一覧へ

このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。