時系列予測の検証の切り方
小売J社は、3年分の日次売上データを使って、翌週の売上を予測するモデルを作っている。実際の運用でどのくらいの精度が出るかを見積もるための検証方法として、最も適切なものを1つ選べ。
- A
3年分すべてで学習し、同じ3年分に対する予測誤差を算出してモデルの精度とする
- B
ある時点までで学習して直後の期間で検証し、その区切りを順に後ろへずらして繰り返す
- C
最も古い1年分を検証用に残し、新しい2年分で学習したモデルの誤差を測って評価する
- D
全期間の日付をランダムに5つに分け、そのうち1つを検証用にする操作を5回繰り返す
正解と解説を見る
正解:B
時系列データでは、学習期間を検証期間より前に置き、区切りをずらしながら評価する。ランダムに分割すると未来の情報が漏れ、精度を高く見積もってしまう。
- A
誤り。学習に使ったデータで評価しているため、過学習していても誤差は小さく出てしまい、未知のデータでの精度が分からない。
- B
正しい。常に過去のデータで学習して未来を予測する形になり、運用時と同じ条件で精度を見積もれる(時系列交差検証)。
- C
誤り。未来のデータで過去を予測する逆向きの評価で、実際の運用条件と合っていない。
- D
誤り。検証日より後のデータが学習に混ざり、未来の情報を使って予測することになる。そのため精度が実際より楽観的に出る。
このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。