5分割交差検証の仕組み
小売業のB社は、顧客1,000件のデータで購買予測モデルを作り、5分割交差検証(k = 5 のk分割交差検証)で性能を評価する。データは200件ずつ5つに分け、各分割の件数は等しいものとする。この評価についての説明として正しいものを2つ選べ。
- A
モデルの学習は5回行い、各回の学習には800件のデータを使う
- B
モデルの学習は5回行い、各回の評価には800件のデータを使う
- C
どのデータも、5回のうちちょうど1回だけ評価用として使われる
- D
5回の評価結果のうち、最も良い回の値をモデルの性能とする
正解と解説を見る
正解:A・C
k分割交差検証では、データをk個に分けて1つを評価用、残りを学習用にし、評価用を入れ替えながらk回学習する。1,000件を5分割すると、各回の学習は800件、評価は200件で、性能は5回の評価結果の平均で表す。
- A
正しい。5つに分けたうち1つ(200件)を評価に回し、残り4つ(200 × 4 = 800件)で学習する。評価に使う分割を入れ替えながら5回繰り返す。
- B
誤り。学習用と評価用の件数を逆にしている。各回の評価に使うのは1分割分の200件で、学習に使うのが800件である。
- C
正しい。評価に使う分割を1つずつ入れ替えるので、各データは1回だけ評価に使われ、残り4回は学習に使われる。
- D
誤り。性能の見積もりは、5回の評価結果の平均で行うのが基本である。最も良い回だけを選ぶと、性能を楽観的に見積もってしまう。
このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。