データ資格 模擬試験

DS検定 模擬試験 第5回 問38・データサイエンス(データ準備(前処理・欠損値・外れ値・特徴量))

オーバーサンプリングの順序

E銀行の分析担当者は、不正取引を検知するモデルを作っている。不正取引は全体の0.5%しかない。担当者は全データに、少数クラスのデータを合成して増やす手法(SMOTE)を適用し、不正と正常を同数にした。その後に学習用と評価用を8:2に分け、評価用データで再現率0.95を得た。この手順の問題点として最も適切なものを1つ選べ。

  1. A

    学習用の不正事例から合成した似たデータが評価用に入り込み、評価が実際より甘くなる。

  2. B

    不正と正常を同数にしたので、評価指標には再現率ではなく正解率を使うべきだった。

  3. C

    オーバーサンプリングは評価用データにだけ適用すべきで、学習用データに使うべきではない。

  4. D

    分割比率を7:3に変えて評価用データを増やせば、評価が甘くなる問題は解消される。

正解と解説を見る

正解:A

オーバーサンプリングや標準化などのデータに依存する前処理は、分割後に学習用データだけで行う。評価用データは本番と同じ分布のまま評価する。

学習のポイント:順番は「分割が先、増やすのは学習用だけ」。分割前に合成すると評価が甘くなる。

この問題を演習で解く →

DS検定のトップへ 問題一覧へ

このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。