データ資格 模擬試験

DS検定 模擬試験 第6回 問44・データサイエンス(アプローチ設計とデータの理解・検証)

アノテーション基準のぶれ

部品メーカーで、外観検査AIの学習用に、部品画像へ「良品」「不良」のラベルを3人の検査員が手分けして付けた。集計すると、不良と判定した割合が検査員ごとに 5%、12%、20% と大きく違っていた。モデルを学習させる前の対応として適切なものを2つ選べ。

  1. A

    判定基準書と、良品・不良の境界になる見本画像を用意して基準をそろえる

  2. B

    不良と判定した割合が最も高い検査員のラベルだけを残して学習に使う

  3. C

    ラベルのぶれは学習データを増やせば平均化されるので、そのまま学習に使う

  4. D

    一部の画像を複数人で重ねてラベル付けし、検査員どうしの一致率を確かめる

正解と解説を見る

正解:A・D

教師データのラベルが人によってぶれる場合は、基準を明文化し、重ねてラベル付けした一致率で品質を確かめてから学習に使う。データ量を増やせば解決するとは限らない。

学習のポイント:ラベルの品質はモデル精度の上限を決める。偶然の誤差と系統的な偏りを区別する。

この問題を演習で解く →

DS検定のトップへ 問題一覧へ

このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。