データ資格 模擬試験

DS検定 模擬試験 第4回 問26・データサイエンス(非構造化データ処理(テキスト・画像・音声))

TF-IDFが高くなる語

K社のコールセンターでは、問い合わせ記録1,000件から、記録ごとの特徴を表す語をTF-IDFで抜き出したい。ある1件の記録の中でTF-IDFの値が高くなりやすい語として、最も適切なものを1つ選べ。

  1. A

    1,000件全体を通じて、出現回数の合計が最も多い語

  2. B

    その記録で何度も出てきて、ほぼすべての記録にも出る語

  3. C

    その記録では1回だけ出てきて、全記録の半数にも出る語

  4. D

    その記録で何度も出てきて、ほかの記録にはほとんど出ない語

正解と解説を見る

正解:D

TF-IDFは「その文書でよく出るか(TF)」と「ほかの文書では珍しいか(IDF)」を掛け合わせた値で、文書に固有の語ほど高くなる。どの文書にも出る一般的な語は、出現回数が多くても値が小さくなる。

学習のポイント:よく出る語ではなく「その文書にだけよく出る語」が高くなる。

この問題を演習で解く →

DS検定のトップへ 問題一覧へ

このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。