推薦の上位5件の評価
ECサイトG社は推薦モデルをオフラインで評価している。会員Hさんには上位5件の商品を推薦した。評価期間にHさんが購入した商品は4件で、そのうち推薦5件に含まれていたのは2件だった。Hさんについての Precision@5(上位5件の適合率)と Recall@5(上位5件の再現率)の組合せとして、正しいものを1つ選べ。
- A
Precision@5 = 0.5、Recall@5 = 0.4
- B
Precision@5 = 0.4、Recall@5 = 0.5
- C
Precision@5 = 0.4、Recall@5 = 0.4
- D
Precision@5 = 0.5、Recall@5 = 0.5
正解と解説を見る
正解:B
推薦の評価では、Precision@K は「推薦K件のうち当たった割合」、Recall@K は「実際の正解のうち推薦K件で拾えた割合」を表す。今回は 2 ÷ 5 = 0.4 と 2 ÷ 4 = 0.5 になる。
- A
誤り。適合率と再現率の分母を取り違えている。適合率の分母は推薦した件数、再現率の分母は実際に購入した件数。
- B
正しい。Precision@5 は推薦5件のうち購入された割合で 2 ÷ 5 = 0.4。Recall@5 は購入4件のうち推薦に含まれた割合で 2 ÷ 4 = 0.5。
- C
誤り。再現率の分母にも推薦件数の5を使っている。再現率は実際の購入4件を分母にする。
- D
誤り。適合率の分母にも購入件数の4を使っている。適合率は推薦した5件を分母にする。
このサイトの問題は、各試験の公開されている出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人データサイエンティスト協会・一般財団法人統計質保証推進協会の公式サービスではありません。