モデル評価指標Rate@Top5%の定義 をお伺いしたいです。
ドキュメントには「最上位5%の最高予測の応答率」とありますが、
予測値の最上位5%のうちの実際に陽性だったデータの比率 という理解でよろしいでしょうか?
全データに対して陽性データの比率が5%を下回っている場合、Rate@Top5%は 必ず1未満になる という認識であってますでしょうか?
ご教示いただけますと幸いです。
解決済! 解決策の投稿を見る。
@Takuya Yokosuka -san,
ご質問ありがとうございます。はい、前半・後半ともにおっしゃる通りです!
全データに対して陽性データの比率が5%を下回っている場合Rate@Top5%が1になることはございません!
[細かい話]
元々、5%未満の場合は、Top5%は実装されない仕様になっていたのですが、5%の中での割合を見たいという要望があったので、今は指標が出されるようになっております。
ご回答ありがとうございます。
陽性データが5%未満の場合はそれを考慮して解釈したいと思います。