DataRobot におけるAUCの算出方法を教えていただきたい。
→AUCはROC曲線下の面積から算出されます。 ROC曲線はデータセットの各値を基に作成され、真陽性率(リコール)と偽陽性率(フォールアウト)に対比させる形でプロットしております。
特にROC計算を行なう際のカットオフ点の数について教えていただきたい。
→カットオフ値については、カットオフの数を見ておらずF1スコアを最大化する値をデフォルトでは算出しております。 また予測結果をラベルではなく確率で出力可能なため、ビジネス用途に応じてカットオフを変更頂くことも可能です。 補足になりますが、F1スコアは、2(リコール*プレシジョン)/(リコール+プレシジョン)にで計算されます。
English
