ROC与AUC

• P-R曲线
  • 查全率和查准率
• ROC和AUC
  • ROC(Receiver Operating Characteristic)
  • AUC（Area Under ROC Curve）

分类任务中学习器性能度量的方法。

P-R曲线

查全率和查准率

若一个学习器的P-R曲线被另一个学习器的P-R曲线包住，则说该学习器优于另一学习器。平衡点(BEP, break-event-point)是“查全率=查准率”时的取值。

BEP过于简化，更常用的是$F1$度量和$F_\beta$度量，$F1$是查全率和查准率的调和平均(调和平均更注重较小值)，而$F_\beta$度量则是 在查全率和查准率上给与不同的加权值，$\beta \gt 1$时，查全率有更大影响，$\beta \lt 1$时，查准率有更大影响。

ROC和AUC

ROC(Receiver Operating Characteristic)

即“受试者工作特征”，纵坐标为”真正例率”(TPR)，横坐标为”假正例率”(FPR).

AUC（Area Under ROC Curve）

即ROC曲线下的面积，比较两个学习器A、B，若A的ROC曲线包裹B的ROC曲线，则A优于B。或粗略的A的AUC大于B的AUC，则A优于B。