常用指标:

ACC  precison recall f1_score PR  AP MAP简介

正确率

  • Accuracy

定义:(TP+TN)/(TP+FN+FP+TN)
即所有分类正确的样本占全部样本的比例

精度

  • Precision、查准率

定义:(TP)/(TP+FP)
即预测是正例的结果中,确实是正例的比例

召回率

  • Recall、查全率

定义:(TP)/(TP+FN)
即所有正例的样本中,被找出的比例

P-R曲线

  • PRC

定义:根据预测结果将预测样本排序,最有可能为正样本的在前,最不可能的在后,依次将样本预测为正样本,分别计算当前的精确率和召回率,绘制P-R曲线。


在众多学习器对数据进行学习后,如果其中一个学习器的PR曲线A完全包住另一个学习器B的PR曲线,则可断言A的性能优于B。但是A和B发生交叉,那性能该如何判断呢?我们可以根据曲线下方的面积大小来进行比较,但更常用的是平衡点F1。平衡点(BEP)是P=R时的取值(斜率为1),F1值越大,我们可以认为该学习器的性能较好。F1的计算如下所示:
F1 = 2 * P * R /( P + R )
 

 

PR曲线应该是考虑 了多种数据划分比例下的PR 得分的连线

实际PR曲线不如直接参考F1得分

F1 值

定义:(2 * P * R)/(P + R)

RECALL和PRECISON的调和平均

ROC曲线

AP、MAP

查准率 = 查对的/查的总共数量

差错率= 差错的/查的总共数量

在这里插入图片描述


参考链接: https://www.jianshu.com/p/b425f5d9fae0

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐