当前位置 博文首页 > 微信号:Custom-Software:分割评价指标

    微信号:Custom-Software:分割评价指标

    作者:[db:作者] 时间:2021-07-10 13:08

    IOU标准介绍

    1 目标检测和图像分割的评价标准是一样的,核心都是使用IOU标准

    2 目标检测和图像分割使用的IOU方法都是一样的,不同的是目标检测面向判断选定框和预测框;而图像分割面向的是选定掩码和预测掩码

    3 在目标检测中,检测目标用box进行评价。我们的IOU评价方式为(将预测框和选定框放入公式中去判定);

    而在图像分割中,我们用掩码来进行评价,IOU评价方式为(将预测掩码和选定掩码放入公式汇中去判定):

    1、IoU相当于两个区域重叠的部分除以两个区域的集合部分得出的结果,?IOU算出的值score > 0.5 就可以被认为一个不错的结果了

    2、用于衡量特定数据集上对象检测器的准确性

    IoU一般都是基于类进行计算的,也有基于图片计算的。一定要看清数据集的评价标准.

    基于类进行计算的IoU就是将每一类的IoU计算之后累加,再进行平均,得到的就是基于全局的评价,所以我们求的IoU其实是取了均值的IoU,也就是均交并比(mean IoU)

    在进行语义分割结果评价的时候,常常将预测出来的结果分为四个部分:true positive,false positive,true negative,false negative,其中negative就是指非物体标签的部分(可以直接理解为背景),positive就是指有标签的部分;

    在图上可以清晰的看到,prediction图被分成四个部分,其中大块的白色斜线标记的是true negative(TN,预测中真实的背景部分),红色线部分标记是false negative(FN,预测中被预测为背景,但实际上并不是背景的部分),蓝色的斜线是false positive(FP,预测中分割为某标签的部分,但是实际上并不是该标签所属的部分),中间荧光黄色块就是true positive(TP,预测的某标签部分,符合真值)。

    mean IoU(均交并比)

    识别或者分割图像一般都有好几个类别,所以我们把每个分类得出的分数进行平均一下就可以得到mean IoU,也就是mIoU。

    AP衡量的是学出来的模型在每个类别上的好坏,mAP衡量的是学出的模型在所有类别上的好坏。

    AP(Average Precision):代表平均精度

    AR(Average Recall):平均召回率

    PA(Pixel Accuracy):表示检测物体的准确度,重点判断标准为是否检测到了物体。

    上面所述的IoU只是用于评价一幅图的标准,如果我们要评价一套算法,并不能只从一张图片的标准中得出结论。一般对于一个数据集、或者一个模型来说。评价的标准通常来说遍历所有图像中各种类型、各种大小(size)还有标准中设定阈值.论文中得出的结论数据,就是从这些规则中得出的。

    Precision(准确率):表示符合要求的正确识别物体的个数占总识别出的物体个数的百分数。越大越好

    Recall(召回率):表示符合要求正确识别物体的个数占测试集中物体的总个数的百分数。越大越好

    FP(false positive),误报:即预测错误(算法预测出一个不存在的物体)

    TP(true positive),正确:既预测正确(算法在物体规定范围内预测出了该物体)

    TN(true negative):算法预测出了此处是背景,也就是说此处没有任何物体,当然也没有mask。

    MPA(mean pixel accuracy):平均像素准确率:MPA是对PA的改进,它是先对每个类计算PA,然后再对所有类的PA求平均;

    Pixel Precision:代表检测到所有的物体中覆盖的精确度,重点判断mask是否精确地覆盖到了该物体;而像素精度则是在已经检测到的基础上(不论检测是否失误)进行评测的标准:

    上面是coco的评价标准,表示在所有检测出来的目标有多大的比率是正确的。而有些任务因为侧重不同所以公式也稍有变化。比如下面的公式,加入了FN,没有检测出来的实际物体也进行了计算.

    RQ(recognition quality)识别质量

    SQsegmentation quality分割质量

    PQ(panoptic segmentation)

    参考资料

    https://blog.csdn.net/lingzhou33/article/details/87901365

    https://www.cnblogs.com/dreammmz/p/11959794.html

    https://blog.csdn.net/qq_40234695/article/details/88633094

    ?

    ?

    ?

    ?

    ?

    ?

    ?

    ?

    ?

    ?

    ?

    ?

    cs