在深度學(xué)習(xí)領(lǐng)域，通過(guò)以精度、召回率、平均精度均值（Mean Average Precision，mAP）和FPS等指標(biāo)評(píng)價(jià)目標(biāo)檢測(cè)算法的有效性，在圖像分割中則主要采用平均像素準(zhǔn)確率、平均交并比等指標(biāo)評(píng)價(jià)。

在工業(yè)質(zhì)檢領(lǐng)域的評(píng)價(jià)指標(biāo)與深度學(xué)習(xí)領(lǐng)域類(lèi)似，只是表述方式有所不同，一般使用漏檢率、誤檢率和準(zhǔn)確率等。

根據(jù)被檢測(cè)工件的真實(shí)情況（OK*和NG*）和檢測(cè)結(jié)果（OK和NG）的不同，可以將缺陷識(shí)別的結(jié)果分為4種情況，如下表所示。

TP、FP、FN和TN的含義為：

TP（True Positive）：被檢測(cè)工件為OK，檢測(cè)結(jié)果為OK，正確檢出。

FP（False Positive）：被檢測(cè)工件為NG，檢測(cè)結(jié)果為OK，漏檢。

FN（False Negative）：被檢測(cè)工件為OK，檢測(cè)結(jié)果為NG，誤檢。

TN（True Negative）：被檢測(cè)工件為NG，檢測(cè)結(jié)果為NG，正確檢出。

下面分別分別介紹工業(yè)質(zhì)檢、目標(biāo)檢測(cè)和語(yǔ)義分割中的性能指標(biāo)。

1. 工業(yè)質(zhì)檢中的性能指標(biāo)

漏檢率、誤檢率、準(zhǔn)確率和錯(cuò)誤率的含義和計(jì)算方式為：

（1）漏檢率

漏檢率指的是在檢測(cè)中未發(fā)現(xiàn)的不合格品數(shù)量占實(shí)際不合格品數(shù)量的百分比。漏檢會(huì)直接導(dǎo)致不良產(chǎn)品流向終端客戶(hù)，因此是工業(yè)表面缺陷檢測(cè)中格外關(guān)注的指標(biāo)。漏檢率的計(jì)算公式為：

（2）誤檢率

誤檢率指的是將合格品檢測(cè)為不合格品的數(shù)量占實(shí)際合格品數(shù)量的百分比。誤檢會(huì)直接對(duì)工業(yè)企業(yè)的良品率造成負(fù)面影響，會(huì)導(dǎo)致物料的浪費(fèi)。誤檢率的計(jì)算公式為：

（3）準(zhǔn)確率

準(zhǔn)確率指的是檢測(cè)中正確檢出的數(shù)量占檢測(cè)總數(shù)的百分比。準(zhǔn)確率是衡量檢測(cè)系統(tǒng)性能的重要參數(shù)，其計(jì)算公式為：

2．目標(biāo)檢測(cè)中的性能指標(biāo)

在目標(biāo)檢測(cè)中，通常采用FPS和mAP兩個(gè)指標(biāo)來(lái)分別評(píng)估識(shí)別系統(tǒng)的識(shí)別速度和精度。前者的計(jì)算方式較為簡(jiǎn)單，通過(guò)計(jì)算系統(tǒng)每秒內(nèi)能夠處理的圖像數(shù)量即可求出FPS值。計(jì)算mAP值涉及到IoU、精度（Precision）和召回率（Recall）和平均精度（Average Precision，AP）等內(nèi)容。

（1）IoU

缺陷識(shí)別問(wèn)題的任務(wù)除了要判斷出表面是否存在缺陷，還需識(shí)別出缺陷的種類(lèi)，并以矩形框的方式定位缺陷的位置。如圖下所示，識(shí)別系統(tǒng)預(yù)測(cè)的矩形框無(wú)法與人工貼標(biāo)的Ground True標(biāo)定框完全一致。因此在目標(biāo)識(shí)別中引入交并比（Intersection over Union， IoU）的來(lái)衡量位置判斷是否準(zhǔn)確。圖中藍(lán)色框表示預(yù)測(cè)的缺陷位置，綠色框表示Ground True標(biāo)定的缺陷位置。

預(yù)測(cè)框與Ground True框

IoU的計(jì)算方式如下面的公式所示，即預(yù)測(cè)框與真實(shí)框交集區(qū)域和并集區(qū)域的比值大小。當(dāng)IoU=0時(shí)表示兩塊區(qū)域完全不重疊，IoU=1時(shí)表示完全重疊。

在目標(biāo)檢測(cè)任務(wù)中，如果模型的預(yù)測(cè)輸出矩形框與人工標(biāo)注的Ground True標(biāo)定框的IoU值大于某一閾值時(shí)，即認(rèn)為模型的預(yù)測(cè)是準(zhǔn)確的。遵照慣例，IoU通常取值為0.5。

（2）精度和召回率

精度和召回率可由下面兩個(gè)公式表示，精度用于反映檢測(cè)結(jié)果中命中率的高低，召回率反映了某類(lèi)目標(biāo)的檢測(cè)覆蓋率的高低。

評(píng)估模型有效性時(shí)需同時(shí)檢測(cè)精度和召回率兩個(gè)指標(biāo)。但這兩個(gè)指標(biāo)存在負(fù)相關(guān)現(xiàn)象，提高精度往往會(huì)導(dǎo)致召回率的降低，反之亦然。因此一般引入兼顧精度和召回率的平均精度來(lái)評(píng)估模型的效果。

（3）平均精度

目標(biāo)檢測(cè)任務(wù)中使用置信度來(lái)評(píng)估當(dāng)前矩形框內(nèi)為某種物體的概率。置信度的取值為0到1之間。當(dāng)置信度為1時(shí)表示有最大可能性認(rèn)為矩形框內(nèi)的物體為某一類(lèi)別，當(dāng)置信度為0時(shí)表示有最小可能性。

在計(jì)算AP的值時(shí)，需要繪制Precision-Recall曲線，計(jì)算曲線下方的面積即為AP值。首先按照模型給出的置信度由高到低對(duì)預(yù)測(cè)框進(jìn)行排序，排序后獲得一組包含精度、召回率值的有序數(shù)組。將該數(shù)組繪制成以召回率為橫坐標(biāo)，精度為縱坐標(biāo)的曲線。隨著召回率的增大，精度的值呈振蕩減小趨勢(shì)。為去除振蕩的影響，在實(shí)際應(yīng)用中需要對(duì)曲線進(jìn)行平滑處理，曲線中精度值取該點(diǎn)右側(cè)（召回率大于或等于當(dāng)前點(diǎn)召回率所對(duì)應(yīng)的精度）最大的精度值。經(jīng)過(guò)曲線平滑后，平均精度AP的值由如下公式計(jì)算：

平均精度均值mAP為所有類(lèi)別的AP的平均值：

式中， n表示缺陷的類(lèi)別數(shù)， APi為每一類(lèi)缺陷的平均精度。當(dāng) n=1時(shí)，mAP=APi。

3．語(yǔ)義分割中的性能指標(biāo)

圖像語(yǔ)義分割的性能主要通過(guò)像素準(zhǔn)確率（Pixel Accuracy，PA）、平均像素準(zhǔn)確率（Mean Pixel Accuracy，MPA）和平均IoU（Mean Intersection over Union，MIoU）三個(gè)指標(biāo)來(lái)衡量。

（1）像素準(zhǔn)確率（Pixel Accuracy，PA）

像素準(zhǔn)確率指正確分類(lèi)的像素量占總圖片像素量的比值，由如下公式計(jì)算：

式中，k表示類(lèi)別數(shù)量，Pii 為實(shí)際類(lèi)別為 i 的像素分預(yù)測(cè)為類(lèi)別 i 的總數(shù)量，Pij 為實(shí)際類(lèi)別為i 的像素被預(yù)測(cè)為類(lèi)別 j 的總數(shù)量。

（2）平均像素準(zhǔn)確率（Mean Pixel Accuracy，MPA）

平均像素準(zhǔn)確率是對(duì)像素準(zhǔn)確率的改進(jìn)，它是先對(duì)每個(gè)類(lèi)計(jì)算像素準(zhǔn)確率，然后再對(duì)所有類(lèi)的像素準(zhǔn)確率求平均，由如下公式計(jì)算：

（3）平均IoU（Mean Intersection over Union，MIoU）

平均IoU分別對(duì)每個(gè)類(lèi)計(jì)算交并比，然后再對(duì)所有類(lèi)別的交并比求均值。平均IoU由如下公式計(jì)算：

以上就是深度學(xué)習(xí)與缺陷檢測(cè)中常用的性能指標(biāo)及計(jì)算方法，目標(biāo)檢測(cè)和語(yǔ)義分割的資料比較多，但是對(duì)于工業(yè)實(shí)際應(yīng)用的漏檢率、漏檢率和準(zhǔn)確率等指標(biāo)的介紹內(nèi)容比較少，而且計(jì)算方式有時(shí)會(huì)根據(jù)實(shí)際情況做細(xì)微的調(diào)整。