基于圖像分割的目標(biāo)檢測(cè)方法對(duì)比研究

劉天舒，房建東，趙于東

摘? 要： 奶牛行為識(shí)別過程中，奶牛目標(biāo)精準(zhǔn)檢測(cè)是重要前提。一般的奶牛目標(biāo)檢測(cè)采用紋理和顏色信息進(jìn)行識(shí)別，對(duì)于長(zhǎng)時(shí)間靜止和復(fù)雜背景干擾的目標(biāo)存在目標(biāo)丟失和檢測(cè)不精準(zhǔn)問題。針對(duì)上述問題，文章將圖像分割方法和區(qū)域面積剔除方法相結(jié)合，實(shí)現(xiàn)復(fù)雜環(huán)境下的靜止奶牛目標(biāo)檢測(cè)。實(shí)驗(yàn)結(jié)果表明，該方法達(dá)到97.4%的識(shí)別率。

關(guān)鍵詞： 目標(biāo)檢測(cè); 復(fù)雜環(huán)境; 圖像分割; 區(qū)域面積

中圖分類號(hào)：TP301.6? ? ? ? ? 文獻(xiàn)標(biāo)識(shí)碼：A? ? ?文章編號(hào)：1006-8228（2022）01-14-05

Comparative research on image segmentation based target detection method

Liu Tianshu1，2， Fang Jiandong1，2， Zhao Yudong2

（1. Inner Mongolia University of Technology， Hohhot， Inner Mongolia 010080， China; 2. Inner MongoliaKey Laboratory of Perceptive Technology and Intelligent System）

Abstract： In the process of cow behavior recognition， accurate detection of cow targets is an important prerequisite. Generally， cow target detection uses texture and color information for recognition. For targets that are static for a long time and interfered with complex backgrounds， there are problems of target loss and inaccurate detection. Aiming at the above problems， this paper combines image segmentation method with area removal method to realize the target detection of still cows in complex environments. The experimental results show that the method achieves a recognition rate of 97.4%.

Key words： target detection; complex environment; image segmentation; area

0 引言

目標(biāo)檢測(cè)是對(duì)視頻中的移動(dòng)目標(biāo)進(jìn)行定位的過程，目標(biāo)檢測(cè)技術(shù)有著非常廣泛的應(yīng)用。針對(duì)光照變化大、長(zhǎng)時(shí)間靜止和復(fù)雜背景干擾等問題，現(xiàn)有成熟的移動(dòng)目標(biāo)檢測(cè)方法尚不能實(shí)現(xiàn)對(duì)復(fù)雜牛舍環(huán)境下牛只視頻的有效檢測(cè)。目前基于動(dòng)態(tài)目標(biāo)檢測(cè)的算法有背景減除法、幀間差分法、高斯模型法、光流法等[1]，可以實(shí)現(xiàn)動(dòng)態(tài)奶牛目標(biāo)的檢測(cè)。

但是動(dòng)態(tài)目標(biāo)檢測(cè)的方法不能很好地適應(yīng)靜態(tài)目標(biāo)的檢測(cè)要求，一旦靜止下來休息、進(jìn)食、飲水，上述這些方法都會(huì)存在目標(biāo)丟失的現(xiàn)象，會(huì)將目標(biāo)標(biāo)記為背景，離實(shí)際應(yīng)用還有一定的差距。針對(duì)以上問題本文進(jìn)行如下研究：

⑴ 為了滿足監(jiān)控系統(tǒng)實(shí)時(shí)需求，研究牛只圖像的快速分割算法，滿足在無需人工操作情況下，自動(dòng)利用圖像信息進(jìn)行圖像增強(qiáng)和濾波處理，并根據(jù)圖像顏色進(jìn)行分割，以實(shí)現(xiàn)快速準(zhǔn)確地提取牛只圖像區(qū)域。

⑵ 針對(duì)圖像分割不準(zhǔn)確問題，采用基于目標(biāo)區(qū)域面積大小的方式來剔除干擾目標(biāo)，提高檢測(cè)精準(zhǔn)度。

1 基于自適應(yīng)閾值的牛只圖像快速分割算法

圖像分割算法可以基于閾值、邊緣、區(qū)域等不同原理實(shí)現(xiàn)?；陂撝档膱D像分割算法即圖像的二值化處理，是一種基于灰度信息提取前景目標(biāo)技術(shù)，是現(xiàn)有研究牛只圖像分割算法中應(yīng)用最多的方法，有著易于實(shí)現(xiàn)、性能穩(wěn)定的優(yōu)點(diǎn)。閾值分割，對(duì)牛只前景目標(biāo)與背景對(duì)比度較強(qiáng)的圖像，分割效果極好。對(duì)于對(duì)比度較弱的圖像，可以先進(jìn)行圖像對(duì)比度增強(qiáng)，再采用閾值處理，也可以達(dá)到很好的分割效果。

1.1 灰度圖像閾值分割

灰度閾值分割通常設(shè)定一個(gè)閾值用于區(qū)別圖像中物體與背景之間的灰度差異，所有不小于灰度閾值的像素灰度值用白色255表示，否則灰度值用黑色0表示，這樣就能實(shí)現(xiàn)目標(biāo)和背景的分割，使得整幅圖像顯示為明顯的黑白對(duì)比效果，有效地凸顯出目標(biāo)的輪廓，灰度圖像閾值分割效果如圖1所示。

分析圖1（a）可以看出，地面暗區(qū)域和墻面的灰度值較大，由于牛只和墻面灰度值并沒有出現(xiàn)較明顯的區(qū)別，所以采用閾值分割可以將地面較暗區(qū)域分割出去，但是還有部分墻面被分割為前景。圖1（b）為經(jīng)過了AGCDW增強(qiáng)算法結(jié)合高斯濾波去噪處理后的閾值分割效果圖，從中可以看出，預(yù)處理后在閾值T=40時(shí)，地面和柵欄分割為背景，前景目標(biāo)只有少許墻壁和奶牛個(gè)體，效果較好。

1.2 Otsu閾值分割法

Otsu閾值分割法又稱為最大類間方差法，其中t是使目標(biāo)與背景兩類方差最大的值。所選取的分割閾值應(yīng)使前景區(qū)域的平均灰度、背景區(qū)域的平均灰度與整幅圖像的平均灰度之間的差異最大。

設(shè)圖像灰度級(jí)為N，[ni]為圖像灰度級(jí)為i的像素點(diǎn)個(gè)數(shù)，對(duì)直方圖進(jìn)行歸一化的計(jì)算公式如下：

[πi=niN] ⑴

對(duì)于前景和背景兩類像素[If]、[Ib]，前景與背景的分割閾值為t時(shí)，每一類出現(xiàn)的概率為：

[If=i=0tπi=wo] ? ⑵

[Ib=i=t+1N-1πi=w1]? ⑶

前景和背景的平均灰度值計(jì)算公式如下：

[u0=i=0tiπii=0tπi=μtwo] ⑷

[u1=i=t+1N-1iπii=t+1N-1πi=μT-μtw1] ⑸

[μt=i=0tiπi] ⑹

[μT=i=0N-1iπi] ⑺

其中，[μt]為灰度級(jí)為t時(shí)的灰度累計(jì)值，[μT]為圖像灰度級(jí)N范圍內(nèi)的灰度累計(jì)值。對(duì)于前景和背景像素，內(nèi)部方差計(jì)算公式如下：

[σ20=i=0ti-u02πi/w0] ⑻

[σ21=i=t+1N-1i-u12πi/w1] ⑼

前景和背景點(diǎn)占圖像比例分別為[w0]和[w1]，均值分別為[u0]和[u1]，那么圖像的均值為[u=w0×u0+w1×u1]。建立目標(biāo)函數(shù)，設(shè)t為分割閾值，[gt]最大時(shí)對(duì)應(yīng)的t稱為最佳閾值。

[gt=w0×u0-u2+w1×u1-u2] ⑽

Otsu算法計(jì)算簡(jiǎn)單，適用性強(qiáng)，但是對(duì)不均勻光照的圖片不能產(chǎn)生很好的效果，如圖2所示為全局自適應(yīng)Otsu閾值分割結(jié)果。

如圖2所示，在灰度或者光照分布不均勻的情況下，全局閾值分割并不適用。全局閾值得到的結(jié)果只是將光照較強(qiáng)的區(qū)域分割出來，而陰影部分或者光照較弱的區(qū)域缺沒有分割出來。

1.3 最大熵閾值分割算法

最大熵閾值分割法和Otsu算法類似，假設(shè)將圖像分為背景與前景兩個(gè)部分、熵代表信息量，圖像信息量越大，熵就越大，最大熵算法就是找出一個(gè)最佳閾值使得背景與前景兩個(gè)部分熵之和最大[2]。熵的定義公式如下：

[HD=-ppxlogpx] ⑾

設(shè)定分割閾值為t，[i=0L-1pi=1， pi≥0]。

T為[i∈0，1，…，t]的分布，B為[i∈t+1，…，L-1]的分布，具體形式為：

[T：p0pn，…，ptpn] ⑿

[B：pt+11-pn，…，pL-11-pn] ? ⒀

其中，[pn=i=0tpi]。

則兩個(gè)概率密度的熵為：

[HT=-i=0tpipnlnpipn] ⒁

[HB=-i=t+1L-1pi1-pnlnpi1-pn] ⒂

在該閾值下，圖形總熵為：

[HD=HT+HB] ⒃

計(jì)算所有分割閾值下的圖像總熵，找到最大的熵，將最大熵對(duì)應(yīng)的分割閾值作為最終的閾值，圖像中灰度大于此閾值的像素作為前景，否則作為背景，最大熵閾值分割處理結(jié)果如圖3所示。

由圖3可以看出，效果相對(duì)于全局自適應(yīng)Otsu閾值分割較好，窗戶部分自動(dòng)分割為背景，但是由于最大熵對(duì)應(yīng)的分割閾值較大為108，圖像中墻壁和奶?；叶认嘟?，以至于圖像中大于此閾值的墻壁被認(rèn)為前景，分割效果不理想。

2 客觀評(píng)價(jià)

2.1 分割指標(biāo)

在完成圖像分割任務(wù)之后需要對(duì)分割結(jié)果進(jìn)行客觀評(píng)價(jià)，一般采用的指標(biāo)是并交比（Intersection over Union，IOU）[3]。假設(shè)：x和y是兩個(gè)需要計(jì)算IOU匹配大小的目標(biāo)區(qū)域，Area函數(shù)用來計(jì)算目標(biāo)區(qū)域的面積大小，那么IOU的計(jì)算公式如下：

[IOUx，y=Areax∩AreayAreax∪Areay] ⒄

2.2 效果分析

目標(biāo)區(qū)域標(biāo)記圖像如圖4所示。

通過式⒄評(píng)價(jià)上述三種分割方法的分割圖像和目標(biāo)標(biāo)記圖像的IOU指標(biāo)，評(píng)價(jià)結(jié)果如表1所示。

通過表1可知，采用同一種方法對(duì)圖像增強(qiáng)和去噪處理前后的圖像分割效果有著明顯差距，預(yù)處理后IOU比處理前數(shù)值有所提高。采用不同灰度圖像閾值進(jìn)行分割，當(dāng)閾值K=40時(shí)，IOU數(shù)值最大，表明和目標(biāo)標(biāo)記圖像匹配度最高，分割效果最好。Otsu閾值分割法和最大熵閾值分割法由于背景墻壁和目標(biāo)區(qū)域灰度相近，處理效果較差，IOU評(píng)價(jià)結(jié)果表明最大熵閾值分割法比Otsu閾值分割法效果好，與主觀評(píng)價(jià)結(jié)果一致。

3 復(fù)雜背景下奶牛目標(biāo)區(qū)域檢測(cè)方法

3.1 基于形態(tài)學(xué)方法的圖像噪聲過濾研究

圖像形態(tài)學(xué)圖像處理的基本理論，開運(yùn)算是通過對(duì)圖像先腐蝕后膨脹操作實(shí)現(xiàn)的，閉運(yùn)算是通過先對(duì)圖像膨脹后腐蝕實(shí)現(xiàn)的[4]。經(jīng)過灰度圖像閾值分割后進(jìn)行的開閉運(yùn)算結(jié)果圖如圖5（b）所示。

從圖5可以看出，奶牛目標(biāo)面積并未改變，但是只去除了部分地面和水池噪聲，如果進(jìn)行多次開閉運(yùn)算迭代后，奶牛目標(biāo)將被嚴(yán)重減縮，同時(shí)噪聲也未全部消除，如圖6所示為進(jìn)行了兩次開閉運(yùn)算效果圖。

3.2 基于區(qū)域面積進(jìn)行目標(biāo)檢測(cè)

如果單純采用背景減除法和圖像分割以及形態(tài)學(xué)處理進(jìn)行目標(biāo)檢測(cè)，就會(huì)存在一些誤檢，無法實(shí)現(xiàn)奶牛目標(biāo)精準(zhǔn)檢測(cè)，因此提出基于區(qū)域面積進(jìn)行奶牛目標(biāo)檢測(cè)[5]。方法流程如圖7所示。

奶牛目標(biāo)檢測(cè)具體步驟如下。

⑴ 采用高斯混合模型進(jìn)行背景建模，讀入當(dāng)前幀進(jìn)行圖像AGCWD算法增強(qiáng)和高斯濾波預(yù)處理[6]后，背景減除法將其和背景幀進(jìn)行作差運(yùn)算。

⑵ 為降低漏檢率，進(jìn)行圖像閾值分割處理，采用閾值為40的灰度閾值分割算法得到二值化圖像。

⑶ 為彌合奶牛黑白花紋處理后產(chǎn)生的間隙，以結(jié)構(gòu)元素[0 1 0; 1 0 1; 0 1 0]進(jìn)行形態(tài)學(xué)開閉運(yùn)算，填充聯(lián)通區(qū)域內(nèi)的空洞。

⑷ 為去除多余噪聲，進(jìn)行連通域處理，根據(jù)實(shí)驗(yàn)樣本得到奶牛目標(biāo)區(qū)域大于2000像素，則將提取到的備選區(qū)域小于2000像素進(jìn)行剔除，并將剩下的第K個(gè)連通域進(jìn)行統(tǒng)計(jì)和外接矩形標(biāo)記。如圖8所示為進(jìn)行非目標(biāo)區(qū)域剔除前后效果圖。

依據(jù)上述方法檢測(cè)出的奶牛目標(biāo)區(qū)域在原始視頻幀中的顯示結(jié)果如圖9所示。

4 實(shí)驗(yàn)結(jié)果與分析

隨機(jī)選取十段視頻作為試驗(yàn)集來完成目標(biāo)區(qū)域檢測(cè)。用區(qū)域檢測(cè)準(zhǔn)確率和漏檢率作為評(píng)價(jià)檢測(cè)算法的指標(biāo)，評(píng)價(jià)指標(biāo)計(jì)算公式如下：

[η=ncowNdetectedδ=uundetectedNdetected] ⒅

其中，[Ndetected]為檢測(cè)到的區(qū)域總個(gè)數(shù);[ncow]為檢測(cè)到的奶牛目標(biāo)區(qū)域個(gè)數(shù);[uundetected]為未檢測(cè)的奶牛目標(biāo)區(qū)域個(gè)數(shù)。

本文算法檢測(cè)結(jié)果如表2所示。

經(jīng)過形態(tài)學(xué)處理和區(qū)域面積剔除結(jié)合處理后的目標(biāo)檢測(cè)準(zhǔn)確率有所提高，其中存在誤檢的主要原因是目標(biāo)之間存在遮擋嚴(yán)重問題，實(shí)驗(yàn)結(jié)論表明本文方法可以有效用于靜態(tài)目標(biāo)檢測(cè)，較單一使用動(dòng)態(tài)目標(biāo)檢測(cè)方法有了較大改進(jìn)。

5 結(jié)束語(yǔ)

本文通過對(duì)比不同分割算法，從主觀和客觀兩方面進(jìn)行效果評(píng)價(jià)，在采用閾值為T=40的圖像分割后，目標(biāo)匹配度達(dá)到96.39%，第二階段采用基于面積大小的目標(biāo)檢測(cè)，同時(shí)結(jié)合形態(tài)學(xué)處理，以提高目標(biāo)識(shí)別率，識(shí)別率從96.39%提升到97.4%。本文方法的優(yōu)點(diǎn)在于適應(yīng)了靜態(tài)目標(biāo)的檢測(cè)要求，算法簡(jiǎn)單、適用，具有一定的應(yīng)用前景。

參考文獻(xiàn)（References）：

[1] 康飛龍.基于機(jī)器學(xué)習(xí)的多目標(biāo)豬只狀態(tài)與個(gè)體行為識(shí)別研究[D].內(nèi)蒙古農(nóng)業(yè)大學(xué)博士學(xué)位論文，2018

[2] 曹義親，劉龍標(biāo).基于缺陷比例限制的背景差分鋼軌表面缺陷檢測(cè)方法[J].計(jì)算機(jī)應(yīng)用，2020，40（10）：3066-3074

[3] 穆中凱.基于感興趣區(qū)域的視頻目標(biāo)檢索方法及應(yīng)用研究[D].北京郵電大學(xué)碩士學(xué)位論文，2019

[4] 宋冬梅.數(shù)學(xué)形態(tài)學(xué)在數(shù)字圖像處理中的應(yīng)用研究[J].計(jì)算技術(shù)與自動(dòng)化，2021，40（2）：136-139

[5] 張子儒.基于視頻分析的奶牛發(fā)情信息檢測(cè)方法研究[D].西北農(nóng)林科技大學(xué)碩士學(xué)位論文，2018

[6] 楊先鳳，李小蘭，貴紅軍.改進(jìn)的自適應(yīng)伽馬變換圖像增強(qiáng)算法仿真[J].計(jì)算機(jī)仿真，2020，37（5）：241-245