趙明霞 呂致 郝雅潔 史維杰 胡欣宇 李富忠
摘 要:圖像處理作為計(jì)算機(jī)視覺技術(shù)必不可少的部分,成為眾多學(xué)者口中的熱點(diǎn)及難點(diǎn)。圖像分割是把圖像分成若干個特定、具有獨(dú)特性質(zhì)的區(qū)域并提出感興趣目標(biāo)的技術(shù)和過程,目的是實(shí)現(xiàn)通過醫(yī)學(xué)領(lǐng)域的閾值分割方法以有效分割作物與背景。此次實(shí)驗(yàn)以田間小麥圖像作為研究對象,通過多圖像進(jìn)行預(yù)處理以及利用圖像分割技術(shù)中的閾值分割算法,從復(fù)雜的背景中提取出小麥。結(jié)果表明,閾值分割算法不僅可以提取出作物信息而且還有助于去除噪聲的影響。此次實(shí)驗(yàn)為基于圖像識別及計(jì)算機(jī)視覺技術(shù)的農(nóng)田綠色作物識別技術(shù)研究提供了參考。
關(guān)鍵詞:圖像預(yù)處理;圖像增強(qiáng);邊緣檢測;圖像分割;識別;閾值分割
中圖分類號:TP393文獻(xiàn)標(biāo)識碼:A文章編號:2095-1302(2019)08-00-03
0 引 言
新時(shí)代之際,計(jì)算機(jī)視覺技術(shù)席卷而來?;跈C(jī)器視覺的圖像識別技術(shù)在農(nóng)業(yè)領(lǐng)域得到了廣泛應(yīng)用。最初的圖像識別扮演著實(shí)用工具的角色,目的是將物理圖像轉(zhuǎn)換為數(shù)字圖像,而今天,圖像識別技術(shù)開始著重于機(jī)器層面上的智能識別。于農(nóng)業(yè)而言,十九大報(bào)告中指出:世界各國農(nóng)業(yè)的發(fā)展從最初的體力為主的農(nóng)業(yè)1.0,到農(nóng)業(yè)機(jī)械為主的農(nóng)業(yè)2.0,再到自動化裝備齊全的農(nóng)業(yè)3.0,直到現(xiàn)如今的以物聯(lián)網(wǎng)、人工智能等為主的農(nóng)業(yè)4.0。因此,怎樣通過有限的耕地資源生產(chǎn)出盡可能多的農(nóng)產(chǎn)品已成為我國農(nóng)業(yè)發(fā)展所面臨的一個重要問題。針對這一挑戰(zhàn),基于圖像識別與圖像處理技術(shù)的農(nóng)作物識別、農(nóng)作物生長監(jiān)測等被眾多學(xué)者提出,已成為學(xué)術(shù)界研究的主流[1-6]。
圖像識別技術(shù)在被廣泛應(yīng)用的同時(shí),大家對于圖像的各項(xiàng)要求也越來越高,需求越來越多。同時(shí),在我們使用手機(jī)、照相機(jī)等進(jìn)行圖像拍攝、傳輸?shù)倪^程中,可能會導(dǎo)致斑點(diǎn)的產(chǎn)生,使得圖像模糊不清,此時(shí)便需要針對所處理的圖像進(jìn)行去噪、圖像增強(qiáng)、圖像分割等操作[7];圖像分割技術(shù)中,若需要提取圖像的邊緣信息,則需要熟悉邊緣提取操作,而圖像識別技術(shù)的邊緣提取會涉及許多算法[8];若需要進(jìn)行去除噪聲以及圖像孤立點(diǎn)的操作,則需要使用均值濾波、中值濾波[9]、形態(tài)學(xué)濾波[8]等;若數(shù)字圖像比較模糊,則需要通過圖像增強(qiáng)來提高圖像的清晰度,如直方圖均衡化[10]操作;我們也可以通過角點(diǎn)檢測[11]算法或者圖像壓縮[12]算法來簡化圖像數(shù)據(jù),進(jìn)而提取出有用的特征參數(shù)??傊?,圖像分割技術(shù)應(yīng)用廣泛。目前,國內(nèi)外學(xué)者仍然熱衷于圖像預(yù)處理相關(guān)算法的改進(jìn)與完善,因而它并非十全十美,相關(guān)算法需要我們深度理解,盡自己所能去改進(jìn)算法,為圖像處理技術(shù)創(chuàng)新盡自己的綿薄之力。
1 國內(nèi)外研究
現(xiàn)在幾乎每個人都有手機(jī),手機(jī)上的攝像頭分辨率也在迅速提高。使用機(jī)器識別用手機(jī)拍攝的植物圖片顯然比使用其他傳感器收集數(shù)據(jù)更方便,更容易推廣?;趫D像處理的機(jī)器識別方法也成為近年來的研究熱點(diǎn)。
植物類型的視覺識別對植物學(xué)家來說可能很容易,但對機(jī)器來說,這是一項(xiàng)復(fù)雜且計(jì)算成本高昂的任務(wù)。Puja等[13]
設(shè)計(jì)了一種葉片識別系統(tǒng),該系統(tǒng)是植物病害識別的前置步驟。作者使用了兩步算法,包括分割和分類。系統(tǒng)采用主成分分析法進(jìn)行降維,支持向量機(jī)作為分類器,縮放不同大小的植物圖像。該方法的準(zhǔn)確率為77.96%,可以通過加入更多的葉片特征來提高準(zhǔn)確率。Lavania和Matey[14]設(shè)計(jì)了一種基于尺度不變特征變換的葉片識別方法,旨在避免人類參與特征提取過程。該方法利用尺度不變特征變換(SIFT)的關(guān)鍵描述符進(jìn)行邊緣檢測和分類,采用平均投影算法作為第二種基于輪廓的邊緣檢測方法。他們以葉片圖像作為輸入,進(jìn)行特征提取,之后進(jìn)行關(guān)鍵點(diǎn)計(jì)算,并存儲計(jì)算出的關(guān)鍵點(diǎn),然后與數(shù)據(jù)集中的葉片圖像進(jìn)行匹配,從而進(jìn)行植物分類。作者將該方法與基于SIFT和輪廓的邊緣檢測方法進(jìn)行了對比,并將該方法與Flavia數(shù)據(jù)集進(jìn)行了基于Zernike矩和定向梯度直方圖的植物識別研究,準(zhǔn)確率為87.5%。
Salve等[15]利用Zernike矩和梯度方向直方圖(HOG)作為形狀描述符特征,在50種不同植物的數(shù)據(jù)集上對該方法進(jìn)行了測試。首先對圖像進(jìn)行預(yù)處理,然后應(yīng)用Zernike矩和梯度方向直方圖進(jìn)行特征提取。由于健壯性和特性持久性,HOG的性能優(yōu)于Zernike矩,報(bào)告準(zhǔn)確率為84.66%。將上述特征與一些基于葉子的特征相結(jié)合,可以進(jìn)一步改善其結(jié)果。另一項(xiàng)研究基于一種新的形狀描述符,他們使用周期小波描述符(PWD)創(chuàng)建了一個包含不同植物物種特征的數(shù)據(jù)庫,首先利用反向傳播神經(jīng)網(wǎng)絡(luò)對PWD特征進(jìn)行訓(xùn)練,然后對葉片進(jìn)行識別,識別準(zhǔn)確率[16]達(dá)90%。
還有一種基于形狀生長模式的物體識別技術(shù),這項(xiàng)工作是對形狀進(jìn)行膨脹,從而計(jì)算出具有重要特征的圖像的更新尺寸。這項(xiàng)工作被證明對噪音有彈性,但涉及到計(jì)算開銷和目標(biāo)識別能力,且要求較高。文獻(xiàn)[17]提出了一種自動亮度調(diào)節(jié)系統(tǒng),可用于更好地識別目標(biāo)。這項(xiàng)工作通過獲取CIE實(shí)驗(yàn)室空間的RGB和“L”分量來調(diào)整圖像的亮度,由模糊推理系統(tǒng)計(jì)算每個像素的調(diào)整系數(shù)。該工作聲稱圖像的自動亮度調(diào)節(jié)有助于更好地識別目標(biāo),可用于目標(biāo)識別系統(tǒng)的預(yù)處理階段。
2 圖像分割技術(shù)原理
圖像分割是由圖像處理到圖像分析的關(guān)鍵步驟,一直以來都是圖像處理技術(shù)中的難點(diǎn)之一。時(shí)至今日借助各種理論模型提出的分割算法已達(dá)上千種,但如何高效地將特征目標(biāo)從復(fù)雜的源圖像中分割出來始終是一個熱點(diǎn)話題。圖像分割的重要性和實(shí)用性在引起廣泛研究的同時(shí),在自動式和交互式方面還提出了大量方法,如強(qiáng)度、顏色、紋理等。雖然在科學(xué)文獻(xiàn)中已出現(xiàn)了很多分割技術(shù),基本可以分為基于圖像域的分割技術(shù)、基于物理的分割技術(shù)和基于特征空間的分割技術(shù)[18],但圖像分割過程包括前期的圖像預(yù)處理、顏色特征的選擇、圖像分割算法的設(shè)計(jì)與圖像后處理。
2.1 圖像灰度化
我們可以將灰度圖像看作是灰度值介于黑色和白色之間的圖像,或者說是提取出不同顏色種類的不同程度的亮度值[19]。若是對彩色圖像進(jìn)行灰度化,等價(jià)于將一幅彩色圖像轉(zhuǎn)化為灰度圖像的過程。比如大家平時(shí)接觸的黑白圖像就可以看作是灰度圖像。一般情況下,彩色圖像可以劃分為R,G,B三種分量(R為紅色分量,G為綠色分量,B為藍(lán)色分量),將其灰度化等價(jià)于使R,G,B三個分量相等的過程。我們?nèi)粘I钪兴吹降膱D像擁有不同的顏色是因?yàn)閳D像的每一個像素點(diǎn)的灰度值是不同的,灰度值最大值為255,顯示為白色,灰度值最小值為0,顯示為黑色,灰度圖像每個像素點(diǎn)都有其對應(yīng)的灰度值,大小在0~255之間?;叶然慕?jīng)典算法主要包括分量法、最大值法及加權(quán)平均法。
2.2 圖像平滑
若存在僅僅有一幀帶有噪聲的圖像,用以上方法則無法消除噪聲,由噪聲的特點(diǎn)可知其灰度與周圍灰度間存在明顯的灰度差,即我們所說的視覺障礙,因此圖像平滑(Image Smoothing)將是一個有效的工具。
圖像平滑又稱作平滑或者濾波,又或者平滑濾波。它屬于低頻增強(qiáng)的空間域?yàn)V波技術(shù)。圖像平滑是視頻信息處理與分析領(lǐng)域的一項(xiàng)傳統(tǒng)任務(wù),其核心內(nèi)容或者難點(diǎn)在于將邊緣部分和噪聲部分進(jìn)行區(qū)分,且僅僅去除噪聲。圖像能量具有高低頻之別,低頻部分的內(nèi)容是其有用信息的儲存之地,高頻部分則是噪聲以及邊緣信息的存儲段,因此在去除噪聲時(shí),很容易將其邊緣信息一同消除,這就要求我們尋找一個適當(dāng)?shù)姆椒▽?shí)現(xiàn)在去除噪聲的同時(shí)保留圖像的邊緣部分。
圖像平滑可分為空頻域以及頻域法兩大類。我們將濾波器理解為是一個含有加權(quán)系數(shù)的窗口,當(dāng)需要濾波器進(jìn)行平滑處理時(shí),將其窗口置于圖像之上,通過該窗口即可觀察到處理得到的圖像。濾波器的種類繁多,主要包括6種濾波方法,即盒式濾波、均值濾波、高斯濾波、中值濾波、雙邊濾波以及引導(dǎo)濾波,其主要目的或者作用是去除圖像的噪聲以及提取出所需特征。
2.3 圖像閾值分割算法
圖像閾值分割作為圖像分割方法的一種經(jīng)典方法,具有操作簡化、性能較穩(wěn)定、運(yùn)算速率高、準(zhǔn)確率高等特點(diǎn)。主要思想是基于所選擇的灰度級數(shù),從原圖像中分割出感興趣的目標(biāo)物,或者將其劃分為不同部分[20]。在實(shí)驗(yàn)中,選取合適的閾值進(jìn)行圖像分割是實(shí)驗(yàn)的難點(diǎn),但因其計(jì)算需使用灰度值,因此使用簡單高效。如果原圖像目標(biāo)與背景差異較大,全局閾值分割法是個很好的選擇;反之,若兩者差異不大或多個目標(biāo)的灰度值相近,則可以選擇局部閾值或動態(tài)閾值分割法。
針對綠色作物圖像而言,將作物與土壤背景進(jìn)行分割極其重要,它會受噪聲、光照等因素的影響。上述方法已較好地去除了部分噪聲影響,除此之外,我們還可以通過兩者間顏色、形狀及紋理的差異進(jìn)行分割。Naidu等提出了一種利用螢火蟲優(yōu)化算法優(yōu)化模糊熵的多級圖像閾值分割方
法[21]。伍艷蓮等[22]在利用改進(jìn)均值漂移算法的基礎(chǔ)上,獲取圖像顏色指數(shù)信息之后,將其與空間信息進(jìn)行結(jié)合,最后進(jìn)行Otsu閾值分割。閾值分割流程如圖1所示。
3 實(shí)驗(yàn)分析
本次實(shí)驗(yàn),使用苗期小麥作為實(shí)驗(yàn)?zāi)繕?biāo),首先對圖像進(jìn)行灰度處理。灰度處理的三種方法效果如圖2~圖4所示。
可以發(fā)現(xiàn),對于本實(shí)驗(yàn)而言,使用加權(quán)平均法較好,但在大多數(shù)情況下,我們選擇系統(tǒng)自帶灰度函數(shù)進(jìn)行灰度化處理。圖像經(jīng)過灰度化、平滑等技術(shù)去除噪聲之后,使用閾值進(jìn)行分割,其結(jié)果如圖5所示。
4 結(jié) 語
圖像分割算法眾多,基于閾值的圖像分割算法因?yàn)槠涓咝У倪\(yùn)算過程以及簡單的操作被廣泛應(yīng)用到各個領(lǐng)域,但同時(shí)也存在不足,若是目標(biāo)物與背景差異較小或者兩者灰度范圍重疊,則會發(fā)生過分割或者欠分割的情況;另外因其僅僅考慮灰度信息,抗噪性能差,從而導(dǎo)致其邊緣信息分割效果較差??傊?,對于如何從復(fù)雜的背景之下獲取農(nóng)田作物的算法眾多,而選擇基于圖像識別技術(shù)進(jìn)行提取,對圖像目標(biāo)識別的精確度或者及時(shí)性要求較高,因此如何快速對綠色作物進(jìn)行精準(zhǔn)分割仍然是學(xué)術(shù)界研究的難點(diǎn)所在。
注:本文通訊作者為李富忠。
參 考 文 獻(xiàn)
[1]吳雪梅,程堯,韋龍琴.在Matlab環(huán)境中基于計(jì)算機(jī)視覺的番茄識別研究[J].農(nóng)業(yè)裝備技術(shù),2005,21(4):15-17.
[2]何東健,張海亮,寧紀(jì)鋒,等.農(nóng)業(yè)自動化領(lǐng)域中計(jì)算機(jī)視覺技術(shù)的應(yīng)用[J].農(nóng)業(yè)工程學(xué)報(bào),2002,18(2):171-175.
[3]劉繼承.基于數(shù)字圖像處理技術(shù)的水稻長勢監(jiān)測研究[D].南京:南京農(nóng)業(yè)大學(xué),2007.
[4]孫恩虹.基于數(shù)字圖像的棉花群體光合有效輻射的時(shí)空分布[D].北京:中國農(nóng)業(yè)科學(xué)院,2012.
[5]徐歆愷,郭楠,葛慶平,等.計(jì)算機(jī)視覺技術(shù)在作物形態(tài)測量中的應(yīng)用[J].計(jì)算機(jī)工程與設(shè)計(jì),2006,27(7):1134-1148.
[6]滕光輝,李長纓.計(jì)算機(jī)視覺技術(shù)在工廠化農(nóng)業(yè)中的應(yīng)用[J].中國農(nóng)業(yè)大學(xué)學(xué)報(bào),2002,7(2):62-67.
[7]張婭.基于Matlab的圖像處理[J].福建電腦,2018,34(12):129.
[8]王紅君,施楠,趙輝,等. 改進(jìn)中值濾波方法的圖像預(yù)處理技術(shù)
[J].計(jì)算機(jī)系統(tǒng)應(yīng)用, 2015,24(5):237-240.
[9]郭海濤,徐雷,趙紅葉,等.一種抑制聲吶圖像散斑噪聲的形態(tài)學(xué)濾波器[J].儀器儀表學(xué)報(bào),2015,36(3):654-660.
[10]? HSU W Y, CHOU C Y. Medical image enhancement using modified color histogram equalization [J]. Journal of medical & biological engineering,2015,35(5):1-5.
[11] PAUL J,OECHSLEIN B,ERHARDT C,et al. Self-adaptive corner detection on MPSoC through resource-aware programming [J]. Journal of systems architecture,2015,61(10):520-530.
[12]徐光憲,徐山強(qiáng),郭曉娟,等. DCT變換與DNA運(yùn)算相結(jié)合的圖像壓縮加密算法[J].激光技術(shù),2015,39(6):31-34.
[13] PUJA D, SARASWAT M, ARYA K. Automatic agricultural leaves recognition system [C]// In:Paper presented at the Proceedings of Seventh International Conference on Bio-Inspired Computing:Theories and Applications(BIC-TA 2012).
[14] LAVANIA S,MATEY P S. Leaf recognition using contour based edge detection and SIFT algorithm [C]// In:Paper presented at the Computational Intelligence and Computing Research(ICCIC),2014 IEEE International Conference.
[15] SALVE P,SARDESAI M,MANZA R,et al. Identification of the plants based on leaf shape descriptors [C]// In:Paper presented at the Proceedings of the Second International Conference on Computer and Communication Technologies.
[16] ZENG Q,ZHU T,ZHUANG X,et al. Using the periodic wavelet descriptor of plant leaf to identify plant species [J]. Multimedia tools Appl.,2017,76(17):17873-17890.
[17] EUN K K,HANSOO L,SUNGSHIN K,et al. Automatic brightness adjustment system by fuzzy inference system for object recognition [C]// Joint 17th World Congress of International Fuzzy Systems Association and 9th International Conference on Soft Computing and Intelligent Systems(IFSA-SCIS),27-30 June, Otsu,Japan,2017.
[18] MARTIN D,F(xiàn)OWLKES C,TAL D, et al. A database of human segmented natural images and its application to evaluating algorithms and measuring ecological statistics [Z]. ICCV.
[19]賀姣.基于色差模型的彩色圖像灰度化算法研究[D].西安:西安電子科技大學(xué),2014.
[20]賈紅雯,曹丹華,武小紅,等.融合2DUDT與2DLDA人臉識別研究[J].南昌工程學(xué)院學(xué)報(bào),2018,37(1):45-48.
[21] NAIDU M S R,KUMAR P R.Multilevel image thresholding for image segmentation by optimizing fuzzy entropy using Firefly algorithm [J]. Int. J. Eng. Technol.,2017,9(2):472-488.
[22]趙詩宇.圖像分割算法的分類與研究[J].科技風(fēng),2019(5):58.