賀詢
(華北水利水電大學(xué)機(jī)械學(xué)院,河南 鄭州 450045)
水果識別中圖像特征綜述
賀詢
(華北水利水電大學(xué)機(jī)械學(xué)院,河南 鄭州 450045)
圖像特征是水果識別的關(guān)鍵,也是研究采摘機(jī)器人的基礎(chǔ)。本文對水果圖像的特征進(jìn)行分析,介紹了顏色、形狀、紋理等具有代表性的圖像特征,并闡述了各個圖像特征的應(yīng)用情況,最后探討圖像特征研究中存在的問題和發(fā)展趨勢,以期為相關(guān)學(xué)者提供參考。
水果識別;顏色特征;形狀特征;紋理特征
隨著機(jī)器人技術(shù)與計算機(jī)視覺技術(shù)的逐漸成熟,目前已經(jīng)有不同類型的水果采摘機(jī)器人試驗樣機(jī)被研發(fā)出來。機(jī)器人進(jìn)行水果采摘的首要工作是進(jìn)行目標(biāo)果實的識別。目前,較為普遍的識別流程主要包括圖像采集、圖像預(yù)處理、圖像分割、特征提取及圖像識別等。圖像采集與預(yù)處理是指獲取圖像并進(jìn)行圖像增強(qiáng)等簡單的預(yù)處理,相關(guān)技術(shù)已經(jīng)較為成熟。圖像分割、特征提取、圖像識是使水果從背景圖像中識別并分割出來。這些工作主要依靠目標(biāo)果實的圖像特征,對圖像特征的研究是進(jìn)行水果識別研究的關(guān)鍵。本文主要針對水果具有的圖像特征進(jìn)行研究,并介紹水果識別中圖像特征的研究現(xiàn)狀。
特征是一個對物體進(jìn)行描述的量,任何識別算法都需要選取一個好的特征,這是確保算法有效的關(guān)鍵[1]。圖像特征是識別方法中的重要組成部分,優(yōu)秀的圖像特征使物體對象在特征空間中具有較好的分離性,從而減輕算法的負(fù)擔(dān),達(dá)到事半功倍的效果[2]。在水果識別中應(yīng)用較多的特征主要有顏色特征、形狀特征、紋理特征等。
采摘機(jī)器人采集到圖像一般由未成熟水果、成熟水果、枝葉、天空、土壤等主要因素構(gòu)成,成熟水果的顏色與其他因素具有明顯不同,因此,可以利用顏色特征同來區(qū)分目標(biāo)與背景。顏色特征是一種全局特征,描述了圖像區(qū)域所對應(yīng)的景物的表面性質(zhì)。顏色特征的描述是建立在顏色空間的基礎(chǔ)上并反映各個像素點的信息。
2.1.1 顏色空間。在進(jìn)行顏色特征的選擇前,需要進(jìn)行顏色空間的選擇[3]。為了更有效區(qū)分目標(biāo)對象與背景,需要選擇不同的顏色空間。但目前,還沒有任何一種顏色空間適用于所有彩色圖像,因此選擇最佳的色彩空間是一個難題[4]。當(dāng)前較常見的顏色空間主要有:RGB、HSI、HSV、Lab、YIQ、YCgCr、YcbCr、CIE等。
2.1.2 顏色空間的選擇。在顏色空間選擇問題上,目前主要有兩種解決方案,一種是選擇單一的顏色空間,以其中的一個或者多個顏色分量為顏色特征。徐惠榮[5]等進(jìn)行了樹上柑橘的識別研究,通過R-B顏色特征將果實從背景中分割出來。石雪強(qiáng)[6]等在蘋果采摘機(jī)器人的研究中選擇Lab顏色空間,最終得到了理想的分割效果。
另一種解決方案是通過對一個或多個顏色空間的若干顏色分量進(jìn)行組合。謝忠紅[7]在研究中通過BP神經(jīng)網(wǎng)絡(luò)得到以H、Cr(YCgCr)、Cr(YCbCr)、R-G、2R-G、Cb-Cr這6個特征組成的顏色特征組對桃子具有較高識別率,以H、Cr(YCgCr)、Cr(YCbCr)、R-G這4個特征組成的顏色特征組實現(xiàn)對蘋果的高效識別。Arefi[8]等通過選擇0.25G-H的特征組合進(jìn)行番茄果實的圖像分割并取得良好效果。
以上兩種顏色空間的選擇方法各有優(yōu)劣,選擇單一顏色空間進(jìn)行圖像分割具有運算量小、運算速度快的特點。而以多種顏色空間的不同顏色分量進(jìn)行組合構(gòu)建具有更高的識別率與更好的分割效果,但在構(gòu)建顏色特征組合時較為困難。
2.2.1 形狀特征。由于水果、枝干等都有其特定的外形,可以通過形狀特征的不同來識別水果。形狀特征是一種局部特征,其對象是目標(biāo)區(qū)域內(nèi)像素點的數(shù)目及位置。
2.2.2 形狀特征的選擇。對形狀特征的描述沒有統(tǒng)一的定義,只要可以反映目標(biāo)的外形并能有效區(qū)分目標(biāo)與背景之間差異的特征參數(shù)都可以作為描述目標(biāo)的形狀特征。但由于進(jìn)行特征描述的圖像是經(jīng)過一系列處理后的圖像,因此,要求選擇具有RST不變性的特征參數(shù),并確保這些參數(shù)對圖像的旋轉(zhuǎn)、比例、平移變化都是恒定的。常用的形狀特征有:面積、周長、直徑、曲率、圓形度、伸長度、離散度、圓度、圓方差等。上述特征參數(shù)中的圓形度、離散度、圓方差和離散度等滿足RST不變性的要求。
王玉翰[9]在研究中選取圓方差、離散度、伸長度等作為形狀特征,取得了良好的識別效果。張志強(qiáng)[10]等選取面積、周長、圓形度和離心率等形狀特征進(jìn)行蘋果的圖像分割,果實識別率高達(dá)89.3%。王玉飛[11]等在研究中把圓形度、凹度和矩形度作為形狀特征參數(shù)對番茄進(jìn)行識別實驗,正確識別率達(dá)90%以上。
在圖像識別的研究中,紋理一般是指圖像像素灰度呈現(xiàn)出的空間分布特性,紋理特征則是從圖像中計算出一個對這一特性進(jìn)行量化描述的值。紋理對區(qū)域內(nèi)的像素點進(jìn)行統(tǒng)計計算,其中包含有大量微觀和宏觀信息。目前,常用的紋理特征提取方法有矩分析法、基于灰度共生矩陣方法、基于小波變換方法等。不同的提取方法可以獲得不同的紋理特征參數(shù)。例如,通過矩分析法獲得的均值、方差、峰值、扭曲度、熵等參數(shù);通過灰度共生矩陣方法定義的紋理特征主要有對比度、能量、逆差分矩、距離中心趨勢、相關(guān)性等[12]。
鄭向陽[13]等通過計算基于能量、信息熵及對比度的紋理特征來進(jìn)行水果定位。謝忠紅[14]等基于灰度共生矩陣的熵和能量這兩個紋理特征進(jìn)行水果與葉子的分割,取得了良好的效果。由于紋理特征容易受圖像分辨率、光照等因素影響,因此,在研究中單獨利用紋理特征容易產(chǎn)生較大誤差,通常還需要與其他圖像特征結(jié)合來提高識別效率。
水果識別圖像特征的研究工作已經(jīng)進(jìn)行了數(shù)十年并取得了較大成果,但依然存在一些影響水果識別準(zhǔn)確率的問題。例如,農(nóng)業(yè)環(huán)境存在光照變化、振動、風(fēng)、霧、雨水等影響因素對所采集圖像的質(zhì)量和圖像特征都會產(chǎn)生負(fù)面影響。
隨著研究的進(jìn)一步深入,不斷有新的圖像特征被開發(fā)研究出來,如光譜特征、空間關(guān)系特征、分形特征等。同時,為了提高識別的準(zhǔn)確率,多種圖像特征的融合技術(shù)成為未來的發(fā)展方向。圖像特征的研究是實現(xiàn)水果自動化采摘的基礎(chǔ),進(jìn)行相關(guān)研究對農(nóng)業(yè)現(xiàn)代化具有重要意義。
[1] H Okamoto,WS Lee.Green citrus detection using hy?perspectral imaging[J].Computers and Electronics in Agricul?ture,2009(2):201-208.
[2] 王利明.機(jī)器視覺中物體識別方法的研究與探討[D].上海:復(fù)旦大學(xué),2009.
[3] 項榮,應(yīng)義斌,蔣煥煜,等.田間環(huán)境下果蔬采摘快速識別與定位方法研究進(jìn)展[J].農(nóng)業(yè)機(jī)械學(xué)報,2013(11):208-223.
[4] 呂新廣,趙美京.CIE LAB色度空間的均勻性研究[J].鄭州大學(xué)學(xué)報(理學(xué)版),2002(1):69-73.
[5] 徐惠榮,葉尊忠,應(yīng)義斌,等.基于彩色信息的樹上柑橘識別研究[J].農(nóng)業(yè)工程學(xué)報,2005(5):98-101.
[6] 石雪強(qiáng),程新文.蘋果采摘機(jī)器人視覺系統(tǒng)的目標(biāo)提取研究[J].農(nóng)機(jī)化研究,2013(10):46-48.
[7] 謝忠紅.采摘機(jī)器人圖像處理系統(tǒng)中的關(guān)鍵算法研究[D].南京:南京農(nóng)業(yè)大學(xué),2013.
[8] Arefi A,Motlagh A M,Mollazade K,et al.Recogni?tion andlocalization of ripen tomato based on machine vision[J].AustralianJournal of Crop Science,2011(10):1144.
[9] 王玉翰.基于雙目立體視覺的番茄識別與定位技術(shù)研究[D].杭州:浙江大學(xué),2012.
[10] 張志強(qiáng),張惠莉.基于神經(jīng)網(wǎng)絡(luò)和圖像顏色、形狀特征的綠色蘋果圖像分割[J].農(nóng)業(yè)網(wǎng)絡(luò)信息,2013(10):20-23.
[11] 王玉飛,尹建軍,仲蘇玉,等.基于特征分析的番茄識別及其軟件的快速開發(fā)[J].計算機(jī)工程與設(shè)計,2011(11):3824-3827.
[12] 黃志開.彩色圖像特征提取與植物分類研究[D].合肥:中國科學(xué)技術(shù)大學(xué),2006.
[13] 鄭向陽,何倩.基于信息熵原理的水果定位檢測方法[J].計算機(jī)仿真,2012(4):279-281.
[14] 謝忠紅,郭小清,姬長英,等.基于顏色模型和紋理特征的彩色水果圖像分割方法[J].計算機(jī)工程與科學(xué),2010(1):64-66.
Overview of Image Features in Fruit Recognition
He Xun
(Machinery College,North China University Of Water Resources And Electric Power,Zhengzhou Henan 450045)
Image feature is the key of fruit recognition,and also the basis of picking robot.This paper ana?lyzed the characteristics of fruit image,introduced the image features of color,shape,texture and other rep?resentative,and described the application characteristics of each image,finally discussed the existing prob?lems and the development trend of image features,in order to provide reference for relevant scholars.
fruit recognition;color feature;shape feature;texture feature
TP391.41
A
1003-5168(2017)11-0034-02
2017-10-09
賀詢(1992-)男,碩士在讀,研究方向:采摘機(jī)器人視覺及控制系統(tǒng)。