基于視頻的夜間車輛檢測(cè)

吳 浩，胡永祥

(湖南工業(yè)大學(xué) 計(jì)算機(jī)學(xué)院，湖南 株洲 412000)

基于視頻的夜間車輛檢測(cè)

吳 浩，胡永祥

(湖南工業(yè)大學(xué) 計(jì)算機(jī)學(xué)院，湖南 株洲 412000)

由于夜間道路情況復(fù)雜，光照條件差，使得夜間車輛檢測(cè)成為車輛檢測(cè)技術(shù)的難點(diǎn)。提出一種基于視頻的夜間車輛檢測(cè)方法，首先通過(guò)圖像處理的基本方法提取車前燈，然后通過(guò)對(duì)圖像遍歷以及遍歷后縮小范圍再遍歷來(lái)對(duì)車燈進(jìn)行定位，最后根據(jù)同一車輛兩端車燈位置特征進(jìn)行車燈的匹配。這種方法有效避免了對(duì)含有四個(gè)車前燈車輛的重復(fù)檢測(cè)，以及不同車輛車燈之間的誤匹配。

車輛檢測(cè)；視頻；車燈檢測(cè)

0 引言

隨著計(jì)算機(jī)視覺(jué)技術(shù)的飛速發(fā)展，基于智能視頻監(jiān)控技術(shù)[1]的自動(dòng)全天候進(jìn)行實(shí)時(shí)分析報(bào)警的優(yōu)勢(shì)日益明顯，使其在智能交通系統(tǒng)[2]、平安城市建設(shè)、航道管理和商業(yè)監(jiān)控等領(lǐng)域普遍應(yīng)用，其中在智能交通系統(tǒng)中的應(yīng)用尤為突出。

基于視頻的智能交通系統(tǒng)中車輛檢測(cè)技術(shù)[3]是最關(guān)鍵的環(huán)節(jié)，路況分析、車輛計(jì)數(shù)、無(wú)人駕駛、車輛測(cè)速和智能停車等都必須進(jìn)行車輛檢測(cè)。由于道路情況的復(fù)雜多變、光照條件的變化以及天氣的多變，都給車輛檢測(cè)技術(shù)帶來(lái)巨大的挑戰(zhàn)。白天，光照條件較好，陰影問(wèn)題和遮擋問(wèn)題是其中的難點(diǎn)。在夜間，難點(diǎn)主要在于光線不足、光源相對(duì)較弱、遮擋問(wèn)題以及背景和車輛對(duì)比度非常低。

目前，對(duì)夜間車輛檢測(cè)的研究并不多，文獻(xiàn)[4]提出聯(lián)合時(shí)空信息的夜間車輛提取方法，這種方法使用幀差法提取運(yùn)動(dòng)區(qū)域，均值平滑濾波去除噪聲，Otsu尋找分割閾值，最后提取運(yùn)動(dòng)車輛。這種方法比較局限于運(yùn)動(dòng)車輛，不能對(duì)靜止車輛進(jìn)行檢測(cè)。文獻(xiàn)[5]分為充足照明和低照度兩種情況來(lái)檢測(cè)車輛，充足照明情況下使用梯度濾波去除地面反光，再用幀間差分檢測(cè)運(yùn)動(dòng)區(qū)域，低照度下還引入先驗(yàn)知識(shí)檢測(cè)車前燈，但是該方法局限于運(yùn)動(dòng)車輛。文獻(xiàn)[6]采用一種隔幀幀差和相鄰幀差相結(jié)合的一種累積幀差的方法來(lái)檢測(cè)夜間車輛。使用梯度濾波來(lái)消除路面對(duì)車燈的反光，使用連通域閾值的方法去噪,同樣局限于運(yùn)動(dòng)車輛檢測(cè)[7]。文獻(xiàn)[8]使用了HLEPT算法[9]，這種算法既可以進(jìn)行車的提取，又可以進(jìn)行車燈配對(duì)跟蹤。文獻(xiàn)[10]通過(guò)二值化的方法對(duì)車前燈進(jìn)行分割，并根據(jù)車燈的面積、車燈之間的距離以及車燈的長(zhǎng)寬等條件進(jìn)行匹配，這種方法忽略了并排行駛車輛車燈近似，符合判斷條件產(chǎn)生的誤判。文獻(xiàn)[11]引入改進(jìn)的Boosting模糊算法，也是一種檢測(cè)車燈的方法。通過(guò)SIFT方法[12]和融合多特征方法提取車燈特征，再通過(guò)改進(jìn)的Boosting算法[13]進(jìn)行加權(quán)投票，最后根據(jù)燈光顏色、運(yùn)動(dòng)信息以及車燈空間進(jìn)行匹配。

本文主要研究四個(gè)車前燈車輛的檢測(cè)以及并排行駛相似車輛誤檢率的降低，該方法主要包括車燈的提取和車燈的匹配。首先通過(guò)預(yù)處理以及車燈間的距離提取出同一車輛兩端的車燈，然后再根據(jù)同一車輛兩端車燈位置特征進(jìn)行車燈的匹配。實(shí)驗(yàn)結(jié)果表明，這種方法誤檢率較低。

1 夜間車輛車前燈提取

由于夜間車輛與背景對(duì)比度低，因此很難根據(jù)車輛整體的外形檢測(cè)出車輛，車前燈在夜間照度高，較為明顯且穩(wěn)定性很好，所以可以根據(jù)車前燈來(lái)檢測(cè)車輛。

首先將每一幀圖像轉(zhuǎn)化為灰度圖像，再通過(guò)對(duì)圖像的二值化處理將車燈從灰度圖像中分割出來(lái)，二值化的公式為：

(1)

公式(1)中f(x,y)表示灰度圖像中(x,y)處的灰度值，T為設(shè)置的二值化閾值，即若灰度圖像中(x,y)處灰度值大于T，則在分割后圖像中令其灰度值為255，反之令其灰度值為0。通過(guò)實(shí)驗(yàn)發(fā)現(xiàn)，當(dāng)T的值設(shè)置較大時(shí)，會(huì)將一些車燈照明效果不佳的車輛誤判為背景，且T越大誤判率越高；而若T的值設(shè)置較小，就不會(huì)對(duì)車輛造成誤判，但是受車燈光在地面產(chǎn)生的反射影響，且T越小影響越大。所以需要多次實(shí)驗(yàn)選擇比較適中的T值。如圖1所示，圖1(a)為原圖，圖1(b)即為二值化處理后的圖像。

圖1 車前燈提取

由圖1(b)可見(jiàn)，二值圖像中車燈周圍存在一些噪聲，為了去除二值圖像中產(chǎn)生的噪聲，還應(yīng)對(duì)圖像進(jìn)行腐蝕操作，圖1(c)即為腐蝕操作的結(jié)果圖像，由圖可見(jiàn)，二值圖像中的噪聲明顯減少，但是車燈區(qū)域變小，為了后期的車燈匹配，本文又對(duì)其進(jìn)行了膨脹操作，結(jié)果如圖1(d)所示。

處理后的圖像上方即攝像頭遠(yuǎn)處車燈燈光造成的反射依舊存在，但是離攝像頭距離較近的部分反射已經(jīng)完全去除，所以本文設(shè)置圖像的下面部分作為檢測(cè)區(qū)域，來(lái)進(jìn)行車燈的檢測(cè)匹配，其他區(qū)域不再考慮，這樣不僅可以避免反射的問(wèn)題，還可以提高運(yùn)行速率。這里將檢測(cè)區(qū)域的垂直距離設(shè)置為一輛車的長(zhǎng)度，因?yàn)榕浜舷挛牡臋z測(cè)區(qū)域內(nèi)的車燈匹配，必須保持同一車道內(nèi)最多同時(shí)出現(xiàn)一輛車的車前燈。檢測(cè)區(qū)域劃分結(jié)果如圖1(e)所示，這樣車燈就可以成功地從圖像中提取出來(lái)了。

2 車前燈匹配

2.1 候選車燈定位

車燈分割出來(lái)后，需要對(duì)車燈進(jìn)行定位，為后續(xù)的車燈匹配做準(zhǔn)備工作。傳統(tǒng)的定位方法一般是尋找分割后車燈的輪廓，然后再根據(jù)尋找到的輪廓，計(jì)算出輪廓的最小外接矩形，這樣就可以定位出單個(gè)車燈。但是部分車輛夜晚開(kāi)啟四個(gè)車前燈，傳統(tǒng)方法會(huì)定位出四個(gè)車燈，匹配后就會(huì)造成車輛的重復(fù)檢測(cè)。所以本文使用了一種新的定位方法來(lái)定位車燈，在定位四車燈車輛時(shí)會(huì)將同一側(cè)上下兩個(gè)車燈定位在一起，這樣匹配后就不會(huì)造成車輛的重復(fù)檢測(cè)。

首先對(duì)圖像遍歷，為了避免過(guò)多的重復(fù)計(jì)算，并不需要對(duì)圖片中每個(gè)點(diǎn)進(jìn)行計(jì)算，水平方向和豎直方向每隔一個(gè)固定值計(jì)算一次灰度值。每當(dāng)計(jì)算出的灰度值為255時(shí)，即判斷其為車燈上的一點(diǎn)。然后以該點(diǎn)為中心，周圍固定大小的正方形區(qū)域進(jìn)行遍歷，尋找正方形區(qū)域中所有灰度值為255的點(diǎn)，取其中的最小橫坐標(biāo)、最大橫坐標(biāo)、最小縱坐標(biāo)以及最大縱坐標(biāo)。如圖2所示，設(shè)點(diǎn)A為初次遍歷得到的灰度值為255的點(diǎn)，對(duì)周圍正方形區(qū)域進(jìn)行遍歷，最后得到X1,X2,Y1,Y2,則可以取(X1，Y2)和(X2，Y1)兩點(diǎn)作為矩形對(duì)角點(diǎn)，進(jìn)行定位。

對(duì)于正方形區(qū)域大小的設(shè)置，從兩方面考慮，一是不能夠?qū)⑧徑囕v車燈或者同一車輛另一側(cè)車燈包含進(jìn)來(lái)，二是在開(kāi)啟四車燈的車輛中，必須能夠完全包含一側(cè)的兩個(gè)車燈。如圖2所示，B點(diǎn)周圍的正方形區(qū)域即圖中B點(diǎn)周圍的虛線框，不能夠包含到左邊車燈任何一點(diǎn)，但必須將下方車燈完全包含，這樣才能避免車輛的重復(fù)檢測(cè)。兩車并排行駛時(shí)，兩車之間必須留有一定的車距，而且必須大于某個(gè)值，本文將最小車距稱為安全距離，如圖2中，X2X3即為安全距離，所以正方形區(qū)域的1/2邊長(zhǎng)必須小于X2X3，還要求B點(diǎn)周圍的正方形區(qū)域要將C點(diǎn)所在車燈完全包含進(jìn)來(lái)，然而不會(huì)包含到左邊車輛的車燈，C點(diǎn)周圍的正方形區(qū)域能夠?qū) 點(diǎn)所在車燈完全包含進(jìn)來(lái)。

圖2 車燈的定位

圖3 定位結(jié)果

圖3即為定位的結(jié)果圖，圖中可以看出，檢測(cè)區(qū)域的車燈都被定位出來(lái)了，且四車燈車輛與兩車燈車輛的定位結(jié)果達(dá)到了預(yù)期的效果，為下一步車燈的匹配做好了準(zhǔn)備。

2.2 車燈匹配

車燈定位后，需要對(duì)其進(jìn)行匹配，使得同一車輛車燈配對(duì)到一起，從而檢測(cè)出該車輛。在匹配過(guò)程中，還需要考慮一些特殊情況引起的誤匹配和無(wú)法匹配，比如摩托車等其他車輛車燈對(duì)車燈匹配造成的影響，由于攝像頭角度問(wèn)題導(dǎo)致的同一車輛兩端車燈的大小形狀不一致問(wèn)題，同排車輛車燈大小形狀相似帶來(lái)的誤匹配等問(wèn)題。本文主要通過(guò)車燈的外部形態(tài)特征、車燈的位置以及設(shè)置車道來(lái)對(duì)車燈進(jìn)行匹配。考慮到摩托車等只含單個(gè)車燈車輛的干擾以及汽車一端車燈不亮的概率較低，所以不對(duì)單個(gè)車燈的車輛進(jìn)行檢測(cè)處理。

以檢測(cè)區(qū)域矩形的左下角為原點(diǎn)，水平方向?yàn)閄軸，垂直方向?yàn)閅軸，建立坐標(biāo)系，如圖4所示，則車燈匹配必須滿足一下所有條件：

(1)同一車輛兩端的車燈幾乎處于同一縱坐標(biāo)上，但是由于攝像頭位置以及車輛行駛不可能達(dá)到絕對(duì)地平行于Y軸，因此兩車燈定位矩形的對(duì)角點(diǎn)縱坐標(biāo)之差的絕對(duì)值必須都小于一個(gè)定值b,若b偏大，會(huì)造成不同車輛車燈的無(wú)匹配，若b偏小，會(huì)造成同一車輛車燈無(wú)法匹配，通過(guò)實(shí)驗(yàn)可以得到這個(gè)定值b，如圖4(a)所示。

(2)

(2)同一車輛兩端車燈橫向距離也應(yīng)該在一個(gè)范圍內(nèi)，距離太小和距離很大都不能判定為同一車輛的兩個(gè)車燈，不能進(jìn)行匹配，如圖4(a)所示。

(3)

通過(guò)對(duì)檢測(cè)區(qū)域的車輛取樣，測(cè)出車前兩燈距離，最后可以得到min和max的值。

(3)如果兩輛車的車燈相似度很高，而且并排行駛，很容易同時(shí)符合條件(1)和條件(2)，造成兩車之間的誤匹配。如圖4(a)所示, 車燈I和車燈II很容易配對(duì)成功，檢測(cè)為一輛車，從而形成誤檢。對(duì)于這種情況，選擇了設(shè)置車道的檢測(cè)方法，車道根據(jù)視頻的角度采用手動(dòng)添加的方法，攝像頭固定，這種方法還分為無(wú)車輛變道和有車輛變道兩種情況。

①如果在檢測(cè)區(qū)域內(nèi)沒(méi)有車輛變道，如圖4(a)所示,將檢測(cè)區(qū)域劃分為3個(gè)車道，分別為車道ABCD、CDEF、EFGH，車燈I和車燈II為不同車輛車燈，分別在三個(gè)車道內(nèi)進(jìn)行條件(1)和條件(2)的判別匹配，這樣車燈I和車燈II就不會(huì)進(jìn)行匹配。

圖4車燈匹配模式

②如果在檢測(cè)區(qū)域有車輛發(fā)生變道，如圖4(b)所示,車燈III和車燈IV為同一車輛兩端的車燈，但是在不同的車道，①的方法是無(wú)法進(jìn)行匹配的。所以這里引入虛擬的車道IJKL和KLMN，由于之前將檢測(cè)區(qū)域的寬度設(shè)置為一輛車的長(zhǎng)度，所有一個(gè)車道最多只能有一輛車通過(guò)。首先對(duì)車道ABCD、CDEF以及EFGH進(jìn)行判斷，設(shè)置flag,flag1,flag2都為0，若車道ABCD有車，則設(shè)標(biāo)志flag為1；若車道CDEF有車，則設(shè)標(biāo)志位flag1為1；若車道EFGH有車，則設(shè)標(biāo)志位flag2為1。

若flag+flag1=0，則說(shuō)明車道ABCD和車道CDEF都沒(méi)有車輛通過(guò)，即可啟用車道IJKL，就可以判斷車道ABCD和車道CDEF之間有無(wú)變道車輛。

若flag1+flag2=0,則說(shuō)明車道CDEF和車燈EFGH都沒(méi)有車輛通過(guò)，即可啟用車道KLMN，就可以判斷車道CDEF和車道EFGH之間有無(wú)變道車輛。

通過(guò)這種方法，車燈III和車燈IV就可以完成配對(duì)，即可檢測(cè)出該車輛。

3 實(shí)驗(yàn)

本文使用了夜晚九點(diǎn)左右的單方向三車道道路監(jiān)控視頻作為實(shí)驗(yàn)視頻，對(duì)于由于攝像頭角度問(wèn)題不能完全出現(xiàn)在檢測(cè)區(qū)域的車輛進(jìn)行了人工計(jì)數(shù)，計(jì)算各種情況的準(zhǔn)確率。

如圖5即為實(shí)驗(yàn)結(jié)果截圖，檢測(cè)區(qū)域中的矩形即為設(shè)置的車道，圖5(a)中為三輛車進(jìn)入檢測(cè)區(qū)域被檢測(cè)出來(lái),圖5(b)中檢測(cè)到四車燈車輛。根據(jù)實(shí)驗(yàn)條件，選取靜止車輛30輛、運(yùn)動(dòng)車輛100輛、開(kāi)啟四車燈車輛50輛、開(kāi)啟兩車燈車輛100輛進(jìn)行實(shí)驗(yàn)，表1為對(duì)誤檢率、丟失率以及準(zhǔn)確率的統(tǒng)計(jì)。

圖5 實(shí)驗(yàn)結(jié)果圖

靜止車輛運(yùn)動(dòng)車輛合計(jì)兩車燈四車燈合計(jì)誤檢率/%6.6723.08142丟失率/%3.3311.54222準(zhǔn)確率/%90.009795.38979496

4 結(jié)論

本文提出的車輛夜間檢測(cè)算法包含了車燈的提取以及車燈的匹配，本文方法檢測(cè)對(duì)象可以是運(yùn)動(dòng)車輛也可以是靜止車輛，可以精確地檢測(cè)出兩車燈車輛以及四車燈車輛，雖然沒(méi)有進(jìn)行跟蹤，但是通過(guò)設(shè)置車道的檢測(cè)方法，可以避免車輛的誤檢,具有較低的誤檢率和丟失率。

[1] 黃凱奇,陳曉棠,康運(yùn)峰，等.智能視頻監(jiān)控技術(shù)綜述[J].計(jì)算機(jī)學(xué)報(bào),2015,38(6)：1093-1118.

[2] 陸化普,李瑞敏.城市智能交通系統(tǒng)的發(fā)展現(xiàn)狀與趨勢(shì)[J].工程研究——跨學(xué)科視野中的工程,2014,6(1)：6-22.

[3] 張暉,董育寧.基于視頻的車輛檢測(cè)算法綜述[J].南京郵電大學(xué)學(xué)報(bào),2007,27(3)：88-94.

[4] 李熙瑩,唐佳林,羅東華.聯(lián)合時(shí)空信息的夜間運(yùn)動(dòng)車輛提取算法[J].計(jì)算機(jī)應(yīng)用與軟件,2010,27(10)：126-127,198.

[5] 陳柏生.基于圖像處理的夜視車輛檢測(cè)[J]. 微型機(jī)與應(yīng)用, 2012, 31(5):36-38.

[6] 李從生,柏軍,周廣綠.基于幀差法的夜間城市道路車輛檢測(cè)[J].制造業(yè)自動(dòng)化,2011,33(2)：212-214.

[7] 譚榮偉,雷蘊(yùn)奇,陳柏生.夜間運(yùn)動(dòng)車輛檢測(cè)[J].計(jì)算機(jī)工程與應(yīng)用,2005,41(13):227-228.

[8] Wan Weibing, Fang Tao, Li Shuguang. Vehicle detection algorithm based on light pairing and tracking at nighttime[J].Journal of Electronic Imaging,2011,20(4)：1-10.

[9] Wu Haitao, Hong Huo, Tao Fang, et al. Nighttime video vehicle detection in complex environment[J]. Application Research of Computers, 2007,435(3):927-939.

[10] Zhou Shifu, Li Jianxiong, Shen Zhenqian, et al.A night time application for a real-time vehicle detection algorithm based on computer vision[J].Research Journal of Applied Sciences ,Engineering and Technology,2013,5(10):3037-3043.

[11] 朱韶平.基于改進(jìn)Boosting算法的夜間運(yùn)動(dòng)車輛檢測(cè)[J].寧夏大學(xué)學(xué)報(bào),2014,35(1)：28-32.

[12] KE Y, SUKTHANKAR R. PCA-SIFT: a more distinctive representation for local image descriptors[J]. 2004, 2(2):506-513.

[13] SCHAPIRE R E. The boosting approach to machine learning: an overview[M]. Nonlinear Estimation and Classification. New York: Springer, 2003.

Nighttime vehicle detection based on video

Wu Hao, Hu Yongxiang

(School of Computer Science, Hunan University of Technology, Zhuzhou 412000, China)

Because of the complexity of the road conditions and the poor lighting at night, the vehicle detection at night time is a difficulty for vehicle detection technology. So a nighttime vehicle detection algorithm based on video is proposed. Firstly, the headlights are segmented by the basic method of image processing, and then the headlights are located by traversing the entire image. Finally, the headlights are matched by the position feature of headlights. The method avoids the duplicate detection on vehicle which contains four headlights, and reduces the error matching between different vehicle headlights.

vehicle detection; video; headlight detection

TP391

A

10.19358/j.issn.1674- 7720.2017.20.016

吳浩，胡永祥.基于視頻的夜間車輛檢測(cè)[J].微型機(jī)與應(yīng)用，2017,36(20)：54-56,60.

2017-04-21)

吳浩(1991-)，通信作者，男，在讀碩士研究生，主要研究方向：圖像處理。E-mail:wuhaoycth@sina.com。

胡永祥(1973-)，男，博士，副教授，主要研究方向：圖像處理。