基于OpenCV的人眼檢測及疲勞判斷

浙江大學城市學院信息與電子工程系 尚麗娜 石晴瑤 方 健

引言：個人駕駛出行所具備的高自由度以及私家車的大范圍普及給人們提供了便利的同時也帶來了很多安全隱患。車輛駕駛者特別是長途貨運司機和客運司機若是沒有得到良好且充沛的休息時間，就很有可能會引發(fā)疲勞駕駛。而在公路尤其是高速公路上駕駛員必須時時刻刻保持警惕清醒的駕駛狀態(tài)，一恍惚的走神都有可能引發(fā)交通事故從而造成嚴重的后果甚至危及人命，與此相比疲勞駕駛更是可怕。人處在疲勞狀態(tài)中是不會有平時那么快的反應(yīng)時間和平時那么敏捷的反應(yīng)能力的，在車來車往的馬路上這種狀態(tài)更是可能造成嚴重的交通事故，且根據(jù)相關(guān)統(tǒng)計，疲勞駕駛所引發(fā)的交通事故的數(shù)量占事故總數(shù)的一大部分，而在日常生活中因疲勞而導(dǎo)致的工作效率降低以及不必要的麻煩也十分常見。而疲勞駕駛以及各項因疲勞狀態(tài)而導(dǎo)致的事故所發(fā)生的大部分原因是參與者并未意識到自己已經(jīng)身處疲勞狀態(tài)，所以在意識到自己已處于疲勞狀態(tài)之前及時讓自己得到提醒可以讓許多因疲勞而帶來的后果避免發(fā)生，從而大大降低各種因疲勞而導(dǎo)致的事故發(fā)生?；诖朔N現(xiàn)狀，設(shè)計了疲勞檢測系統(tǒng)，可以對被測者進行疲勞程度檢測，并進行相應(yīng)提醒，從而避免很多事故的發(fā)生。

1.系統(tǒng)框架設(shè)計

圖1 設(shè)計流程框圖

人眼檢測率離不開人眼檢測算法和多次定時獲取當前幀圖像的操作，這一切又都是以圖像數(shù)據(jù)的獲取作為前提的。該人眼檢測及疲勞檢測系統(tǒng)的主要流程劃分為六個，分別是“獲取圖像”部分，“人臉檢測”部分，“人眼區(qū)域計算”部分，“人眼檢測”部分，“單位時間人眼檢測率計算”部分以及“結(jié)果判定”部分，如圖1所示。

單單使用現(xiàn)成的人眼檢測算法會帶來很大的誤判率，既影響成果的使用效率，也影響結(jié)果的正確率。先進行人臉檢測后再通過坐標的方式進行區(qū)域劃分和人眼長度與寬度的預(yù)測來確定人眼區(qū)域，使用這種方式大大提高了人臉人眼檢測的準確率和效率。

2.系統(tǒng)設(shè)計原理

在開始疲勞檢測之前需要先打開攝像頭來完成圖像數(shù)據(jù)的采集或是使用按鈕打開圖片獲取圖像，完成圖像數(shù)據(jù)采集之后需要完成圖像數(shù)據(jù)的傳輸，接下來使用已有的人臉檢測算法來檢測出人臉的所在位置，之后再通過對人臉長度人臉寬度進行計算來完成坐標的設(shè)置，再以程序編寫的形式實現(xiàn)人臉上人眼區(qū)域的位置預(yù)估及大小計算，并在通過預(yù)測計算得出的區(qū)域進行人眼檢測，從而提高人眼檢測的工作效率以及減少誤判概率。因為人處于疲勞狀態(tài)時人眼的張開力度會出現(xiàn)明顯的減小，現(xiàn)成的人眼檢測算法在人眼張開力度較小時檢測不到人眼，所以可以將單位時間內(nèi)的人眼檢測率數(shù)值作為疲勞判斷的重要依據(jù)。同時檢測到人眼后以人眼的張開的寬敞比例進行人物疲勞程度的再次判斷。

圖2 級聯(lián)分類器

本系統(tǒng)中的人臉檢測使用Adaboost級聯(lián)分類器。haar分類器的結(jié)構(gòu)如下。

Haar分類器 = Haar-like特征+積分圖方法+Adaboost+級聯(lián)

圖3 程序?qū)υ捒蚪缑?/p>

圖4 測試結(jié)果1

圖5 測試結(jié)果2

Haar分類器由Haar-like特征加積分圖加Adaboost再加級聯(lián)構(gòu)成，具體強分類器的方式如下。

haar分類器可由多個強分類器進行級聯(lián)組合，級聯(lián)分類器圖像如圖2所示。

3.系統(tǒng)設(shè)計實現(xiàn)

3.1 檢測前的圖像預(yù)處理

圖像數(shù)據(jù)的預(yù)先處理過程主要包括了“灰度化cvtColor”處理和“直方圖均衡化EqualizeHist”處理；因為在對物體的識別過程中，識別的關(guān)鍵就是對物體邊緣的認識程度，而影響對物體邊緣認知程度的本質(zhì)在于梯度，可是計算梯度時所要求的處理對象必須是灰度圖，所以在進行檢測之前先對圖像進行灰度化處理是不可少的預(yù)備工作。經(jīng)過這些處理之后再進行人臉檢測，可以獲得不錯的檢測效果。

圖像預(yù)處理的部分代碼實現(xiàn)如下所示。

3.2 人眼區(qū)域的劃分

因為直接采用現(xiàn)成的人眼檢測算法進行人眼檢測會因為檢測區(qū)域較大的因素而存在不小的誤判率，與此同時檢測效率也較低，會導(dǎo)致整個程序的響應(yīng)變慢。而在進行人眼檢測模塊之前，先利用已經(jīng)訓(xùn)練好的結(jié)果進行人臉的檢測，再通過對人眼位置的預(yù)測而進行人眼區(qū)域的劃分，最后再在劃分出來的人眼區(qū)域內(nèi)通過現(xiàn)成訓(xùn)練好的XML文件進行人眼檢測。因此，在正式進行人眼檢測的工作前先進行人眼區(qū)域的預(yù)測劃分是具有實用特質(zhì)的。

通過對人臉的長度采集以及人臉寬度采集，并對采集到的數(shù)據(jù)加以數(shù)據(jù)運算，可以得到人眼區(qū)域的大致位置以及區(qū)域大小。同時實現(xiàn)對人左眼位置和右眼位置的分別預(yù)測，在完成人眼區(qū)域的預(yù)測之后再針對預(yù)測出來的區(qū)域進行人眼檢測可以在很大程度上提高人眼檢測的準確率，并且在此同時可以大大提高工作效率，為實時輸出判斷結(jié)果打下基礎(chǔ)。

3.3 疲勞判斷

被測者在比較疲勞的時候，眼睛會張開比較小，甚至有可能偶爾閉上，這種情況下，用已有的人眼檢測算法不能檢測到人眼，所以可以通過最終能否檢測出人眼來判斷是否疲勞。在此基礎(chǔ)上再次在檢測到人眼后通過人眼的長寬比例來判定人物的疲勞程度。

3.4 實時輸出

為了實現(xiàn)實時輸出，需要先獲取當前的時間，函數(shù)GetTime()可以幫助我們實現(xiàn)這一功能，主要代碼如下。

4.系統(tǒng)實現(xiàn)及評價

系統(tǒng)最終實現(xiàn)的運行對話框界面如圖3所示。

人臉及人眼的區(qū)域在左側(cè)，通過矩形框了出來，在眼睛正常張開的情況下，檢測結(jié)果區(qū)（在后側(cè)）快速地輸出了檢測時間及檢測結(jié)果偏精神的結(jié)論，如圖4所示。

被測者減小了眼睛的張開力度，顯示出疲勞狀態(tài)，檢測結(jié)果變?yōu)槠?，如圖5所示。

在被測者戴眼鏡和不戴眼鏡的不同情況下，該程序都能檢測出被測者的疲勞程度。

5.結(jié)論

本系統(tǒng)能夠快速進行人眼區(qū)域劃分及疲勞判斷，并且檢測結(jié)果區(qū)迅速輸出檢測結(jié)果；在是否佩戴眼鏡的兩種情況下都能保持較為良好的工作效率和準確率。

經(jīng)過測試，該程序性能穩(wěn)定，效果良好。