《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 基于嵌入式Linux的復雜光照人臉實時檢測研究
基于嵌入式Linux的復雜光照人臉實時檢測研究
2016年微型機與應用第12期
黃世震1,2,黃志勇1,2
(1. 福州大學 物理與信息工程學院,福建 福州 350116; 2. 福建省微電子集成電路重點實驗室,福建 福州 350002)
摘要: 為了滿足嵌入式設備在復雜光照條件下的人臉檢測需求,提出了一種基于光照不變特征的人臉檢測方法。該方法先基于Retinex理論提取光照不變分量,再以MBLBP特征進行AdaBoost人臉檢測。結合該方法,實現了一種基于嵌入式Linux的人臉實時檢測系統。實驗與實際使用結果表明,該人臉檢測系統具有較高的人臉檢出率,且滿足實時性要求。
Abstract:
Key words :

  黃世震1,2,黃志勇1,2

  (1. 福州大學 物理與信息工程學院,福建 福州 350116; 2. 福建省微電子集成電路重點實驗室,福建 福州 350002)

      摘要:為了滿足嵌入式設備在復雜光照條件下的人臉檢測需求,提出了一種基于光照不變特征的人臉檢測方法。該方法先基于Retinex理論提取光照不變分量,再以MBLBP特征進行AdaBoost人臉檢測。結合該方法,實現了一種基于嵌入式Linux的人臉實時檢測系統。實驗與實際使用結果表明,該人臉檢測系統具有較高的人臉檢出率,且滿足實時性要求。

  關鍵詞:人臉檢測;嵌入式;ARM;Retinex;MBLBP;AdaBoost

0引言

  人臉檢測是人臉識別等臉部分析的基礎,其在圖像檢索、目標定位、視頻監控以及智能人機交互等領域具有廣泛的應用前景。經過多年的發展,人臉檢測技術已經取得了很大的進展。與此同時,嵌入式平臺技術突飛猛進,不僅具備體積小、功耗低等特點,而且其運算能力也得到了很大的提高。除了實時性的要求外,光照變化對人臉檢測的影響舉足輕重。國內外研究者對光照處理方法做了大量的研究,主要可分為光照歸一化、人臉建模、光照不變量三類方法。以直方圖均衡化為代表的光照歸一化方法在一定程度上能夠減弱光照變化的影響,但是在復雜光照情況下效果不是很理想。光錐法和球諧函數法等人臉建模方法效果好,但計算量大,難以滿足嵌入式平臺的實時性要求。本文從光照不變量的角度入手,提出了一種結合Retinex理論和MBLBP算子的AdaBoost人臉檢測算法,并在ARM開發板上實現。

1硬件平臺構建

  本文采用處理器為三星Exynos 4412的ARM開發板作為實現平臺,該開發板具有主頻為1.5 GHz的CortexA9 CPU,Mali400 GPU,1 GB DDR3 RAM。采用USB攝像頭作為視頻采集輸入設備,LCD觸控顯示屏作為圖形界面顯示以及觸控操作設備。整個硬件平臺架構如圖1所示。

 

001.jpg

  在PC上的Ubuntu系統中建立交叉編譯環境,裁剪和編譯Linux內核、制作根文件系統,并將Bootloader、Linux內核、根文件系統、USB攝像頭和LCD觸控顯示屏等驅動移植到ARM板上。配置NFS,通過以太網實現PC與ARM板的通信。使用SecureCRT軟件通過串口對ARM板進行調試操作。

2軟件設計

  本文的程序設計用到了開源計算機視覺庫(Open Source Computer Vision Library, OpenCV),圖形用戶界面設計采用Qt,因此需對OpenCV和QtEmbedded進行交叉編譯并移植到ARM板上。整個軟件系統框圖如圖2所示。

002.jpg

  由攝像頭的圖像傳感器將采集到的圖像傳輸到Exynos 4412,經過圖像灰度化、尺寸歸一化等預處理后,提取光照不變分量,再計算其MBLBP值,通過Adaboost算法進行人臉檢測,若檢測到人臉則在顯示區域進行標記。

  2.1圖像采集

  本文基于V4L2[1]進行視頻圖像采集程序設計,其流程圖如圖3所示。

003.jpg

  2.2關鍵算法分析

  2.2.1光照不變分量的提取

  LAND E H等人[2]在輻照度模型的基礎上提出了Retinex理論。物體的顏色不受非均勻性光照的影響,而是取決于物體對不同波長光線的反射能力。圖像中的固有屬性為其反射分量,圖像中的干擾部分為光照分量,可通過去除光照分量保留反射分量,實現光照不變分量的提取。

  輻照度模型可用如下公式表示:

  I(x,y)=R(x,y)L(x,y)(1)

  式中,I(x,y)為采集到的光照圖像,R(x,y)和L(x,y)分別表示圖像在(x,y)處的反射系數和光照分量。

  輻照度模型中,R(x,y)由物體的固有屬性決定,與光照無關,因此Retinex理論的重點在于如何獲得R(x,y)。

  將灰度化的采集圖像變換到對數域,通過低通濾波器分離出光照分量,最后用上述獲得的對數域圖像減去分離出的光照分量獲得光照不變分量。

  對公式(1)進行對數變換得到公式(2):

  I′(x,y)=R′(x,y)+L′(x,y)(2)

  式中,I′(x,y)=logI(x,y),表示對數域的采集圖像;R′(x,y)=logR(x,y),表示對數域的光照不變分量;L′(x,y)=logL(x,y),表示對數域的光照分量。

  這里選用的低通濾波器為極大值濾波器,以保證提取的光照不變分量能有足夠的LBP紋理特征供后續人臉檢測使用。該濾波器提取圖像上(2n+1)×(2n+1)窗口的灰度值,并且將最大的灰度值替換掉當前窗口中心像素點的灰度值,通過該窗口遍歷整幅圖像求得每個像素點的灰度值。其公式如下:

  3.png

  其中I(x,y)為像素點(x,y)的灰度值,I(i,j)為像素點(i,j)的(2n+1)×(2n+1)鄰域內的灰度值。

  本文提取光照不變分量的算法流程如圖4所示。

004.jpg

  2.2.2人臉檢測

  目前廣泛使用的人臉檢測方法是VIOLA P和JONES M J[34]提出的以Haarlike特征和積分圖方法進行人臉檢測的Haar分類器,該方法是基于FREUND Y和SCHAPIRE R E[5]提出的AdaBoost算法。AdaBoost是一種通過迭代的方法將同一訓練集訓練的不同弱分類器提升形成強分類器的算法。

  OJALA T等人[67]提出的局部二值模式(Local Binary Pattern, LBP)是一種圖像局部紋理特征描述算子。原始的LBP定義為:對于每幅圖像上的像素點在其周圍3×3窗口內提取像素值,將周圍8鄰域的灰度值與窗口中心點的灰度值進行比較,若周圍像素點的灰度值大于中心點,則該像素點標記為1,否則為0。用公式表示為:

  HNYLQ5(XGACY1LPNJS8_I3K.png

  式中:(xc, yc)為窗口中心點坐標;ic為中心點的灰度值;ip為相鄰像素的灰度值。

  如圖5所示,周圍8鄰域內的像素灰度值經比較可生成8位二進制數00111101,轉換成十進制數為61,該值即為中心像素點的LBP值,可用來反映該區域的紋理信息[8]。 

005.jpg

  Liao Shengcai等人[9]在原始LBP的基礎上提出了MBLBP (Multiscale Block Local Binary Patterns)。與原始LBP進行單一像素間比較不同的是MBLBP采用了子區域塊的平均像素值進行比較,較好地對不同尺度的紋理信息進行描述,且具有更好的魯棒性。

006.jpg

  以9×9 MBLBP為例,如圖6所示,將一幅圖像的每個子區域等分為9塊,計算這9塊的平均灰度值,按照原始LBP的編碼方式將鄰域的平均灰度值與中心子區域的平均灰度值進行比較,得到的編碼即為中心子區域的特征值。

  LBP特征是整數特征,相比Haar特征,其訓練和檢測速度更快。用LBP特征表征人臉時,對光照變化(除局部劇烈變化之外)不敏感。這一點,在實驗中進行了驗證。本文進行的人臉檢測訓練與測試基本流程如圖7所示。

007.jpg

3測試與分析

  為了驗證本文提出的方法的效果,從CMU和MITCBCL數據庫中選取了625個未參加過訓練的人臉樣本(包括不同復雜光照條件下的人臉)作為測試樣本集。測試實驗結果如表1所示。

009.jpg

  通過實驗,可得知本文訓練的人臉分類器中,MBLBP分類器和IIF+MBLBP分類器的檢測速度相比其他兩個速度更快。在不同復雜光照條件下,MBLBP人臉分類器的檢測率比Haarlike人臉分類器有所提高,但提高并不多,查找漏檢的樣本發現MBLBP分類器相比Haarlike分類器能夠多檢測出一些光照變化的樣本,但對于光照變化劇烈的樣本仍然無法有效檢測出。而采用提取光照不變分量的IIF+Haarlike分類器和IIF+MBLBP分類器均能夠有效檢測出這些光照變化劇烈的樣本,且兩者的檢出率相近。綜合檢出率與檢測速度,在ARM設備上采用IIF+MBLBP人臉分類器進行人臉檢測,不僅滿足實時性要求,而且能夠有效應對不同復雜光照條件下的檢測需求。

  圖8為最終在ARM平臺上實現的人臉實時檢測系統,圖9為該系統在復雜光照條件下的人臉檢測效果。

  

008.jpg

4結論

  本文提出了適用于嵌入式設備的復雜光照人臉實時檢測的方法,通過基于Retinex理論提取光照不變分量,再以MBLBP特征訓練AdaBoost分類器,用該分類器進行人臉檢測。實驗驗證,該方法能夠提高復雜光照情況下的人臉檢出率,且具備較快的檢測速度。最后,在ARM CortexA9平臺上實現了攝像頭人臉實時檢測,經測試與實際使用,整個人臉檢測系統效果良好,為后續研究人臉識別以及其他應用奠定了基礎。

參考文獻

  [1] 徐家,陳奇. 基于V4L2的視頻設備驅動開發[J]. 計算機工程與設計,2010,31(16):35693572.

  [2] LAND E H, MCCANN J. Lightness and Retinex theory [J]. Journal of the Optical Society America, 1971, 61(l):111.

  [3] JONES V M. Rapid object detection using a boosted cascade of simple features[C]. Conference on Computer Vision And Pattern Recognition, 2001:511518.

  [4] VIOLA P, JONES M J. Robust realtime face detection[J]. International Journal of Computer Vision, 2004,57(2):137154.


此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
国产精品久久久久91| 亚洲国产精品成人综合色在线婷婷| 欧美14一18处毛片| 久久国产婷婷国产香蕉| 亚洲欧美日韩综合一区| 一区二区三区欧美亚洲| 99在线热播精品免费99热| 91久久极品少妇xxxxⅹ软件| 亚洲电影免费在线观看| 久久精品亚洲| 亚洲黄色在线看| 亚洲欧洲一二三| 亚洲免费黄色| 一二三区精品| 亚洲视频1区| 亚洲视频在线观看免费| 一区二区三区欧美日韩| 一区二区三区视频在线| 亚洲一级电影| 亚洲摸下面视频| 午夜精品久久久久久久男人的天堂| 亚洲欧美区自拍先锋| 午夜一区二区三区在线观看 | 亚洲在线视频| 亚洲免费在线电影| 欧美一区二区女人| 久久久久成人精品| 美女视频黄a大片欧美| 欧美大片一区| 欧美日韩另类在线| 国产精品爱久久久久久久| 国产精品你懂的在线| 国产免费亚洲高清| 激情久久久久久久久久久久久久久久| 在线精品视频免费观看| 在线日韩av片| 亚洲精品一区在线观看| 中文国产成人精品久久一| 亚洲在线播放| 亚洲成色www8888| 日韩视频三区| 亚洲欧美国内爽妇网| 久久精品视频va| 美日韩在线观看| 欧美日韩亚洲天堂| 国产欧美1区2区3区| 激情欧美丁香| aa成人免费视频| 午夜一区二区三区不卡视频| 亚洲激情偷拍| 亚洲女人天堂av| 久久午夜精品| 欧美日韩精品欧美日韩精品| 国产精品性做久久久久久| 影音先锋日韩精品| 99精品免费视频| 欧美一区二区三区久久精品| 日韩视频不卡中文| 欧美在线观看视频一区二区三区| 久久一区二区三区超碰国产精品| 欧美久久久久久蜜桃| 国产片一区二区| 亚洲激情第一页| 香蕉av福利精品导航| 日韩午夜激情| 久久国产主播精品| 欧美日韩亚洲另类| 激情av一区二区| 一区二区av在线| 亚洲成在人线av| 亚洲欧美日韩国产一区| 猛干欧美女孩| 国产精品一区二区黑丝| 亚洲欧洲日产国产综合网| 亚洲女女做受ⅹxx高潮| 日韩图片一区| 久久美女艺术照精彩视频福利播放| 欧美人与性动交cc0o| 国产一区二区精品久久91| 夜夜嗨av色一区二区不卡| 亚洲福利视频三区| 午夜国产精品影院在线观看| 欧美成人一区二区在线| 国产在线精品二区| 亚洲一区二区三区欧美| 99在线精品视频| 玖玖玖国产精品| 国产欧美日韩一区| 在线综合亚洲欧美在线视频| 亚洲精品美女| 久久嫩草精品久久久精品一| 国产精品高潮呻吟久久av黑人 | 一区二区在线免费观看| 亚洲一区在线视频| 一区二区三区久久网| 欧美18av| 激情亚洲网站| 亚洲女爱视频在线| 亚洲无线视频| 欧美日本三级| 亚洲电影免费观看高清| 久久精品九九| 久久av一区| 国产精品丝袜91| 中文精品99久久国产香蕉| 99视频精品全部免费在线| 美女脱光内衣内裤视频久久影院| 国产一区二区看久久| 亚洲综合三区| 亚洲欧美在线播放| 国产精品美女www爽爽爽视频| 亚洲裸体视频| 一卡二卡3卡四卡高清精品视频| 欧美国产一区二区在线观看| 在线观看免费视频综合| 亚洲福利专区| 美女精品一区| 亚洲国产经典视频| 亚洲精品一区久久久久久| 欧美刺激性大交免费视频| 在线观看日韩一区| 亚洲韩国青草视频| 欧美国产91| 亚洲精品日韩在线观看| 日韩午夜激情| 欧美日韩中文字幕在线| 99视频一区二区三区| 一区二区三区免费观看| 欧美天堂亚洲电影院在线观看| 99国产麻豆精品| 亚洲特色特黄| 国产精品福利在线观看| 亚洲影院污污.| 久久国产加勒比精品无码| 国产色产综合产在线视频| 欧美一区二区免费视频| 久久精品国产亚洲高清剧情介绍| 国产一区二区三区精品欧美日韩一区二区三区 | 国产丝袜一区二区三区| 欧美一区二区视频在线观看| 久久久亚洲精品一区二区三区 | 亚洲国产精品t66y| 欧美+日本+国产+在线a∨观看| 亚洲激情六月丁香| 亚洲视频在线观看三级| 国产精品视频网| 欧美一区二区视频观看视频| 久久综合福利| 亚洲精品在线观看视频| 亚洲天堂网站在线观看视频| 国产精品xxxxx| 欧美一站二站| 欧美激情导航| 亚洲午夜一区二区| 久久亚洲影音av资源网| 亚洲黄色影院| 午夜精品一区二区在线观看| 好吊日精品视频| 99www免费人成精品| 国产精品美女久久久免费| 久久精品国产免费观看| 欧美精品一区二区三区久久久竹菊| 亚洲免费久久| 久久久国产视频91| 亚洲精品久久久一区二区三区| 亚洲免费视频中文字幕| 韩国女主播一区二区三区| 亚洲精品一区二区网址| 国产精品日日摸夜夜摸av| 亚洲激情成人网| 欧美午夜不卡| 久久精品视频导航| 欧美色另类天堂2015| 欧美一级播放| 欧美日韩精品免费观看视频| 欧美一区在线看| 欧美日韩精品免费观看视一区二区| 午夜免费在线观看精品视频| 欧美激情va永久在线播放| 亚洲欧美视频一区二区三区| 欧美成人有码| 亚洲欧美日韩电影| 欧美激情片在线观看| 欧美一激情一区二区三区| 欧美日韩成人在线观看| 欧美一区二区三区视频免费播放 | 国产精品日韩在线| 日韩视频在线观看免费| 国产一区美女| 亚洲欧美综合精品久久成人| 亚洲福利av| 欧美主播一区二区三区美女 久久精品人 | 韩国一区二区三区在线观看| 亚洲午夜精品在线| 亚洲高清在线观看一区| 欧美在线3区| 日韩午夜在线视频| 欧美xart系列高清| 欧美中文字幕在线| 国产精品久久久久久模特|