《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 駕駛員眼部疲勞視覺檢測算法及其ARM+DSP實現
駕駛員眼部疲勞視覺檢測算法及其ARM+DSP實現
來源:電子技術應用2012年第2期
孫 偉1,張小瑞1,唐慧強1,張為公2
1.南京信息工程大學 信息與控制學院,江蘇 南京210044; 2.東南大學 儀器科學與工程學院,江蘇 南京210096
摘要: 將ARM+DSP技術應用于駕駛員的疲勞檢測,使用S3C2440作為核心處理器,利用TMS320DM642作為視頻采集處理模塊,詳細討論了硬件平臺與接口的設計。提出了一種簡單有效的基于眼部特征的疲勞駕駛檢測算法,結合單目機器視覺實現了駕駛員眼部睜閉狀態的有效判定和疲勞駕駛的實時檢測。在滬寧高速南京段的實驗結果表明,該算法的實時性與精確性可以滿足安全行駛的要求。
中圖分類號: TP274+.5
文獻標識碼: A
文章編號: 0258-7998(2012)02-0024-04
Eye fatigue vision detection algorithm for driver and realization on ARM+DSP system
Sun Wei1,Zhang Xiaorui1,Tang Huiqiang1,Zhang Weigong2
1.School of Information and Control, Nanjing University of Information Science and Technology, Nanjing 210044,China; 2.School of Instrument Science and Engineering, Southeast University, Nanjing 210096,China
Abstract: The ARM+DSP technology is used to detect the fatigue driving for the drivers. S3C2440 is used as the core processor, TMS320DM642 is utilized as the video capture and processing module, and the design of the hardware platform and the interface is discussed. A simple and effective fatigue driving detection algorithm based on eye feature is proposed to realize the judgement of open-close state of eye and the real-time detection of fatigue driving. Experiments conducted on Hu-ning highway show that the algorithm is fast and accurate for the safety of driving.
Key words : fatigue driving detection;eye feature;improved integral projection;ARM+DSP

    如何為駕駛員提供一個有效實用的安全輔助駕駛系統是車輛安全駕駛的一個重要課題。基于機器視覺的疲勞駕駛檢測技術已在國內外開展了廣泛研究,其中以駕駛員眼部特征的檢測最為廣泛。

    本文以低成本、低功耗、高實時性為設計原則,以ARM+DSP構成硬件平臺,并移植了嵌入式操作系統Windows CE 5.0,設計了一套基于駕駛員眼部特征的疲勞駕駛檢測算法,對駕駛員駕駛過程進行實時檢測和報警,從而提高駕駛的安全性與舒適性。
1 硬件平臺設計
    系統硬件平臺選用三星公司ARM9架構的S3C2440作為核心處理器,利用TI公司的TMS320DM642作為視頻采集處理模塊,其結構框圖如圖1所示。DSP平臺主要負責采集圖像、圖像算法處理,ARM平臺主要完成整個系統的控制處理,兩者之間通過網口實現通信和同步。在系統運行過程中,ARM平臺可實時顯示采集到的視頻以及相應眼部疲勞特征識別的結果,同時用戶可通過觸摸屏交互界面對系統進行設置和控制。為保證系統平臺具有高的可靠性以實現復雜的系統調度,在設計過程中對本系統各平臺進行了操作系統移植,DSP平臺移植了DSP/BIOS系統,ARM平臺移植了Wince操作系統。

    S3C2440是一款基于ARM92OT核的16/32 bit RSIC結構的嵌入式微處理器,主頻為400 MHz,最高可達533 MHz;片內外資源豐富,具有強大的處理能力。系統存儲擴展了64 MB的NANDFlash、64 MB的SDRAM;另外還有2 MB的NORFalsh,用于存放系統引導加載程序[1]。

 


    TMS320DM642芯片[2]能夠實時高速地完成大數據量的數字視頻編解碼處理,是強大的高性能單片多媒體處理器,具有高質量、多通道、優越的視頻處理性能,以及完整的軟件可編程特性;基于C64x系列VelociTI.2DSP 架構的設計,與TI公司其他的C64x數字信號處理器代碼相兼容,擁有500/600 MHz時鐘頻率,性能高,其傳輸速率達4 000/4 800 MIPS;不僅具有C64x系列芯片的主要特征,還高度集成了音視頻等外部設備的接口,方便多媒體應用開發。
2 圖像識別算法
2.1 總體檢測流程

    首先,根據臉部膚色的聚類特性檢測駕駛員臉部位置,在人臉檢測的基礎上,根據眼睛在人臉上的幾何位置分布,確定眼睛的大概位置,縮小眼部檢測的區域范圍;其次,在縮小的眼部搜索區域范圍內,利用Sobel邊緣檢測算法對眼部區域進行邊緣檢測,提取眼部的邊緣信息,并對其進行二值化處理;再對二值化后的眼部區域進行連通成分分析,采用基于區域連通的二值圖像濾波方法去除眼部周圍圖像噪聲點的干擾;然后根據改進的積分投影算法,計算左右眼角和上下眼瞼的距離,確定駕駛員眼睛的睜閉狀態;最后,定義眨眼頻率,并據此實現疲勞駕駛的檢測。具體的算法流程如圖2所示。




3 實驗與分析
    為驗證眼睛疲勞特征檢測算法的有效性,在構建的ARM+DSP系統上對采集到的視頻圖像進行實驗驗證。在滬寧高速南京段的實驗結果表明,該系統將算法處理時間控制在50 ms以內,取得了良好的實時效果,疲勞駕駛檢測正確率達97.6%。部分圖像的眼部區域檢測結果如圖4所示,其中,第一行為人臉檢測后的面部定位圖像,第二行為經Sobel邊緣檢測后的眼部二值圖像,第三行為得到的眼部邊界定位圖像。
    通過觀察發現,通常情況下,駕駛員在睜眼和閉眼時,左、右眼的睜閉情況是同步的,即同時睜開或同時閉合。因此,在對眼睛睜閉狀態進行判斷時,為減少計算量,僅對左眼的睜閉情況進行判斷。針對圖4所示的眼部區域檢測結果,利用式(8)計算其左眼睜閉度的大小,計算結果如表1所示。

    由表1可知,圖4中第一列和第二列所示的眼睛閉合時的睜閉度值明顯小于第三列和第四列所示的眼睛睜開時的睜閉度值。故只要選擇合適的閾值,根據眼睛睜閉度值的大小,就可對駕駛員眼睛的睜閉狀態進行有效判斷。

    本文在ARM+DSP系統上實現了基于眼部特征的疲勞駕駛檢測算法。利用基于膚色聚類的臉部檢測算法確定臉部邊界,采用一種簡單有效的改進積分投影算法,實現了駕駛員眼部睜閉狀態的有效判定和疲勞駕駛的實時檢測。
參考文獻
[1] 楊忻愷,張為公,于兵,等.基于DSP的車載視頻監控存儲系統的設計[J].電子器件,2009,32(4):805-808.
[2] 袁慶輝.基于TMS320DM 642的車道偏離預警系統設計[J].制造業自動化,32(5):70-72.
[3] Li S H,Guo G Z.The application of improved HSV color space model in image processing[C].Proceedings of the 2010 International Conference on Future Computer and Communication,2010:210-213.
[4] LIN H J,WANG S Y,YEN S H,et al.Face detection based on skin color segmentation and neural network[C].Proceedings of 2005 International Conference on Neural Networks and Brain Proceedings,2005:1144-1149.
[5] SUN W,ZHANG W G,LI X,et al.Driving fatigue fusion detection based on T-S fuzzy neural network evolved by subtractive clustering and particle swarm optimization[J].Journal of Southeast University(English Edition),2009,25(3):356-361.

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
国产精品s色| 国产亚洲一区二区在线观看| 午夜国产精品影院在线观看| 亚洲精品视频在线看| 久久国产精品久久久久久| 午夜精品久久久久99热蜜桃导演| 中文一区二区| 正在播放欧美视频| 中文精品视频一区二区在线观看| 亚洲精品女人| 亚洲激情在线激情| 亚洲欧洲视频| 亚洲精品中文字| 99国内精品久久| 一区二区三区高清在线观看| 日韩亚洲一区在线播放| 一本久久精品一区二区| 99精品视频网| 在线性视频日韩欧美| 夜夜嗨av一区二区三区四季av| 日韩视频一区二区在线观看 | 欧美日韩在线观看一区二区| 欧美日韩成人一区二区| 欧美日韩亚洲一区二区三区在线观看| 欧美日韩一本到| 国产精品美女久久久| 国产精品一页| 国产一区视频网站| 在线欧美日韩精品| 亚洲乱码精品一二三四区日韩在线 | 国产精品黄色在线观看| 国产精品日韩一区二区| 国产欧美日韩免费看aⅴ视频| 国产亚洲欧洲一区高清在线观看| 国产一区二区无遮挡| 亚洲第一福利视频| 日韩视频在线免费观看| 亚洲欧美日韩国产成人| 久久狠狠亚洲综合| 日韩午夜中文字幕| 亚洲一区二区网站| 久久激情综合网| 母乳一区在线观看| 欧美色大人视频| 国产亚洲人成网站在线观看 | 亚洲欧洲综合另类| 亚洲性av在线| 欧美在线日韩精品| 亚洲毛片在线免费观看| 亚洲综合视频一区| 久久精品视频va| 欧美韩国在线| 国产精品日韩欧美一区| 一区二区在线观看视频在线观看| 亚洲人成绝费网站色www| 亚洲天堂成人| 亚洲电影下载| 亚洲一级影院| 麻豆国产精品va在线观看不卡| 欧美人与性禽动交情品| 国产日韩欧美三级| 亚洲裸体在线观看| 欧美一二三区精品| 在线亚洲国产精品网站| 久久免费国产精品| 欧美日韩精品一本二本三本| 国产精自产拍久久久久久蜜 | 亚洲日韩视频| 欧美一区二区免费视频| 一本到高清视频免费精品| 久久国产精品亚洲77777| 欧美久久久久中文字幕| 国内精品免费午夜毛片| 一本大道av伊人久久综合| 久久精品视频免费| 午夜激情亚洲| 欧美久色视频| 黄色在线一区| 亚洲一区二区三区四区中文| 亚洲人成网在线播放| 欧美一区二区三区视频免费| 欧美人与性动交α欧美精品济南到| 国产视频观看一区| 夜夜爽www精品| 亚洲精品美女久久久久| 欧美一区视频| 欧美日韩综合在线免费观看| 亚洲成人在线网站| 欧美在线视频免费| 欧美一级二区| 欧美丝袜一区二区| 亚洲国内在线| 久久国内精品视频| 久久av资源网| 国产精品试看| 一本久久综合亚洲鲁鲁五月天| 亚洲韩国日本中文字幕| 久久久不卡网国产精品一区| 国产精品色网| 这里只有精品视频在线| 一本色道久久99精品综合 | 在线激情影院一区| 久久成人综合网| 久久超碰97中文字幕| 国产精品欧美一区二区三区奶水| 99re视频这里只有精品| 亚洲精选在线| 你懂的国产精品永久在线| 国产专区综合网| 亚洲欧美网站| 欧美亚洲一区三区| 国产精品户外野外| 一区二区三区日韩欧美| 中文在线不卡视频| 欧美日本三级| 亚洲欧洲日本一区二区三区| 91久久精品久久国产性色也91| 久久久久久久综合日本| 国产亚洲欧美一级| 欧美一区二区在线看| 久久精品水蜜桃av综合天堂| 国产欧美一区二区精品忘忧草| 亚洲一区二区三区在线播放| 亚洲欧美在线播放| 国产欧美日本一区二区三区| 亚洲香蕉伊综合在人在线视看| 亚洲自拍三区| 国产精品美女午夜av| 亚洲永久在线| 中日韩视频在线观看| 一区二区三区 在线观看视频| 欧美一级视频| 久久综合伊人77777蜜臀| 韩日精品视频| 久久精品国产999大香线蕉| 久久精品在线播放| 伊人蜜桃色噜噜激情综合| 亚洲欧洲综合另类| 欧美精品一卡| 一区二区三区精品在线 | 亚洲无毛电影| 国产精品人人做人人爽 | 亚洲在线中文字幕| 国产精品制服诱惑| 欧美有码在线视频| 免费中文字幕日韩欧美| 日韩手机在线导航| 性欧美xxxx大乳国产app| 国产亚洲在线观看| 亚洲欧洲日产国码二区| 欧美日韩p片| 亚洲性夜色噜噜噜7777| 久久国产精品久久久久久电车| 韩国精品一区二区三区| 亚洲乱码国产乱码精品精98午夜| 欧美日韩极品在线观看一区| 亚洲一区二区视频在线| 久久蜜桃精品| 亚洲三级影院| 午夜伦欧美伦电影理论片| 海角社区69精品视频| 99av国产精品欲麻豆| 国产精品视频免费在线观看| 久久精品免费| 欧美日韩成人精品| 午夜精品亚洲| 欧美二区视频| 亚洲永久网站| 欧美成人69| 亚洲一区日韩在线| 女生裸体视频一区二区三区| 一区二区三区精品| 久久在线免费观看| 日韩亚洲欧美一区| 久久久久www| 一本色道久久88综合亚洲精品ⅰ| 欧美主播一区二区三区| 亚洲人成在线观看网站高清| 欧美一级成年大片在线观看| 亚洲激情电影在线| 欧美中文在线观看国产| 亚洲精品国精品久久99热一| 久久不见久久见免费视频1| 亚洲精品久久久久久下一站| 久久精品中文字幕一区二区三区| 日韩视频一区二区| 久久一区二区三区超碰国产精品| 9l国产精品久久久久麻豆| 久久深夜福利免费观看| 夜夜爽www精品| 欧美成人黑人xx视频免费观看| 亚洲综合日本| 欧美日本韩国一区| 亚洲电影专区| 国产精品一区二区三区四区| 99在线热播精品免费| 极品少妇一区二区三区精品视频| 亚洲在线视频免费观看| 亚洲国产一区视频| 久久婷婷蜜乳一本欲蜜臀|