《電子技術應用》
您所在的位置:首頁 > 測試測量 > 設計應用 > 基于全局運動補償的多運動目標檢測方法研究
基于全局運動補償的多運動目標檢測方法研究
來源:電子技術應用2011年第1期
王洪斌1, 趙振涌2, 顧 彪1, 殷永凱1, 賈桂敏1
1. 天津大學 微光機電系統技術教育部重點實驗室,天津300072; 2. 北京自動化控制設備研究所, 北京100074
摘要: 提出了一種動態背景下的對多個運動目標檢測的完整方法。利用基于宏塊匹配的六參數全局運動估計方法進行全局運動補償,有效地消除了攝像機在非穩定運動情況下對目標檢測性能帶來的不利影響。同時在宏塊匹配前進行了預處理,通過預判提取紋理信息豐富的宏塊,并在宏塊匹配的過程中采用九點十字搜索算法取代傳統的三步搜索算法,減少了匹配數據量。通過六參數運動模型計算得到攝像機全局運動參數,然后對運動背景進行全局補償。補償后經過后處理提取運動區域。實驗證明,本方法能夠有效地檢測出動態背景下的運動目標。
中圖分類號: TP391.41
文獻標識碼: A
文章編號: 0258-7998(2011)01-0110-04
Research on multi-moving object detection algorithm based on global motion compensation
Wang Hongbin1, Zhao Zhenyong2, GU Biao1, Yin Yongkai1, Jia Guimin1
1. The Ministry of Education Key Laboratory of Micro-Opto-Electro-Mechanical System Technology, Tianjin University, Tianjin 300072, China; 2. Beijing Institute of Automatic Control Equipment, Beijing 100074, China
Abstract: A multi-moving target detection algorithm is completely proposed. Global motion compensation in image sequences is realized to overcome the detrimental effects of target detection performance when camera motion in unstable situation by six-parameter global motion estimation method via template image matching. At the same time the project extracted the texture of information-rich macro block by macroblock pre-sentence,use nine-point and cross search algorithm to replace the traditional three-step search algorithm in the process of image matching.This approach reduces the amount of data matching. Calculating can obtain the camera global motion parameters,and then globally compensate the motion background by using bilinear interpolation method.Before detecting moving targets eventually,there are lots of steps results show that this method can effectively detect the moving target in dynamic background.
Key words : dynamic background; target detection; global motion compensation; nine-point cross search method


    基于視頻的目標檢測技術是計算機視覺的主要研究方向之一,它是智能監控、移動機器人視覺導航、武器引導、全景戰車等應用的基礎和關鍵技術,具有十分重要的研究價值[1]。
    目標檢測分為多種類型。按照攝像機是否運動可分為兩種情況:靜態背景下的運動目標檢測與跟蹤,通常指攝像機相對背景靜止的狀態,如用于交通路口的安全監控系統;動態背景下的運動目標檢測與跟蹤,通常指攝像機相對背景發生運動的狀態,如利用單攝像機進行全景監控、機載航空相機、彈載的紅外CCD攝像頭[2]。在動態背景下,由于背景和前景都是運動的,相對靜態背景要準確檢測和跟蹤目標要復雜和困難得多。
    本文主要針對復雜動態廣場背景下單攝像機對多個運動目標進行檢測的情況,在傳統方法的基礎上,提出了一套更完善、實時性和魯棒性更優的基于全局運動補償的解決方案。該方法建立了攝像機全局運動參數模型,通過背景補償將動態背景下的檢測問題轉化為在靜態背景下的檢測問題。
1 動態背景下的多目標檢測
    目前在動態背景下解決目標檢測的問題主要有兩大思路:(1)根據基于目標模板特征的方法。這種方法背景是否運動對其影響不是很大,但是在目標特征不明顯的情況下難以做到準確地提取目標;(2)基于背景補償的方法。通過全局運動估計得到的全局運動參數估算攝像機運動模型,在進行差分圖像提取目標前進行背景補償,消除全局運動帶來的影響[3]。本文采用基于全局運動補償的方法實現目標檢測。
1.1 全局運動估計
    全局運動估計是指對視頻序列中造成背景運動的攝像機運動進行估計,其目的是要從視頻序列中找出造成全局運動的攝像機運動的規律,從而將動態序列間的背景對準消除,檢測出前景目標[4]。
    圖1為本文動態背景下基于全局運動補償的運動目標檢測的流程圖。

    首先通過全局運動估計和補償將相鄰幀間背景對準,再通過幀間差分消除動態背景,最后對差分圖像進行二值化以及一系列后處理從而獲取前景運動目標。
1.1.1 常用的攝像機運動模型[5]
    如圖2所示,攝像機把三維空間點(X,Y,Z)映射到二維空間平面點(x,y)上。圖像平面與Z軸垂直,中心坐標為(0,0,f)(f表示攝像機的焦距)。

    在笛卡爾坐標系里,如果三維場景中的物體的運動為
1.1.3 遞歸最小二乘法計算全局運動參數
    為了消除匹配不精確的宏塊所得到的光流場的影響,需要對參數估計進行遞歸計算,將得到的六個參數重新計算各個宏塊的光流場,并與宏塊匹配算法得到的光流場進行比較,將光流計算誤差較大的宏塊進行剔除[6]。利用剩余的宏塊重新估計全局運動參數,如果遞歸反復,則直到(a1,a2,a3,a4,a5,a6)收斂至一個穩定的結果。
1.2 圖像剪裁、紋理提取與宏塊預判
    為了提高運動估計的魯棒性,本文采用了基于宏塊匹配的方法計算參數。把分辨率為320×240的K+1幀圖像分為20×15個宏塊,對第K幀進行匹配。分割宏塊后的圖像如圖3所示。

    為了提高運動估計的實時性,本文從以下幾個方面進行了優化。
1.2.1 圖像剪裁
    當攝像機運動時,相鄰幀的背景不重合,由圖4所示第K+1幀和第K幀圖像的位置關系,第K幀中的S1區域背景在第K+1幀中消失,而第K+1幀中出現新背景S2,由于背景運動在各個方向上都有可能發生,假設相鄰幀的運動范圍不超過L1(>L2),以圖4中所示,樣本宏塊只需在S3區域中選取,而不必全屏宏塊匹配,以縮小計算量。

1.2.2 紋理提取與宏塊預判
    運用遞歸最小二乘法估計全局運動時,光流計算不準確的宏塊不參與最終的參數估計,但在計算光流場時,卻花費了相當一部分的時間來匹配計算光流。而本文在計算光流場之前已提前剔除可能導致不準確光流估計的宏塊,因此,很大程度上降低了計算量,增加了全局運動估計的實時性。
    圖5是原圖像和canny算子紋理提取后結果。圖像紋理提取后,對每個宏塊進行預分析,通過設定閾值,剔除可能導致不準確光流估計的宏塊,只留下紋理信息量較多的宏塊參與光流估計。

    圖6為宏塊預判后的實驗結果,歸一化后閾值T取值為0.2,其分辨率為320×240,4個邊緣各去除掉10個像素后,將圖像分為20×15個宏塊,每個宏塊尺寸為15×15。
    宏塊預判后,宏塊數量得到減少,由原來的300個宏塊減少為105個,約占原來總宏塊數的35%。
1.3 宏塊匹配與九點十字搜索法
1.3.1 宏塊匹配

    宏塊模板匹配法原理圖如圖7所示。宏塊模板匹配法以一個目標圖像為模板,用目標模板與待匹配圖像的各個子區域圖像進行一定的匹配準則計算,找到和目標模板最相似的子圖像位置[7]。本文即從圖4的S3區域里找出宏塊預判后保留的宏塊與其最佳匹配塊之間的相對位移,即為該宏塊的運動向量,參與后續的全局運動估計的計算,S3即為匹配相關區域。

   衡量兩圖像塊間相似性的準則稱為匹配準則。匹配準則的好壞直接影響到搜索過程的復雜性以及運動向量估計的精確性。其中均方誤差定義準則為:
 
    MSE利用差值的平方,可以放大微小差別,本文采用的就是MSE匹配準則。
1.3.2九點十字搜索法
    在進行宏塊匹配時,利用宏塊在待匹配圖像上的搜索區域內滑動,每滑動一次就進行一次匹配計算,以找到最佳匹配。這種方法被稱為全搜索法,精確度高,但計算量大,是一個相當耗時的過程。
    近年來,出現了很多種快速的搜索算法代替全搜索法,比較常用的有:三步搜索法、對數搜索法、鉆石搜索法和一些相應的改進算法。這些快速搜索法在候選的運動矢量位置的預定子集上評測準則函數,檢測點數目會大大少于全搜索法[8]。
    本文結合三步搜索法和鉆石搜索法各自的優點提出了一種九點十字搜索法(E3SS),如圖8所示。搜索窗寬度為5,即搜索范圍是(i±5,j±5)。

    (1)搜索模板上的9個檢測點,如果最小塊誤差MBD
(Minimum Block Distortion)點(MSE值最小的點),在搜索窗口的中心則算法結束。
    (2)如果MBD點位于中心點的4個相鄰點中,移動十字小模板到上一步的MBD點,繼續搜索十字小模板中其他點,直到MBD點是十字中心的點或者十字小模板到達搜索窗口邊緣為止。如圖9(a)所示,點(0,-1)是第一步的MBD點,也是第二階段的MBD點,且位于搜索窗中心,故最終運動矢量就是(0,-1)。圖9中每個點上的數字表示不同階段搜索時的檢測點。

    (3)如果MBD點是大十字中的4點之一,搜索方法同三步搜索法類似,即將步長減半,中心點移到上一步的MBD點,重新在周圍距離步長的4個點處進行塊匹配計算并比較。重復此步驟,直到步長為1,該點所在位置即對應最優運動矢量。如圖9(b)所示,(0,4)是第一步的MBD點,然后以(0,4)為中心點進行第二步搜索,此時搜索半徑已經縮減為2像素,最后以當前MBD點(-2,4)完成第三步搜索,找到最優匹配點。
    利用預測幀的峰值信噪比PSNR來度量搜索的準確性,同時選取多個不同性質的序列圖像來檢測算法的穩定性,選取全搜索算法FS、菱形搜索算法DS,以對比九點十字算法的各項性能,其結果如表1所示。

    從表1可以看出,相對FS和DS算法,九點十字算法(E3SS)在時間上的優勢非常大,在提高了搜索速度的同時也保證了搜索精度,其精度除了比FS算法略低外,比目前流行的DS算法都有細微程度的提高。

 
    雙線性內插值法計算量大,但縮放后圖像質量高,不會出現像素值不連續的情況。
1.5 運動目標區域提取[9]
    此時得到的K的補償幀Kcomp與幀K+1的背景基本對準,對所得圖像進行非線性平滑濾波消除噪聲,然后通過進行幀間差分即可消除背景獲得前景運動區域。但圖中除了運動目標之后,還存在一些小面積的干擾區域以及一些小面積的空洞。本文先對二值化后的圖像進行區域標記,對二值圖像的每個不同的連通域進行不同的編號,通過對各個區域中像素個數的計算獲得各個區域的面積。將面積小于設定閾值的區域剔除。對得到的二值圖像先進行膨脹運算再進行腐蝕運算,從而獲得運動目標的完整輪廓和區域,最終檢測出目標。
2 實驗結果
    圖10為在原圖像上的檢測結果,從中可以看出,其中一個人體目標由于只有頭部和腿部動作比較明顯而被檢測出來,被分成了兩個目標,但是可以在跟蹤過程中通過對目標的顏色特征和運動特性的分析和處理,區別目標,并將本為同一目標的部分合成(由于跟蹤過程不是本文重點,在此處就不再鰲述)。圖11所示為最終的檢測結果。

    本文深入研究了動態背景下對多目標檢測的一種有效方法。基于全局運動補償消除了背景運動對目標檢測的影響,在宏塊匹配時提出了九點十字搜索法增強了檢測的實時性,通過處理后的結果可以看出,整套算法是行之有效的,并且有很強的魯棒性,為后續跟蹤過程奠定了良好的基礎。
參考文獻
[1] 賈桂敏.基于物體局部信息的跟蹤算法研究[D]. 天津:天津大學精密儀器與光電子工程學院,2008.
[2] 王研.動態背景下目標跟蹤若干技術問題的研究[D].天津:天津大學精密儀器與光電子工程學院,2007.
[3] BEYMER D,MCLAUCHLAN P F,COIFMAN B,et al. A real-time computer vision system for measuring traffic parameters[C]. In Proceeding. of the IEEE Conference. on  Computer     Vision and Pattern Recognition,1997.
[4] HEUER J, KAUP A. Global motion estimation in image sequences using robust motion vector field segmentation[C]. In:Proceeding of the 7th ACM International conference on   ultimedia,Sydney,Australia,1999.
[5] 吳思.視頻運動信息分析技術研究[D].沈陽:中國科學院計算技術研究所,2005.
[6]  張竟.動態圖像序列中運動目標檢測若干技術問題的研究[D].天津:天津大學精密儀器與光電子工程學院,2007.
[7]  陳敏慎.運動目標物體實時追蹤圖像匹配法的研究[D].哈爾濱:哈爾濱工業大學,2003.
[8]  劉海華.雙十字搜索算法的快速塊匹配運動估計[J].計算機研究與發展,2006,43(9):1666-1673.
[9]  劉文耀.光電圖像處理[M].北京:電子工業出版社,2002:122-355.

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
亚洲欧美成人在线| 亚洲网在线观看| 亚洲深夜福利| 亚洲激情自拍| 亚洲激情在线观看| 亚洲国产成人在线播放| 激情文学一区| 一区精品在线| 在线观看中文字幕不卡| 伊人狠狠色j香婷婷综合| 狠狠色丁香婷婷综合久久片| 国产午夜精品一区理论片飘花| 国产精品人成在线观看免费| 国产精品久久久久久模特| 欧美日韩一区二| 欧美日韩少妇| 国产精品电影在线观看| 国产精品久久久久国产a级| 欧美午夜精品久久久久久孕妇| 欧美视频成人| 国产精品进线69影院| 国产精品麻豆va在线播放| 国产精品久久久久久久久果冻传媒 | 中文网丁香综合网| 亚洲一区二区三区免费在线观看| 宅男66日本亚洲欧美视频| 亚洲天堂av在线免费| 亚洲欧美日韩一区二区在线 | 亚洲福利国产| 亚洲日本视频| 一区二区三区三区在线| 亚洲一区二区精品在线| 性欧美大战久久久久久久久| 久久不射电影网| 久久亚洲综合网| 欧美成人a视频| 欧美日韩美女在线观看| 国产精品男人爽免费视频1| 亚洲一区在线播放| 日韩视频永久免费| 一区二区国产精品| 亚洲欧美激情视频在线观看一区二区三区 | 免费观看久久久4p| 欧美屁股在线| 国产精品尤物| …久久精品99久久香蕉国产| 亚洲精品中文字幕在线| 亚洲永久网站| 亚洲人成在线观看网站高清| 亚洲调教视频在线观看| 久久国产精品99国产| 欧美刺激性大交免费视频| 国产精品福利在线观看网址| 国内精品亚洲| 一区二区三区精品久久久| 久久精品91久久香蕉加勒比 | 欧美另类极品videosbest最新版本| 欧美日韩一区在线| 国产日韩欧美不卡在线| 亚洲高清一区二区三区| 亚洲一区二区三区四区在线观看| 久久爱另类一区二区小说| 一本色道久久综合狠狠躁的推荐| 欧美有码在线观看视频| 欧美国产精品久久| 国产精品系列在线播放| 亚洲激情av| 午夜免费在线观看精品视频| 亚洲精品资源| 久久精品国产91精品亚洲| 欧美日韩大片| 激情久久影院| 亚洲伊人色欲综合网| 亚洲精华国产欧美| 性色av一区二区三区在线观看| 欧美大胆成人| 国产视频欧美视频| 99国产精品久久久久久久久久 | 黄色亚洲大片免费在线观看| 亚洲图片欧洲图片av| 亚洲人成网站999久久久综合| 羞羞答答国产精品www一本| 欧美激情女人20p| 国产一区在线看| 中日韩视频在线观看| 亚洲精品韩国| 久久久蜜桃一区二区人| 国产精品男女猛烈高潮激情 | 噜噜噜91成人网| 国产精品私拍pans大尺度在线| 亚洲人成网在线播放| 欧美资源在线观看| 欧美在线观看一区二区三区| 欧美日韩免费网站| 亚洲黄色影院| 亚洲激情第一页| 久久人人爽人人爽爽久久| 国产欧美精品一区| 亚洲网址在线| 亚洲一区二区在线免费观看视频| 欧美激情导航| 亚洲国产高清自拍| 亚洲国产天堂久久综合网| 久久久久久久久综合| 国产美女精品视频免费观看| 亚洲特级片在线| 亚洲一区免费视频| 欧美四级伦理在线| 日韩视频免费大全中文字幕| 亚洲美女毛片| 欧美激情第4页| 亚洲欧洲一级| 一本色道久久综合狠狠躁篇怎么玩 | 久久激情视频| 国产日韩欧美制服另类| 亚洲女人天堂av| 午夜精品久久久久久久久 | 午夜综合激情| 欧美在线网址| 国产一区二区| 久久精品国产77777蜜臀 | 国产精品美女久久久免费| 洋洋av久久久久久久一区| 一区二区三区高清在线| 欧美日韩四区| 亚洲午夜精品网| 亚洲欧美一级二级三级| 国产精品亚洲精品| 午夜亚洲福利在线老司机| 久久精品导航| 韩国一区电影| 亚洲人午夜精品免费| 欧美精品一二三| 在线亚洲国产精品网站| 午夜精品福利视频| 国产欧美精品| 亚洲福利免费| 欧美精品电影| 一区二区精品国产| 欧美一区二区三区播放老司机| 国产日韩在线一区| 亚洲国产欧美日韩| 欧美喷水视频| 亚洲欧美精品一区| 久久久久久穴| 91久久精品www人人做人人爽| 在线视频亚洲一区| 国产美女高潮久久白浆| 亚洲福利国产精品| 欧美日韩国产影院| 亚洲欧美另类综合偷拍| 老司机午夜免费精品视频 | 亚洲一区欧美一区| 久久久999精品| 亚洲国产成人精品久久久国产成人一区| 亚洲日本中文| 国产精品国产三级国产普通话三级 | 91久久精品国产91久久性色tv| 亚洲午夜视频| 国产午夜精品久久| 亚洲人在线视频| 国产精品美女www爽爽爽| 久久精品99国产精品| 欧美日韩精品一二三区| 亚洲欧美卡通另类91av| 蜜臀久久99精品久久久画质超高清| 亚洲六月丁香色婷婷综合久久| 香蕉久久a毛片| 亚洲第一区中文99精品| 亚洲欧美韩国| 亚洲国产精品va| 欧美影院精品一区| 最新日韩精品| 欧美中文日韩| 亚洲美女一区| 久久精品日产第一区二区三区| 亚洲美女性视频| 久久人体大胆视频| 亚洲图片欧美午夜| 能在线观看的日韩av| 亚洲综合导航| 欧美久久电影| 久久精品首页| 国产精品欧美久久| 99精品热6080yy久久| 国产永久精品大片wwwapp| 亚洲视频在线观看免费| 一区精品在线| 新片速递亚洲合集欧美合集| 1024亚洲| 久久久久国产精品一区二区| 99亚洲精品| 麻豆精品一区二区综合av| 亚洲免费在线视频| 欧美日韩国产天堂| 亚洲狠狠丁香婷婷综合久久久| 国产乱肥老妇国产一区二 | 亚洲精品四区| 老牛国产精品一区的观看方式| 亚洲欧美日韩精品久久亚洲区|