《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 嵌入式技術(shù) > 設(shè)計應(yīng)用 > 交通場景中的實時多目標(biāo)自動跟蹤算法
交通場景中的實時多目標(biāo)自動跟蹤算法
2015年電子技術(shù)應(yīng)用第10期
隋修武,田 松,余保付,葛 輝
(天津工業(yè)大學(xué) 機械工程學(xué)院 天津市現(xiàn)代機電裝備技術(shù)重點實驗室,天津300387)
摘要: 針對交通場景中多目標(biāo)跟蹤過程中實時性和魯棒性的問題,提出一種基于混合高斯和稀疏光流的多目標(biāo)自動跟蹤算法。該算法利用自適應(yīng)背景差分法提取前景目標(biāo),用特征點對目標(biāo)進行表達,通過稀疏光流算法建立起前后幀間的數(shù)據(jù)關(guān)聯(lián),并通過模版更新機制來降低可能的較大形變帶來的干擾。實驗結(jié)果表明,該算法適用于多數(shù)交通場景,實時性較好,對光照和噪聲都具有很強的魯棒性,可以實現(xiàn)對多目標(biāo)的準(zhǔn)確而又穩(wěn)定的跟蹤。
中圖分類號: TP391.4
文獻標(biāo)識碼: A
DOI:10.16157/j.issn.0258-7998.2015.10.038

中文引用格式: 隋修武,田松,余保付,等. 交通場景中的實時多目標(biāo)自動跟蹤算法[J].電子技術(shù)應(yīng)用,2015,41(10):139-142,146.
英文引用格式: Sui Xiuwu,Tian Song,Yu Baofu,et al. Real time multi-objects automatic tracking algorithm in traffic scene[J].Application of Electronic Technique,2015,41(10):139-142,146.
Real time multi-objects automatic tracking algorithm in traffic scene
Sui Xiuwu,Tian Song,Yu Baofu,Ge Hui
Tianjin Key Laboratory of Advanced Mechatronics Equipment Technology, School of Mechanical Engineering,Tianjin Polytechnic University,Tianjin 300387,China
Abstract: To address the issue of real-time and robustness to the multi-objects detection and tracking technology in traffic scene, this paper presentes a real time multi-objects automatic tracking algorithm base on Gaussian mixture and sparse optical flow. Moving targets were extracted by adaptive background subtraction algorithm and feature points were used to express targets. Then it established the data association between correlating frames by sparse optical flow algorithm. And it used the template update mechanism to deal with the problem of the big deformation. Experimental results show that the proposed method can be applied to most traffic scenes. It is robust to light and noise and can realize accurate and stable tracking of multi targets.
Key words : multi-objects tracking;Gaussian mixture;sparse optical flow;template update

 

0 引言

  隨著城市化進程的加快,交通狀況日益惡化,基于視頻的檢測和跟蹤逐漸成為受到關(guān)注的研究領(lǐng)域。目前目標(biāo)跟蹤技術(shù)的難點有數(shù)據(jù)的關(guān)聯(lián)問題、顏色的相似性、背景的穩(wěn)定性和復(fù)雜性、目標(biāo)尺寸的變化和實時性等[1-2]。目標(biāo)跟蹤常用的方法有:基于顏色特征的Meanshift和Camshift[3-4],基于貝葉斯估計的卡爾曼濾波[5],基于蒙特卡洛方法的粒子濾波[6-7],還有基于光流計算的光流跟蹤[8-9]。然而在跟蹤的過程中,如果目標(biāo)與背景顏色相近或目標(biāo)之間顏色相近,則基于顏色特征的跟蹤方法會失效;實際場景中目標(biāo)的運動比較復(fù)雜,而卡爾曼濾波器要求目標(biāo)具有線性高斯運動的特性,因此跟蹤效果不理想;粒子濾波在跟蹤多目標(biāo)時,實時性是一個突出的問題,時間開銷會隨著目標(biāo)數(shù)的增多而呈指數(shù)性增長;光流分為稠密光流和稀疏光流,而稠密光流需要計算圖像中的所有像素點,效率低。

  針對以上問題,提出一種結(jié)合混合高斯模型和稀疏光流的多目標(biāo)跟蹤算法。

1 算法基本思想


001.jpg

  本文算法框架如圖1所示,首先通過混合高斯模型進行背景建模,背景差分獲得前景區(qū)域,形態(tài)學(xué)處理和濾波得到前景目標(biāo),同時在車輛進入場景的入口處設(shè)定車輛檢測區(qū)域,進行新目標(biāo)的進入檢測,從而確定進入場景中目標(biāo)的個數(shù),這樣可以通過先驗知識提前避免對整個場景進行目標(biāo)的檢測,提高效率的同時又能在后續(xù)非檢測區(qū)域進行跟蹤時一定程度上規(guī)避目標(biāo)的合并與分離的問題;然后對檢測到的車輛目標(biāo)進行Harris特征點的提取,用提取的特征點對目標(biāo)進行標(biāo)識,這樣不僅對噪聲不敏感,還可以抵抗光照變換帶來的影響;接著對提取的特征點進行光流運動估計,預(yù)測特征點的運動位置,然后在跟蹤的過程中適時地對目標(biāo)跟蹤模版進行更新,從而保證了目標(biāo)跟蹤的準(zhǔn)確性和穩(wěn)定性;而且本算法采用無監(jiān)督的運動目標(biāo)檢測、提取和跟蹤,實現(xiàn)在視頻序列中自動檢測并跟蹤多目標(biāo)。

2 新目標(biāo)檢測與提取

  2.1 前景分割

  利用混合高斯模型建立起背景圖像,通過當(dāng)前幀圖像與背景圖像的差分獲得包含運動目標(biāo)的前景圖像。由于背景建模的精確性,會有一些前景的像素沒有檢測出來,形成空洞,還有一些背景的像素由于誤檢測而被判定為前景,成為一些零星的噪聲點。所以需要對前景圖像進行進一步的處理,在對前景圖像進行二值化操作之后,利用高斯濾波和中值濾波進行平滑處理和去噪處理,這時得到的圖像再利用形態(tài)學(xué)處理使得前景區(qū)域更加完整。

  2.2 新目標(biāo)的檢測

  在視頻圖像上設(shè)定新目標(biāo)的進入檢測區(qū)域,來捕捉新目標(biāo)的出現(xiàn)。在這過程中建立潛在目標(biāo)列表(potential_list),通過測量目標(biāo)的中心位置(xc,yc)記錄目標(biāo)的狀態(tài),用這個測量和新目標(biāo)建立關(guān)聯(lián)來定義新目標(biāo)的出現(xiàn),根據(jù)車輛相對場景的位置大小設(shè)立閾值(xT,yT),若|xc-xT|≤T或|yc-yT|≤T(T為常數(shù))則判定為新目標(biāo)出現(xiàn),然后用矩形框來擬合目標(biāo)輪廓,把擬合的矩形框加入到待跟蹤目標(biāo)列表(temp_list)當(dāng)中,得出運動目標(biāo)描述的矩形。

  2.3 目標(biāo)提取與標(biāo)識

  在捕捉到新目標(biāo)之后,就需要對新目標(biāo)建立跟蹤關(guān)系。由于車輛目標(biāo)為剛體且紋理豐富,可以提取出一定數(shù)量而且可以精確定位穩(wěn)定的特征點,因此本文采用基于Harris特征點的數(shù)據(jù)關(guān)聯(lián)跟蹤,利用Harris特征點來標(biāo)識目標(biāo)。Harris特征檢測器是一種經(jīng)典的角點檢測方法,在紋理信息豐富的區(qū)域,Harris可以提取出大量有用的特征點,而且Harris的計算公式中只涉及到一階導(dǎo)數(shù),因此對圖像旋轉(zhuǎn)、灰度變化、噪聲影響和視點變換不敏感。

3 多目標(biāo)的跟蹤

  3.1 Lucas-Kanade(LK)光流

  LK光流算法是一種應(yīng)用最廣泛的求稀疏光流的方法, LK光流算法基于以下三點假設(shè):

  (1)亮度恒定,即像素在幀間運動時,像素值保持不變;

  (2)圖像的變化相對于時間的變化微?。?/p>

  (3)在一個小的局部區(qū)域(n×n)內(nèi)像素運動一致,亮度恒定。

  由假設(shè)(1)可得:

  V]L0E{3YCK91(Y}(MF~I51Z.png

  3.2 特征點聚類成目標(biāo)

  通過光流運動估計,在當(dāng)前幀中找到上一幀目標(biāo)框中的特征點在這一幀中的對應(yīng)位置,然后將這若干個特征點在相鄰兩幀之間的位移變化進行排序,得到位移變化的中值(um,vm),把(um,vm)作為目標(biāo)中心點的位移變化,即目標(biāo)中心xci=xci-1+um,yci=yci-1+vm,計算特征點之間x向的最大距離Xmax和y向的最大距離Ymax。

  3.3 模版更新策略

  為了使跟蹤算法能夠適應(yīng)目標(biāo)自身的旋轉(zhuǎn)與尺度變化,需要在跟蹤過程中對目標(biāo)跟蹤模板進行更新。令n0為目標(biāo)初始特征點個數(shù),ni為第i幀圖像中光流估計目標(biāo)區(qū)域內(nèi)的特征點個數(shù)。當(dāng)著時初步判斷需要更新模板。然后提取當(dāng)前幀目標(biāo)所在位置的前景區(qū)域,并用矩形框進行擬合,矩形框面積用Si表示,Si-1表示上一幀目標(biāo)框的面積。若OXTIC])40M](X8Y42}RXFQQ.png則說明目標(biāo)發(fā)生了遮擋,則暫時不進行模版更新,否則會出現(xiàn)“漂移”現(xiàn)象,從而可能導(dǎo)致跟蹤目標(biāo)丟失,直到檢測到遮擋結(jié)束則繼續(xù)進行模版更新,若AI6V]_%UY7E2`1EJ{MA1WAI.png則更新目標(biāo)區(qū)域,提取目標(biāo)特征點,然后更新模版。模版更新流程如圖2所示。

002.jpg

  4 實驗結(jié)果與分析

  為了驗證本算法的有效性,分別對智能卡口、城市道路、高速公路3種不同的場景以及不同的視角進行了多個運動目標(biāo)的實時自動跟蹤。

003.jpg

  3種場景下的車輛跟蹤結(jié)果如圖3所示,可以看到本算法整體的跟蹤效果。如圖3(a)、3(c)所示,在跟蹤車輛的過程中生成目標(biāo)的運動軌跡;如圖3(c)所示,在車輛跟蹤的同時,對車流量進行了一個統(tǒng)計。如圖4(a)所示,被跟蹤車輛在發(fā)生轉(zhuǎn)彎時車輛發(fā)生較大形變導(dǎo)致原先的一部分特征點失效,直至跟蹤丟失。而在圖4(b)中,本文提出的跟蹤算法具備自檢能力則很好地解決了目標(biāo)發(fā)生形變時跟蹤失敗的問題。

004.jpg

  表1記錄了不同視頻段的跟蹤情況,以及處理不同視頻段時的處理速度。圖5分別展示了3段視頻每幀的處理時間,可以看出處理時間呈階梯狀分布,階梯的高低表示處理目標(biāo)個數(shù)的不同,如表2所示。

008.jpg

5 結(jié)論

  針對車輛的多目標(biāo)跟蹤中出現(xiàn)的難點,本文提出一種車輛的實時自動跟蹤算法,該算法利用GMM進行背景建模,結(jié)合形態(tài)學(xué)濾波處理分割提取出前景目標(biāo),利用Harris特征點對目標(biāo)進行標(biāo)識,然后運用特征光流運動估計進行基于角點動態(tài)特征的跟蹤,并在跟蹤的過程中適時進行模版的自動更新。實驗結(jié)果表明,該方法也能很好地適應(yīng)目標(biāo)尺度的變化,通過設(shè)置車輛的存在和消失參數(shù),實現(xiàn)車輛運動目標(biāo)的自動跟蹤,并具有較好的實時性。本文算法存在的一個局限是當(dāng)目標(biāo)個數(shù)過多或跟蹤目標(biāo)被嚴(yán)重遮擋時,跟蹤效果則不是很理想。因此,在今后還需要對目標(biāo)遮擋跟蹤作進一步的研究。

參考文獻

  [1] YANG H,SHAO L,ZHENG F,et al.Recent advances and trends in visual tracking: a review[J].Neurocomputing,2011,74(18):3823-3831.

  [2] 侯志強,韓崇昭.視覺跟蹤技術(shù)綜述[J].自動化學(xué)報,2006,32(4):603-617.

  [3] LI Z,TANG Q L,SANG N.Improved mean shift algorithm for occlusion pedestrian tracking[J].Electronics Letters,2008,44(10):622-623.

  [4] 夏瑜,吳小俊,馮振華.基于特征貢獻度的Mean Shift 視頻跟蹤算法[J].控制與決策,2012,27(7):1021-1026.

  [5] 戴洪德,陳明,周紹磊,等.基于支持向量機的自適應(yīng)卡爾曼濾波技術(shù)研究[J].控制與決策,2008,23(8):949-952.

  [6] 陳金廣,馬麗麗,陳亮.基于邊緣粒子濾波的目標(biāo)跟蹤算法研究[J].計算機工程與應(yīng)用,2010,46(28):128-131.

  [7] 李培華.一種新穎的基于顏色信息的粒子濾波器跟蹤算法[J].計算機學(xué)報,2009,32(12):2454-2463.

  [8] BRUHN A,WEICKERT J.Combining local and global opticflow methods[J].International Journal of Computer Vision,2005,61(3):211-231.

  [9] TU D W,JIANG J L.Improved algorithm for motion image based on optical flow and its application[J].Optics Precision Engineering,2011,19(5):1159-1164.


此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
美女久久一区| 欧美精品情趣视频| 99re亚洲国产精品| 亚洲黄页一区| 欧美在线一二三四区| 亚洲你懂的在线视频| 一区二区国产在线观看| 日韩午夜高潮| 一本不卡影院| 一区二区三区四区五区精品| 99亚洲视频| 99视频精品| 一区二区欧美日韩| 亚洲视频一二| 亚洲夜间福利| 午夜精品免费| 久久九九热re6这里有精品| 欧美影院一区| 午夜日韩在线| 欧美一区二区三区四区在线 | 亚洲在线网站| 亚洲你懂的在线视频| 欧美一区三区三区高中清蜜桃| 欧美中文在线观看国产| 久久精品国产77777蜜臀| 亚洲国产精品成人| 亚洲免费av网站| 亚洲天堂免费观看| 亚洲欧美视频在线| 久久国产主播| 蜜臀91精品一区二区三区| 欧美黄色免费网站| 欧美亚洲成人免费| 国产欧美一区二区精品婷婷| 国语自产精品视频在线看| 永久免费精品影视网站| 亚洲黄一区二区三区| 一本一道久久综合狠狠老精东影业 | 欧美在线不卡视频| 91久久视频| 亚洲午夜成aⅴ人片| 久久99伊人| 男女精品视频| 国产精品99一区| 国产亚洲欧美色| 91久久国产综合久久蜜月精品| 99综合视频| 欧美一级片久久久久久久| 亚洲国内高清视频| 亚洲综合欧美| 老司机aⅴ在线精品导航| 欧美欧美天天天天操| 国产精品普通话对白| 一区福利视频| 国内精品国产成人| 欧美日本韩国| 国产日韩视频一区二区三区| 亚洲国产精品久久久久久女王| 99re66热这里只有精品3直播| 亚洲欧美资源在线| 亚洲理论电影网| 欧美一区二区三区四区在线| 欧美成人国产va精品日本一级| 国产精品国产一区二区| 激情视频亚洲| 中文在线不卡视频| 亚洲黄色三级| 亚洲欧美在线磁力| 欧美国产精品一区| 国产色产综合色产在线视频 | 狠狠干综合网| av成人动漫| 亚洲国产精品久久久久| 亚洲综合清纯丝袜自拍| 欧美va日韩va| 国产欧美日韩在线视频| 亚洲精品国产无天堂网2021| 欧美在线关看| 亚洲一区二区三区视频| av成人天堂| 噜噜噜在线观看免费视频日韩| 国产精品久久久久91| 亚洲第一色在线| 欧美一级成年大片在线观看| 国产精品99久久久久久久女警| 久久免费国产精品| 国产精品视频你懂的| 亚洲精品视频啊美女在线直播| 欧美在线视频导航| 亚洲女性喷水在线观看一区| 欧美黄色成人网| 影音先锋久久精品| 欧美一乱一性一交一视频| 亚洲欧美日本精品| 欧美日韩成人一区二区| 1024日韩| 久久精品亚洲精品| 欧美诱惑福利视频| 国产精品久久久久久av福利软件| 国产欧美va欧美va香蕉在| 亚洲精品美女久久久久| 亚洲激情国产精品| 久久只精品国产| 国产一区二区三区在线播放免费观看| 亚洲尤物视频网| 亚洲一区二区四区| 欧美日韩八区| 亚洲激情黄色| 免费不卡欧美自拍视频| 亚洲天堂网在线观看| 制服丝袜激情欧洲亚洲| 欧美精品一区二区三区四区| 在线观看亚洲| 亚洲韩国日本中文字幕| 乱码第一页成人| 伊人精品久久久久7777| 久久精品国产综合精品| 久久av在线看| 亚洲国产精品电影| 亚洲精品一区二区三区在线观看| 99综合在线| 亚洲人体偷拍| 亚洲国产日韩一级| 亚欧成人在线| 亚洲精品免费一区二区三区| 亚洲免费播放| 久久国产精品99精品国产| 久久夜色精品国产噜噜av| 欧美三日本三级少妇三2023| 欧美三级视频在线观看| 国产欧美大片| 国产精品极品美女粉嫩高清在线 | 亚洲视频欧美在线| 亚洲国产91精品在线观看| 午夜欧美视频| 午夜精品视频网站| 亚洲国内欧美| 亚洲欧美日韩国产一区| 亚洲激情视频| 亚洲精品中文字幕女同| 亚洲精品久久久久久一区二区| 在线欧美亚洲| 亚洲一区一卡| 亚洲欧美成人精品| 久久久999成人| 亚洲高清视频在线观看| 亚洲电影免费观看高清完整版在线观看| 一区二区三区欧美视频| 久久岛国电影| 国产精品分类| 亚洲国产精品久久久久秋霞蜜臀| 中文av一区特黄| 亚洲欧美日韩在线播放| 亚洲国产三级网| 久久精品毛片| 欧美乱妇高清无乱码| 妖精成人www高清在线观看| 欧美一区永久视频免费观看| 黑人操亚洲美女惩罚| 亚洲精品一二区| 国产精品久久久久久久午夜| 欧美中在线观看| 欧美精品日韩精品| 亚洲一区图片| 欧美aⅴ99久久黑人专区| 99riav1国产精品视频| 久久国产手机看片| 最新成人在线| 欧美一区二区三区久久精品茉莉花| 狠狠色丁香久久婷婷综合丁香| 夜夜爽www精品| 国产日韩欧美精品一区| 亚洲精品国产精品国自产在线| 欧美新色视频| 亚洲国产精品精华液网站| 欧美色视频一区| 亚洲高清在线观看| 欧美日韩在线视频一区二区| 欧美一区网站| 欧美四级电影网站| 亚洲电影免费观看高清完整版| 国产精品播放| 欧美男人的天堂| 亚洲国产精品成人综合色在线婷婷| 欧美激情一区二区三区在线视频观看| 亚洲午夜极品| 欧美成年人在线观看| 亚洲欧美制服另类日韩| 欧美精品啪啪| 久久精品国产99精品国产亚洲性色 | 欧美一区二区免费视频| 欧美精品在线视频| 久久9热精品视频| 国产精品ⅴa在线观看h| 亚洲欧洲午夜| 国产视频精品va久久久久久| 一本久久青青| 亚洲成在线观看| 久久久精品动漫| 亚洲深夜福利视频|