《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 嵌入式技術(shù) > 設(shè)計應(yīng)用 > 交通場景中的實時多目標(biāo)自動跟蹤算法
交通場景中的實時多目標(biāo)自動跟蹤算法
2015年電子技術(shù)應(yīng)用第10期
隋修武,田 松,余保付,葛 輝
(天津工業(yè)大學(xué) 機械工程學(xué)院 天津市現(xiàn)代機電裝備技術(shù)重點實驗室,天津300387)
摘要: 針對交通場景中多目標(biāo)跟蹤過程中實時性和魯棒性的問題,提出一種基于混合高斯和稀疏光流的多目標(biāo)自動跟蹤算法。該算法利用自適應(yīng)背景差分法提取前景目標(biāo),用特征點對目標(biāo)進行表達,通過稀疏光流算法建立起前后幀間的數(shù)據(jù)關(guān)聯(lián),并通過模版更新機制來降低可能的較大形變帶來的干擾。實驗結(jié)果表明,該算法適用于多數(shù)交通場景,實時性較好,對光照和噪聲都具有很強的魯棒性,可以實現(xiàn)對多目標(biāo)的準(zhǔn)確而又穩(wěn)定的跟蹤。
中圖分類號: TP391.4
文獻標(biāo)識碼: A
DOI:10.16157/j.issn.0258-7998.2015.10.038

中文引用格式: 隋修武,田松,余保付,等. 交通場景中的實時多目標(biāo)自動跟蹤算法[J].電子技術(shù)應(yīng)用,2015,41(10):139-142,146.
英文引用格式: Sui Xiuwu,Tian Song,Yu Baofu,et al. Real time multi-objects automatic tracking algorithm in traffic scene[J].Application of Electronic Technique,2015,41(10):139-142,146.
Real time multi-objects automatic tracking algorithm in traffic scene
Sui Xiuwu,Tian Song,Yu Baofu,Ge Hui
Tianjin Key Laboratory of Advanced Mechatronics Equipment Technology, School of Mechanical Engineering,Tianjin Polytechnic University,Tianjin 300387,China
Abstract: To address the issue of real-time and robustness to the multi-objects detection and tracking technology in traffic scene, this paper presentes a real time multi-objects automatic tracking algorithm base on Gaussian mixture and sparse optical flow. Moving targets were extracted by adaptive background subtraction algorithm and feature points were used to express targets. Then it established the data association between correlating frames by sparse optical flow algorithm. And it used the template update mechanism to deal with the problem of the big deformation. Experimental results show that the proposed method can be applied to most traffic scenes. It is robust to light and noise and can realize accurate and stable tracking of multi targets.
Key words : multi-objects tracking;Gaussian mixture;sparse optical flow;template update

 

0 引言

  隨著城市化進程的加快,交通狀況日益惡化,基于視頻的檢測和跟蹤逐漸成為受到關(guān)注的研究領(lǐng)域。目前目標(biāo)跟蹤技術(shù)的難點有數(shù)據(jù)的關(guān)聯(lián)問題、顏色的相似性、背景的穩(wěn)定性和復(fù)雜性、目標(biāo)尺寸的變化和實時性等[1-2]。目標(biāo)跟蹤常用的方法有:基于顏色特征的Meanshift和Camshift[3-4],基于貝葉斯估計的卡爾曼濾波[5],基于蒙特卡洛方法的粒子濾波[6-7],還有基于光流計算的光流跟蹤[8-9]。然而在跟蹤的過程中,如果目標(biāo)與背景顏色相近或目標(biāo)之間顏色相近,則基于顏色特征的跟蹤方法會失效;實際場景中目標(biāo)的運動比較復(fù)雜,而卡爾曼濾波器要求目標(biāo)具有線性高斯運動的特性,因此跟蹤效果不理想;粒子濾波在跟蹤多目標(biāo)時,實時性是一個突出的問題,時間開銷會隨著目標(biāo)數(shù)的增多而呈指數(shù)性增長;光流分為稠密光流和稀疏光流,而稠密光流需要計算圖像中的所有像素點,效率低。

  針對以上問題,提出一種結(jié)合混合高斯模型和稀疏光流的多目標(biāo)跟蹤算法。

1 算法基本思想


001.jpg

  本文算法框架如圖1所示,首先通過混合高斯模型進行背景建模,背景差分獲得前景區(qū)域,形態(tài)學(xué)處理和濾波得到前景目標(biāo),同時在車輛進入場景的入口處設(shè)定車輛檢測區(qū)域,進行新目標(biāo)的進入檢測,從而確定進入場景中目標(biāo)的個數(shù),這樣可以通過先驗知識提前避免對整個場景進行目標(biāo)的檢測,提高效率的同時又能在后續(xù)非檢測區(qū)域進行跟蹤時一定程度上規(guī)避目標(biāo)的合并與分離的問題;然后對檢測到的車輛目標(biāo)進行Harris特征點的提取,用提取的特征點對目標(biāo)進行標(biāo)識,這樣不僅對噪聲不敏感,還可以抵抗光照變換帶來的影響;接著對提取的特征點進行光流運動估計,預(yù)測特征點的運動位置,然后在跟蹤的過程中適時地對目標(biāo)跟蹤模版進行更新,從而保證了目標(biāo)跟蹤的準(zhǔn)確性和穩(wěn)定性;而且本算法采用無監(jiān)督的運動目標(biāo)檢測、提取和跟蹤,實現(xiàn)在視頻序列中自動檢測并跟蹤多目標(biāo)。

2 新目標(biāo)檢測與提取

  2.1 前景分割

  利用混合高斯模型建立起背景圖像,通過當(dāng)前幀圖像與背景圖像的差分獲得包含運動目標(biāo)的前景圖像。由于背景建模的精確性,會有一些前景的像素沒有檢測出來,形成空洞,還有一些背景的像素由于誤檢測而被判定為前景,成為一些零星的噪聲點。所以需要對前景圖像進行進一步的處理,在對前景圖像進行二值化操作之后,利用高斯濾波和中值濾波進行平滑處理和去噪處理,這時得到的圖像再利用形態(tài)學(xué)處理使得前景區(qū)域更加完整。

  2.2 新目標(biāo)的檢測

  在視頻圖像上設(shè)定新目標(biāo)的進入檢測區(qū)域,來捕捉新目標(biāo)的出現(xiàn)。在這過程中建立潛在目標(biāo)列表(potential_list),通過測量目標(biāo)的中心位置(xc,yc)記錄目標(biāo)的狀態(tài),用這個測量和新目標(biāo)建立關(guān)聯(lián)來定義新目標(biāo)的出現(xiàn),根據(jù)車輛相對場景的位置大小設(shè)立閾值(xT,yT),若|xc-xT|≤T或|yc-yT|≤T(T為常數(shù))則判定為新目標(biāo)出現(xiàn),然后用矩形框來擬合目標(biāo)輪廓,把擬合的矩形框加入到待跟蹤目標(biāo)列表(temp_list)當(dāng)中,得出運動目標(biāo)描述的矩形。

  2.3 目標(biāo)提取與標(biāo)識

  在捕捉到新目標(biāo)之后,就需要對新目標(biāo)建立跟蹤關(guān)系。由于車輛目標(biāo)為剛體且紋理豐富,可以提取出一定數(shù)量而且可以精確定位穩(wěn)定的特征點,因此本文采用基于Harris特征點的數(shù)據(jù)關(guān)聯(lián)跟蹤,利用Harris特征點來標(biāo)識目標(biāo)。Harris特征檢測器是一種經(jīng)典的角點檢測方法,在紋理信息豐富的區(qū)域,Harris可以提取出大量有用的特征點,而且Harris的計算公式中只涉及到一階導(dǎo)數(shù),因此對圖像旋轉(zhuǎn)、灰度變化、噪聲影響和視點變換不敏感。

3 多目標(biāo)的跟蹤

  3.1 Lucas-Kanade(LK)光流

  LK光流算法是一種應(yīng)用最廣泛的求稀疏光流的方法, LK光流算法基于以下三點假設(shè):

  (1)亮度恒定,即像素在幀間運動時,像素值保持不變;

  (2)圖像的變化相對于時間的變化微?。?/p>

  (3)在一個小的局部區(qū)域(n×n)內(nèi)像素運動一致,亮度恒定。

  由假設(shè)(1)可得:

  V]L0E{3YCK91(Y}(MF~I51Z.png

  3.2 特征點聚類成目標(biāo)

  通過光流運動估計,在當(dāng)前幀中找到上一幀目標(biāo)框中的特征點在這一幀中的對應(yīng)位置,然后將這若干個特征點在相鄰兩幀之間的位移變化進行排序,得到位移變化的中值(um,vm),把(um,vm)作為目標(biāo)中心點的位移變化,即目標(biāo)中心xci=xci-1+um,yci=yci-1+vm,計算特征點之間x向的最大距離Xmax和y向的最大距離Ymax。

  3.3 模版更新策略

  為了使跟蹤算法能夠適應(yīng)目標(biāo)自身的旋轉(zhuǎn)與尺度變化,需要在跟蹤過程中對目標(biāo)跟蹤模板進行更新。令n0為目標(biāo)初始特征點個數(shù),ni為第i幀圖像中光流估計目標(biāo)區(qū)域內(nèi)的特征點個數(shù)。當(dāng)著時初步判斷需要更新模板。然后提取當(dāng)前幀目標(biāo)所在位置的前景區(qū)域,并用矩形框進行擬合,矩形框面積用Si表示,Si-1表示上一幀目標(biāo)框的面積。若OXTIC])40M](X8Y42}RXFQQ.png則說明目標(biāo)發(fā)生了遮擋,則暫時不進行模版更新,否則會出現(xiàn)“漂移”現(xiàn)象,從而可能導(dǎo)致跟蹤目標(biāo)丟失,直到檢測到遮擋結(jié)束則繼續(xù)進行模版更新,若AI6V]_%UY7E2`1EJ{MA1WAI.png則更新目標(biāo)區(qū)域,提取目標(biāo)特征點,然后更新模版。模版更新流程如圖2所示。

002.jpg

  4 實驗結(jié)果與分析

  為了驗證本算法的有效性,分別對智能卡口、城市道路、高速公路3種不同的場景以及不同的視角進行了多個運動目標(biāo)的實時自動跟蹤。

003.jpg

  3種場景下的車輛跟蹤結(jié)果如圖3所示,可以看到本算法整體的跟蹤效果。如圖3(a)、3(c)所示,在跟蹤車輛的過程中生成目標(biāo)的運動軌跡;如圖3(c)所示,在車輛跟蹤的同時,對車流量進行了一個統(tǒng)計。如圖4(a)所示,被跟蹤車輛在發(fā)生轉(zhuǎn)彎時車輛發(fā)生較大形變導(dǎo)致原先的一部分特征點失效,直至跟蹤丟失。而在圖4(b)中,本文提出的跟蹤算法具備自檢能力則很好地解決了目標(biāo)發(fā)生形變時跟蹤失敗的問題。

004.jpg

  表1記錄了不同視頻段的跟蹤情況,以及處理不同視頻段時的處理速度。圖5分別展示了3段視頻每幀的處理時間,可以看出處理時間呈階梯狀分布,階梯的高低表示處理目標(biāo)個數(shù)的不同,如表2所示。

008.jpg

5 結(jié)論

  針對車輛的多目標(biāo)跟蹤中出現(xiàn)的難點,本文提出一種車輛的實時自動跟蹤算法,該算法利用GMM進行背景建模,結(jié)合形態(tài)學(xué)濾波處理分割提取出前景目標(biāo),利用Harris特征點對目標(biāo)進行標(biāo)識,然后運用特征光流運動估計進行基于角點動態(tài)特征的跟蹤,并在跟蹤的過程中適時進行模版的自動更新。實驗結(jié)果表明,該方法也能很好地適應(yīng)目標(biāo)尺度的變化,通過設(shè)置車輛的存在和消失參數(shù),實現(xiàn)車輛運動目標(biāo)的自動跟蹤,并具有較好的實時性。本文算法存在的一個局限是當(dāng)目標(biāo)個數(shù)過多或跟蹤目標(biāo)被嚴(yán)重遮擋時,跟蹤效果則不是很理想。因此,在今后還需要對目標(biāo)遮擋跟蹤作進一步的研究。

參考文獻

  [1] YANG H,SHAO L,ZHENG F,et al.Recent advances and trends in visual tracking: a review[J].Neurocomputing,2011,74(18):3823-3831.

  [2] 侯志強,韓崇昭.視覺跟蹤技術(shù)綜述[J].自動化學(xué)報,2006,32(4):603-617.

  [3] LI Z,TANG Q L,SANG N.Improved mean shift algorithm for occlusion pedestrian tracking[J].Electronics Letters,2008,44(10):622-623.

  [4] 夏瑜,吳小俊,馮振華.基于特征貢獻度的Mean Shift 視頻跟蹤算法[J].控制與決策,2012,27(7):1021-1026.

  [5] 戴洪德,陳明,周紹磊,等.基于支持向量機的自適應(yīng)卡爾曼濾波技術(shù)研究[J].控制與決策,2008,23(8):949-952.

  [6] 陳金廣,馬麗麗,陳亮.基于邊緣粒子濾波的目標(biāo)跟蹤算法研究[J].計算機工程與應(yīng)用,2010,46(28):128-131.

  [7] 李培華.一種新穎的基于顏色信息的粒子濾波器跟蹤算法[J].計算機學(xué)報,2009,32(12):2454-2463.

  [8] BRUHN A,WEICKERT J.Combining local and global opticflow methods[J].International Journal of Computer Vision,2005,61(3):211-231.

  [9] TU D W,JIANG J L.Improved algorithm for motion image based on optical flow and its application[J].Optics Precision Engineering,2011,19(5):1159-1164.


此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
欧美激情精品久久久久久变态| 免费国产一区二区| 久久精品一区二区| 亚洲综合另类| 夜夜爽av福利精品导航| 亚洲福利专区| 激情久久久久久| 国产一区二区三区久久久久久久久| 国产精品久久久久久模特| 欧美日韩亚洲一区二区三区四区 | 欧美连裤袜在线视频| 欧美激情91| 欧美片第1页综合| 欧美极品在线观看| 欧美日韩国产欧| 欧美日韩视频在线观看一区二区三区 | 国产精品一二一区| 国产精品一区二区久激情瑜伽| 国产精品久久久久久久久久ktv| 欧美日韩一级大片网址| 欧美日韩妖精视频| 国产精品第一页第二页第三页| 欧美日韩一区在线播放| 欧美四级电影网站| 国产精品欧美久久久久无广告| 国产精品视频久久久| 国产无一区二区| 在线观看视频亚洲| 亚洲欧洲精品一区二区三区| 亚洲精品在线电影| 9国产精品视频| 亚洲主播在线播放| 亚洲高清不卡av| 亚洲精品美女在线观看| 国语自产精品视频在线看| 永久免费精品影视网站| 亚洲国产综合在线| 亚洲美女视频在线观看| 亚洲香蕉成视频在线观看| 午夜视频在线观看一区二区| 欧美在线视频日韩| 亚洲精品国久久99热| 一区二区三区国产在线观看| 亚洲在线成人| 久久精品在线播放| 欧美激情五月| 国产精品欧美在线| 黄色成人在线网址| 亚洲精品欧美精品| 亚洲女人天堂成人av在线| 欧美在线视频a| 亚洲日本激情| 亚洲字幕一区二区| 久久免费视频这里只有精品| 欧美精品在线观看播放| 国产精品人人做人人爽| 影音先锋亚洲视频| 亚洲午夜电影网| 久久精品国产欧美激情 | 亚洲线精品一区二区三区八戒| 午夜一区二区三区在线观看| 毛片一区二区三区| 国产精品白丝av嫩草影院| 国产专区欧美精品| 日韩视频免费观看高清完整版| 亚洲欧美日本国产专区一区| 亚洲全部视频| 性娇小13――14欧美| 欧美超级免费视 在线| 国产精品一区二区久久| 亚洲国产精品久久91精品| 亚洲天堂男人| 亚洲精品之草原avav久久| 欧美中文在线视频| 欧美三级不卡| 伊人色综合久久天天| 亚洲一区高清| av成人动漫| 美女脱光内衣内裤视频久久影院| 国产精品成人v| 亚洲国产精品久久久久秋霞蜜臀 | 欧美日韩在线一区二区| 黄色一区二区在线| 亚洲性感激情| 夜夜嗨一区二区三区| 久久久久久久综合色一本| 欧美亚洲不卡| 亚洲国产日韩在线| 久久精品国产精品 | 欧美另类视频| 在线不卡免费欧美| 午夜久久美女| 亚洲一区二区精品视频| 欧美成人一区二区| 韩国av一区二区三区| 亚洲欧美一区二区激情| 中文成人激情娱乐网| 女女同性精品视频| 国产亚洲精品激情久久| 亚洲午夜免费视频| 一本色道久久综合狠狠躁篇的优点 | 亚洲激情社区| 久久裸体艺术| 国产日韩精品一区二区三区| 亚洲少妇中出一区| 亚洲一区成人| 欧美午夜不卡视频| 日韩视频精品在线| 亚洲最新中文字幕| 欧美国产精品日韩| 亚洲高清av| 亚洲精品1234| 另类av导航| 极品尤物久久久av免费看| 午夜亚洲福利| 久久久国产亚洲精品| 国产一区二区在线观看免费| 亚洲欧美综合网| 欧美伊人久久久久久午夜久久久久 | 欧美日本精品| 亚洲美女中文字幕| 99国产精品久久| 欧美日韩国产高清| 日韩一区二区精品在线观看| 一区二区av在线| 欧美日本精品一区二区三区| 亚洲欧洲在线免费| 亚洲精选成人| 欧美日本不卡视频| 一本久久综合亚洲鲁鲁| 亚洲一区二区三区免费观看| 欧美日韩中文字幕精品| 一区二区三区免费在线观看| 亚洲欧美精品suv| 国产欧美大片| 久久成人18免费观看| 久久影视精品| 亚洲国产精品va| 一区二区欧美激情| 国产精品免费在线| 欧美一区二区三区免费视| 久久免费国产| 亚洲国产综合91精品麻豆| 一区二区三区视频免费在线观看| 欧美性色aⅴ视频一区日韩精品| 在线一区二区三区四区五区| 午夜国产精品视频免费体验区| 农村妇女精品| 亚洲精品自在久久| 亚洲欧美日韩国产一区| 国产日韩欧美自拍| 亚洲黄色高清| 欧美视频免费在线观看| 亚洲专区免费| 久热re这里精品视频在线6| 91久久中文| 亚洲欧美另类国产| 国产一区二区三区奇米久涩| 亚洲人成高清| 国产精品magnet| 欧美在线精品一区| 欧美日韩精品国产| 亚欧成人在线| 欧美激情1区2区3区| 一区二区三区欧美日韩| 久久久福利视频| 亚洲精品国精品久久99热| 亚洲在线国产日韩欧美| 狠狠色综合色综合网络| 一本久久精品一区二区| 国产网站欧美日韩免费精品在线观看| 亚洲国产日韩欧美一区二区三区| 欧美日韩成人在线视频| 性欧美video另类hd性玩具| 欧美成人伊人久久综合网| 宅男66日本亚洲欧美视频| 久久亚洲一区| 一区二区不卡在线视频 午夜欧美不卡在 | 欧美视频在线一区二区三区| 欧美自拍偷拍午夜视频| 欧美久色视频| 欧美一区国产二区| 欧美日韩在线观看视频| 久久精品国产亚洲aⅴ| 欧美视频在线免费看| 亚洲大片免费看| 国产精品高精视频免费| 亚洲欧洲一区二区天堂久久| 国产精品日韩在线| 一本色道久久88亚洲综合88| 国产一区导航| 国产精品99久久久久久久久久久久| 国产自产精品| 午夜精品久久久久影视 | 欧美在线视频日韩| 国产精品草草| 野花国产精品入口| 影音先锋欧美精品| 久久精品一区二区三区不卡| 亚洲视频999|