(海軍工程大學(xué) 武漢 430033)
近些年目標(biāo)跟蹤算法已取得了很大的進(jìn)步,然而為了簡(jiǎn)化跟蹤模型,幾乎所有的目標(biāo)跟蹤算法都假設(shè)目標(biāo)的運(yùn)動(dòng)是平滑的,不存在突然變化[1~7]。在物體運(yùn)動(dòng)速度過(guò)快導(dǎo)致目標(biāo)在相鄰兩幀中不存在重疊區(qū)域時(shí),常常會(huì)收斂到一個(gè)錯(cuò)誤的位置。
模板匹配算法無(wú)需任何關(guān)于目標(biāo)運(yùn)動(dòng)的假設(shè)。然而,由于需要對(duì)整個(gè)圖像進(jìn)行窮盡搜索,算法時(shí)間復(fù)雜度過(guò)高。許多文獻(xiàn)提出了加快模板匹配速度的方法,主要可以分為三類(lèi)[8~11]:1)由粗及精的策略,先在低分辨率上粗匹配再在高分辨率上進(jìn)行精匹配,然而這種方法要求低分辨率上的粗匹配必須取得較好的效果;2)對(duì)圖像和模板進(jìn)行下采樣,這種方法會(huì)略去很多像素點(diǎn),包括具有全局或局部最佳的點(diǎn);3)估計(jì)似然函數(shù)的上界或者下界并削減不必要的操作,然而不是所有的似然函數(shù)都能找到上界或者下界。
本文提出了一種基于多尺度空間的目標(biāo)跟蹤算法。首先利用通過(guò)基于直方圖的模板匹配算法在整個(gè)圖像中尋找候選點(diǎn),然后以這些點(diǎn)為初始點(diǎn)結(jié)合mean shift算法找到對(duì)應(yīng)的局部極值,以最大局部極值對(duì)應(yīng)點(diǎn)作為目標(biāo)最終估計(jì)。最后利用尺度空間更新模板的尺寸和匹配窗口。
直方圖是對(duì)旋轉(zhuǎn)、形變以及部分遮掩有一定的魯棒性。通過(guò)用直方圖來(lái)表征模板T,則模板匹配過(guò)程可以定義為在當(dāng)前幀中尋找與模板具有相似直方圖的子圖像。用來(lái)表示模板T的歸一化直方圖,表示以y為中心的候選子圖像的直方圖,每個(gè)直方圖都含有m個(gè)分量。用Bhattacharyya系數(shù)作為相似度函數(shù):
通過(guò)在當(dāng)前幀中逐點(diǎn)比較q和p(y)可以構(gòu)建一張似然圖。其中ρ(y)最大的點(diǎn)作為目標(biāo)中心位置。
設(shè)原始圖像為I(x,y),高斯金字塔采用以下迭代方式進(jìn)行定義:
其中w(m,n)為加權(quán)函數(shù)。L是多分辨率分層模型中的最低分辨率。L過(guò)大會(huì)導(dǎo)致第L層的抽象模型與原始模型有較大差別,從而無(wú)法反映原始模型的真實(shí)形象,過(guò)小的L則無(wú)法達(dá)到降低計(jì)算復(fù)雜度的效果。最好的L使得目標(biāo)的抽象模型和原始模型相似的最低分辨率。
設(shè)目標(biāo)模板當(dāng)前縮小l倍,此時(shí)的目標(biāo)模板為M(l),在每一層上計(jì)算M(l)與M(0)之間的相似度S(l)。
f(l)是一個(gè)度量函數(shù),例如,Bhattacharyya系數(shù)。M(0)表示原始的最高分辨率的目標(biāo)模板。Lmax是一個(gè)事先確定的多分辨率分層模型的層數(shù)的最大值。有兩種方法確定最低分辨率L。一是使用固定閾值 Δ :L=min{l|S(l)>Δ,l=1,2,…,Lmax}。二是使前后兩層模型之間相似度的差值達(dá)到最大:Lmax。
當(dāng)前幀中的所有候選點(diǎn)從最低分辨率到最高分辨率分層進(jìn)行匹配,在低分辨率下未通過(guò)的候選點(diǎn)將不會(huì)傳遞到更高的層次進(jìn)行進(jìn)一步的評(píng)估。設(shè)在最高層所保留下來(lái)的候選點(diǎn)集為S:
δ是事先設(shè)定的閾值。I為當(dāng)前幀。ρ(p)參考式(1)。記N為S中候選點(diǎn)的總個(gè)數(shù)。對(duì)S中每一個(gè)點(diǎn)p,以該點(diǎn)為初始位置利用mean shift算法找到它們各自對(duì)應(yīng)的局部極值。這些mean shift過(guò)程將收斂到N個(gè)目標(biāo)當(dāng)前位置的估計(jì)其中,具有最大值的點(diǎn)作為目標(biāo)位置的最終估計(jì):
在本節(jié),通過(guò)兩個(gè)實(shí)例來(lái)展示本文方法的優(yōu)勢(shì),跟蹤結(jié)果將和文獻(xiàn)[9]以及文獻(xiàn)[12]中的算法進(jìn)行比較,分別稱(chēng)為方法1和方法2。
如圖1所示,目標(biāo)是跟蹤一輛靜止的軍用卡車(chē)。雖然卡車(chē)本身是靜止的,然而由于機(jī)載平臺(tái)的運(yùn)動(dòng)導(dǎo)致背景和卡車(chē)位置頻繁而無(wú)規(guī)則的變化。在這種情況下,方法1和方法2都無(wú)法跟蹤目標(biāo),而本文方法能有效地處理由于平臺(tái)運(yùn)動(dòng)所造成的問(wèn)題并對(duì)目標(biāo)進(jìn)行準(zhǔn)確跟蹤。
圖1 跟蹤卡車(chē)的實(shí)例
如圖2所示,目標(biāo)跟蹤一個(gè)正在跑動(dòng)中的人。該目標(biāo)首先向前跑動(dòng),然后突然改變方向向后跑。運(yùn)動(dòng)方向的突然改變加大了跟蹤難度。開(kāi)始時(shí),所有方法都能正確跟蹤目標(biāo)。然而,當(dāng)目標(biāo)突然改變運(yùn)動(dòng)方向時(shí)無(wú)論是方法1還是方法2都丟失了目標(biāo),只有本文方法仍然準(zhǔn)確跟蹤目標(biāo)。
表1給出了三種方法的定位誤差的均值和方差。跟蹤速度顯示在表2中。如表1所示,本文的方法比其他兩種方法能更魯棒和更準(zhǔn)確的跟蹤目標(biāo)。它具有最小的誤差均值和方差。如表2所示,雖然本文方法比其他兩種方法要慢,但是仍能基本滿(mǎn)足實(shí)時(shí)處理要求,特別是當(dāng)目標(biāo)的尺寸較小時(shí)。這種要求在大多數(shù)涉及機(jī)載平臺(tái)的應(yīng)用中都能滿(mǎn)足。
第一行為方法1的結(jié)果,第二行為方法2的結(jié)果,第三行為本文的結(jié)果。
第一行為方法1的結(jié)果,第二行為方法2的結(jié)果,第三行為本文的結(jié)果。
表1 定位誤差的均值和方差
表2 三種方法的跟蹤速度
本文提出了一種基于多尺度空間的mean shift目標(biāo)跟蹤算法。該方法在諸如運(yùn)動(dòng)機(jī)載平臺(tái)等動(dòng)態(tài)場(chǎng)景中能取得較好的效果。模板匹配方法用于處理全局運(yùn)動(dòng)而mean shift算法使得快速匹配方法具有更好的匹配結(jié)果。實(shí)驗(yàn)證明這兩種方法的結(jié)合可以更準(zhǔn)確和魯棒地跟蹤目標(biāo)。