何佳華,申 沖,唐 軍,劉 俊

(1.中北大學(xué)儀器科學(xué)與動態(tài)測試教育部重點(diǎn)實(shí)驗(yàn)室,太原 030051;2.中北大學(xué)儀器與電子學(xué)院,太原 030051)

0 引言

基于復(fù)眼的場景匹配是無人機(jī)視覺導(dǎo)航[1-2]的一種重要手段,復(fù)眼圖像拼接質(zhì)量決定著場景匹配的成功率。圖像拼接是指通過圖片特征點(diǎn)匹配、圖像融合、平滑縫合線的方式,把兩幅或多幅有重疊部分的圖像拼接成單張高分辨率的圖像的過程。由于單個攝像頭視場有限,所以將多個安裝角度不同的攝像頭所獲得的圖像進(jìn)行拼接,已經(jīng)成為實(shí)現(xiàn)大視場高分辨率圖像的主流方法。傳統(tǒng)的圖像拼接算法一般包含特征匹配與圖像融合兩部分,其中特征匹配是指對要拼接圖像的特征點(diǎn)進(jìn)行提取,再對兩幅圖像中相同的特征點(diǎn)進(jìn)行匹配;圖像融合是指利用匹配正確的特征點(diǎn)的位置關(guān)系,將待拼接的圖像進(jìn)行融合。

提取的圖像特征點(diǎn)的數(shù)量與分布位置直接決定了圖像拼接的準(zhǔn)確度。近年來,對于特征點(diǎn)提取算法的改進(jìn)主要集中在提升計(jì)算速度以及提取精度上。1988年,Mikolajczyk和Schmid[3]提出了用于特征點(diǎn)提取的Harris算法,通過圖像灰度計(jì)算像素點(diǎn)的曲率以及梯度,從而確定特征點(diǎn)的位置。2004年,D.G.Lowe提出了尺度不變特征變換[4](scale invariant feature transform,SIFT),該算法通過對圖像建立高斯差分空間,在不同尺度空間檢測極值點(diǎn)并對其進(jìn)行剔除與定位,取得高精度特征點(diǎn)。SIFT算法具有很強(qiáng)的魯棒性、尺度不變性及旋轉(zhuǎn)不變性、光照不變性,缺點(diǎn)是計(jì)算時間過長。2006年,H. Bay和A. Ess[5]為提高計(jì)算速度,提出了加速魯棒特征(speeded-up robust feature,SURF)算法,在幾乎不縮減SIFT性能的同時將計(jì)算時間縮短至原來的三分之一。2011年,E.Rublee 和 V.Rabaud[6]提出了一種新的特征點(diǎn)提取算法ORB(Oriented FAST and Rotated BRIEF),相較于SIFT與SURF算法,計(jì)算量小、速度快,但精度有所降低。2022年,秦緒佳[7]提出了一種改進(jìn)的ORB匹配算法,在降低運(yùn)算速度的同時提高了特征點(diǎn)的提取精度?？梢姮F(xiàn)有的ORB算法在運(yùn)算速度與特征點(diǎn)提取精度方面均有所提高,但仍難以解決圖像特征點(diǎn)過于集中情況下的圖像拼接重影問題。

在特征點(diǎn)提取后即可進(jìn)行圖像匹配,即通過兩張圖像特征點(diǎn)的相似度建立特征向量的對應(yīng)關(guān)系。常用的有最近鄰距離比率法[8-9](nearest neighbor dist-ance ratio,NNDR)與隨機(jī)抽樣一致(random sample consensus,RANSAC)算法[10-12]。NNDR通過設(shè)定與選定特征點(diǎn)最近距離點(diǎn)與次近距離點(diǎn)距離的比率閾值,小于閾值則判定為最近距離點(diǎn)與選定參考點(diǎn)為一對匹配點(diǎn)。但NNDR算法會消除大量正確匹配的特征點(diǎn),降低圖像拼接性能。RANSAC則是通過隨機(jī)選取一個特征點(diǎn)子集估計(jì)出一個參數(shù)模型,再使用所有測試點(diǎn)測試此參數(shù)模型,并不斷迭代優(yōu)化,匹配出特征點(diǎn)適應(yīng)數(shù)量最多的參數(shù)模型。RANSAC算法得到可信模型的概率與迭代次數(shù)成正比,若設(shè)置迭代次數(shù)低則可能導(dǎo)致錯誤結(jié)果,若迭代次數(shù)過高則會增加計(jì)算時間。2017年,Bian J.[13]提出了基于網(wǎng)格的運(yùn)動統(tǒng)計(jì)(grid-based motion statistics,GMS)算法。它將平滑度約束合并到一個統(tǒng)計(jì)框架中進(jìn)行分離,并使用網(wǎng)格進(jìn)行快速計(jì)算,實(shí)現(xiàn)更加快速精準(zhǔn)的特征點(diǎn)匹配?；贕MS算法的優(yōu)點(diǎn),是目前常用的特征點(diǎn)匹配算法。

圖像融合常用的方法是最佳縫合線算法,1998年M. L. Duplaquet等[14]提出了一種利用動態(tài)規(guī)劃求縫合線的方法;谷雨等[15]提出了一種基于差異圖像加權(quán)的最佳縫合線算法,有效地避免了因縫合線通過運(yùn)動物體導(dǎo)致的重影。2013年,Gao J.與Yu L.[16-17]提出了一種將Seam-cutting放入RANSAC迭代中的方法,使拼縫誤差小于設(shè)定閾值以獲得更好的拼縫,但缺點(diǎn)是尋找拼縫的速度較慢。Chang C.H.等提出了SPHP[18](shape-preserving half-projective)算法,實(shí)現(xiàn)了圖像的高精度對齊,減少了重影。由上述分析可知,SPHP能獲取更高的對齊精度,有效減少投影失真,在圖像拼接中有較好的性能。

受上述研究現(xiàn)狀啟發(fā),本文針對圖像拼接過程中易出現(xiàn)的實(shí)時性較差、拼接重影與色差等問題,提出了一種基于ORB-GMS-SPHP(oriented FAST and rotated BRIEF_grid-based motion statistics shape-preserving half-projective)算法的快速圖像拼接方法。該方法結(jié)合了ORB與GMS算法在計(jì)算速度、SPHP算法在圖像對齊精度方面的優(yōu)勢,可實(shí)現(xiàn)運(yùn)算速度快、無重影與色差的圖像拼接效果。本文的主要貢獻(xiàn)在于:

1)提出了一種基于高斯尺度空間網(wǎng)格化處理的ORB算法,實(shí)現(xiàn)了圖像中特征點(diǎn)的均勻分布,解決了傳統(tǒng)ORB-GMS算法由于特征點(diǎn)太過集中導(dǎo)致的拼接重影問題;

2)提出了一種基于ORB-GMS-SPHP算法的快速圖像拼接方法,利用GMS算法網(wǎng)格化加速處理的特點(diǎn),提高了特征點(diǎn)匹配速度且消除了拼接色差。

1 本文方法

1.1 圖像拼接模型構(gòu)建

本文提出了一種基于改進(jìn)ORB-GMS特征匹配算法的SPHP圖像拼接方法。算法模型如圖1所示。

圖1 本文方法流程圖Fig.1 Flow chart of the method in this paper

在對特征點(diǎn)紋路相似且有周期性結(jié)構(gòu)的圖像特征點(diǎn)進(jìn)行提取時,傳統(tǒng)的SIFT、SURF等圖像特征提取方法會提取大量密集且相似的特征點(diǎn),導(dǎo)致在匹配期間出現(xiàn)大量的錯誤匹配。對于此現(xiàn)象, RANSAC算法通過周期迭代來篩除誤匹配點(diǎn),但是誤匹配點(diǎn)過多時會導(dǎo)致迭代次數(shù)過多、篩選時間過長,且會剔除一部分正確的匹配點(diǎn),導(dǎo)致圖像匹配精度下降,出現(xiàn)重影現(xiàn)象;GMS算法則是根據(jù)正確的匹配點(diǎn)周圍會有其他正確的匹配點(diǎn)支撐,而錯誤匹配點(diǎn)則幾乎沒有匹配點(diǎn)支撐這一原理來剔除錯誤匹配點(diǎn),通過網(wǎng)格結(jié)構(gòu)計(jì)算出每個網(wǎng)格的匹配點(diǎn)個數(shù),以避免對每個匹配點(diǎn)的遍歷篩選,大大降低了運(yùn)算量。相較于RANSAC算法,GMS算法速度更快且得到的正確匹配點(diǎn)數(shù)量更多。GMS算法篩選得到的正確匹配點(diǎn)數(shù)量與特征點(diǎn)提取算法得到的特征點(diǎn)數(shù)量成正比,相較于SURF、SIFT算法,ORB算法提取的特征點(diǎn)數(shù)量最多,且計(jì)算時間最短。因此,本文采用ORB算法進(jìn)行特征點(diǎn)的提取。針對傳統(tǒng)ORB算法存在的特征點(diǎn)過于集中且在某些無紋理區(qū)域可能沒有特征點(diǎn)的問題,本文提出了一種改進(jìn)的ORB算法,使待拼接圖像中的特征點(diǎn)均勻分布。

在圖像拼接過程中,待拼接的圖像會出現(xiàn)拍攝角度、亮暗程度不同等現(xiàn)象。傳統(tǒng)的最佳縫合線法針對上述現(xiàn)象的拼接效果并不理想,SPHP算法具有圖像對齊精度更高的優(yōu)點(diǎn),可以解決上述問題,實(shí)現(xiàn)較好的拼接效果,并且運(yùn)算速度更快。因此,本文擬采用SPHP算法進(jìn)行圖像拼接。

1.2 優(yōu)化ORB特征點(diǎn)提取算法

傳統(tǒng)ORB算法在構(gòu)建完高斯尺度空間后就會利用FAST算法提取角點(diǎn),其原理是在每一層取像素點(diǎn)的灰度值與半徑為3個像素點(diǎn)的圓上的像素點(diǎn)灰度值的差別設(shè)置一個固定的閾值,若灰度差大于此閾值則此點(diǎn)為角點(diǎn)。在一些部分位置紋路不清晰的圖像中,FAST算法在此部分提取不到角點(diǎn),而在紋路豐富的位置上,則會提取出大量聚集的角點(diǎn)。為使提取到的角點(diǎn)均勻地分布在待拼接圖像上,本文提出了一種改進(jìn)的FAST算法提取角點(diǎn),相對于傳統(tǒng)算法,本算法在高斯尺度空間每一層都劃分30×30的網(wǎng)格,通過改變FAST閾值使每個網(wǎng)格都能提取到特征點(diǎn)。具體算法流程如下:

1)構(gòu)造高斯尺度空間(高斯金字塔)。

2)對高斯金字塔的每一層劃分30×30像素的網(wǎng)格。

3)設(shè)置FAST閾值,對每個網(wǎng)格提取角點(diǎn),若提取不到角點(diǎn)就降低閾值,使每個網(wǎng)格最少提取到一個角點(diǎn)。

4)用非極大值抑制法選取每個網(wǎng)格中響應(yīng)值最大的角點(diǎn)。計(jì)算p點(diǎn)是否為最大響應(yīng)的方法如式(1),其中,V為最大響應(yīng)值;t為閾值。

V=

(1)

經(jīng)過改進(jìn)的FAST算法提取出大量的角點(diǎn)后,使用Oriented FAST算法計(jì)算每個角點(diǎn)的旋轉(zhuǎn)角度,再利用上一步求解的角點(diǎn)旋轉(zhuǎn)角度指導(dǎo)BRIEF對角點(diǎn)進(jìn)行描述。BRIEF描述子是二進(jìn)制描述子,在后續(xù)計(jì)算中可以采用圖形處理器(graphic processing unit, GPU)加速,進(jìn)一步提高匹配效率。具體流程為先在特征點(diǎn)鄰域內(nèi)隨機(jī)選取n個點(diǎn)對,形成n維二進(jìn)制描述子,定義一個像素點(diǎn)P的二進(jìn)制比較

(2)

(3)

此時得到的BRIEF描述符還不具備旋轉(zhuǎn)不變性,定義一個2×n的矩陣S

(4)

(5)

通過像素點(diǎn)方向θ計(jì)算旋轉(zhuǎn)矩陣Rθ,此時Sθ矩陣為

Sθ=RθS

(6)

結(jié)合式(4)可以得到具有旋轉(zhuǎn)不變性的BRIEF描述子

gn(p,θ)=fn(p)|(xi,yi)∈Sθ

(7)

1.3 GMS特征點(diǎn)匹配預(yù)篩選

本文方法通過暴力匹配與GMS相結(jié)合的方式對正確的匹配點(diǎn)進(jìn)行篩選,具有篩選速度更快且正確匹配點(diǎn)保留更多的特點(diǎn),有效提高了圖像拼接效率。

GMS算法是一種基于網(wǎng)格運(yùn)動統(tǒng)計(jì)特性的快速、超魯棒的特征匹配算法,算法的核心思想是一個正確的匹配點(diǎn)旁邊一定會有幾個正確的匹配點(diǎn)作為支撐,具有運(yùn)動一致性;但一個錯誤的匹配點(diǎn),它的旁邊幾乎沒有同樣錯誤的匹配點(diǎn)作為支撐(假設(shè)錯誤匹配是隨機(jī)發(fā)生的)。

GMS算法的主要原理如下:在圖2左右兩幅圖片中分別有a區(qū)域和b區(qū)域,假設(shè)匹配到a區(qū)域的正確概率為t,對于a區(qū)域中一個匹配點(diǎn)是錯的,但匹配點(diǎn)還落在b區(qū)域的概率為

圖2 GMS原理Fig.2 Principle of GMS

(8)

a區(qū)域中匹配正確的特征點(diǎn)匹配到b區(qū)域的概率為

(9)

(10)

其中,n為區(qū)域a中特征點(diǎn)的個數(shù)。由式(10)可得Si的概率密度圖如圖3所示,其中mt、mf為均值。

圖3 Si的概率密度分布圖Fig.3 Probability distribution map of Si

在一張圖像中,對于一個小區(qū)域的運(yùn)動是平滑的,對于一個更大區(qū)域的運(yùn)動同樣也是平滑的。對于一個3×3的區(qū)域如圖4所示,每個格子的對應(yīng)關(guān)系為

圖4 圖像的一個3×3區(qū)域Fig.4 A 3×3 area of the image

i1→j1i2→j2…i9→j9

(11)

對于3×3的區(qū)域Si變成了式(12),Si的分布變成了式(13),其中K表示選定的區(qū)域內(nèi)的網(wǎng)格數(shù)目。

(12)

(13)

此時,標(biāo)準(zhǔn)差st、sf分別為

(14)

從Si的分布圖中可得,正確的匹配點(diǎn)與錯誤匹配點(diǎn)的支撐點(diǎn)分布是不同的,為快速篩除錯誤的匹配點(diǎn),利用Si的均值與方差設(shè)置一個指標(biāo)P,定義如下

(15)

(16)

即Sij滿足式(16)則匹配對正確,否則匹配對錯誤。其中,Sij表示網(wǎng)格區(qū)域{ik,jk}與其周圍8個相鄰網(wǎng)格區(qū)域匹配點(diǎn)的總數(shù)目。示意圖如圖5所示。α是常數(shù)因子,Ni是3×3網(wǎng)格區(qū)域中匹配點(diǎn)的總數(shù)目,通常取Ni=6。

圖5 網(wǎng)格區(qū)域[i,j]示意圖Fig.5 Schematic diagram of grid area [i,j]

由GMS算法篩選出兩幅圖像間正確的匹配點(diǎn),使用RANSAC算法可以得到兩幅圖像間的映射關(guān)系,從而得到單應(yīng)性矩陣H為

(17)

1.4 基于SPHP的圖像拼接算法

本文方法通過改進(jìn)的SPHP算法對經(jīng)過GMS篩選特征點(diǎn)的圖像進(jìn)行圖像拼接,傳統(tǒng)的SPHP算法并未對鬼影做處理,導(dǎo)致拼接效果較差。本文方法在原有拼接方法的基礎(chǔ)上引入泊松融合算法,使改進(jìn)后的SPHP算法可去除拼接鬼影。

改進(jìn)的SPHP拼接算法主要分為四部分:部分投影變換;重合區(qū)域邊緣平滑過渡;相似變換保持非重合區(qū)原有視角;泊松融合去除鬼影。

(1)部分投影變換

SPHP算法首先將圖像劃分為兩個區(qū)域,分別為RH重疊區(qū)和RL其他區(qū)。對于重疊區(qū)域圖像,SPHP直接應(yīng)用投影變換H,對于其他區(qū)域的圖像則采用相似變換S。然而,在重疊區(qū)RH與其他區(qū)RL的分界處,由于變換方式的不同導(dǎo)致邊界無法完全重合。因此,需要引入另一個區(qū)域平滑過渡區(qū)。

(2)重合區(qū)域平滑過渡

將其他區(qū)RL劃分為兩個區(qū),平滑過渡區(qū)RT與非重疊區(qū)RS。其中平滑過渡區(qū)是一個緩沖區(qū),變換逐漸從H變?yōu)镾。變換函數(shù)ω(u,v)定義如下

(18)

(3)相似變換

非重疊區(qū)采用相似變換,保持了原有視角。結(jié)合前面的投影變換區(qū)與平滑過渡區(qū),構(gòu)成拼接完整的圖像。

(4) 泊松融合

首先計(jì)算重合區(qū)域形狀,尋找?guī)缀巫儞Q后的重合區(qū)域掩膜mask,使用mask取下幾何變換后圖像的重合區(qū)域RH,并計(jì)算RH的梯度場μ。將原拼接圖像作為背景,計(jì)算背景圖像的梯度場s,將μ覆蓋在梯度場s上,最后再將覆蓋區(qū)域內(nèi)每個像素點(diǎn)求偏導(dǎo),獲得散度,構(gòu)造系數(shù)矩陣和約束方程,求解拼接圖像。

2 實(shí)驗(yàn)與結(jié)果分析

2.1 實(shí)驗(yàn)裝置與運(yùn)行環(huán)境

本文方法實(shí)驗(yàn)環(huán)境如下:AMD RYZEN 7-4800H 2.9 GHz CPU,GTX 1650顯卡,16 G內(nèi)存,64位Windows10操作系統(tǒng),編程語言python,在PyCharm中運(yùn)行。實(shí)驗(yàn)圖像拍攝地為中北大學(xué)。

2.2 特征匹配結(jié)果對比與評價

為驗(yàn)證本文所提方法的優(yōu)越性,本實(shí)驗(yàn)分別采用SIFT、ORB、SURF與本文所提的優(yōu)化ORB-GMS四種算法對兩組圖像進(jìn)行特征點(diǎn)提取與匹配,并進(jìn)行對比,四種方法的圖像匹配效果如圖6所示。其中一組是在同一位置下從不同角度拍攝的具有尺度變換特征的建筑物圖像,另一組是在同一水平面從不同位置航拍的具有大量重復(fù)結(jié)構(gòu)特征的地面場景圖像。具有上述兩種典型特征的圖像易出現(xiàn)誤匹配現(xiàn)象,導(dǎo)致在最終拼接時出現(xiàn)重影和色差。所以本文使用上述兩種圖像首先驗(yàn)證改進(jìn)的ORB-GMS算法在圖像具有重復(fù)結(jié)構(gòu)和尺度變換情況下的特征匹配性能。在實(shí)驗(yàn)中,ORB、SIFT和提出的優(yōu)化ORB-GMS算法均設(shè)置為獲取10 000個特征點(diǎn),而SURF設(shè)置較低閾值以盡量獲取更多的特征點(diǎn)。

圖6 四種方法的圖像匹配效果圖Fig.6 Image matching effect diagram of four methods

由圖6可以看出,當(dāng)圖像中具有尺度變換及大量重復(fù)結(jié)構(gòu)時,在同樣獲取10 000個特征點(diǎn)的參數(shù)設(shè)置情況下,傳統(tǒng)的特征匹配算法在處理過程中產(chǎn)生了大量的錯誤匹配點(diǎn),而優(yōu)化ORB-GMS方法產(chǎn)生的錯誤匹配點(diǎn)遠(yuǎn)少于傳統(tǒng)方法,且獲取的特征點(diǎn)更加均勻,更有利于后續(xù)的圖像拼接。表1是對這四種算法的客觀評價對比,可以看出優(yōu)化ORB-GMS算法具有更高的計(jì)算效率和匹配成功率。其中具有尺度變換特征的圖像,由于同一目標(biāo)特征點(diǎn)分布不同導(dǎo)致傳統(tǒng)圖像匹配方法出現(xiàn)錯誤匹配,本文提出的優(yōu)化ORB-GMS算法在對特征點(diǎn)進(jìn)行提取時進(jìn)行了基于高斯尺度空間的網(wǎng)格化處理,從而有效降低錯誤匹配;具有大量相似特征的圖像,由于相似特征點(diǎn)過多導(dǎo)致傳統(tǒng)圖像匹配算法容易出現(xiàn)誤匹配,本文提出的優(yōu)化ORB-GMS算法在網(wǎng)格化特征點(diǎn)篩選時可以剔除更多的錯誤匹配點(diǎn),從而有效提高匹配精度。SIFT與SURF算法在進(jìn)行關(guān)鍵點(diǎn)檢測和描述時速度較慢,而ORB采用了FAST與BRIEF算法進(jìn)行特征點(diǎn)檢測與描述,因此運(yùn)行速度更快。在錯誤特征點(diǎn)篩除階段,傳統(tǒng)算法都采用RANSAC算法,而本文提出的改進(jìn)ORB-GMS算法采用GMS算法進(jìn)行誤匹配點(diǎn)的篩選,速度更快。

表1 不同匹配方法對比Tab.1 Matching comparison of different methods

2.3 圖像拼接結(jié)果對比與評價

圖像拼接實(shí)驗(yàn)中所用的圖像集與2.2節(jié)中使用的一致。其中建筑物圖像尺寸為2 736像素×3 648像素,拍攝時間為亮度較低的傍晚,該建筑物圖像具有尺度變換的特征,且受光線干擾,導(dǎo)致拼接時易出現(xiàn)明顯的重影和色差,如圖7所示;地面場景圖像尺寸為5 472像素×3 648像素,拍攝時間為天氣晴朗的白天,該圖像具有大量重復(fù)特征的特點(diǎn),導(dǎo)致拼接時易出現(xiàn)重影。為保證不同算法對比效果的可信度,本文實(shí)驗(yàn)過程中除了采用的拼接算法不同外,其余條件都一致,并與SIFT+最佳縫合線法、SURF+最佳縫合線法兩種經(jīng)典圖像拼接算法進(jìn)行了比較。其中,最佳縫合線法是對兩張圖像的像素的每一行進(jìn)行自上而下求和,選取最小能量函數(shù)的一種動態(tài)規(guī)劃,尋找強(qiáng)度值最優(yōu)路徑的圖像拼接算法。評價指標(biāo)主要包括拼接時間、有無重影、有無明顯拼縫及均方根誤差值等4個方面,對于圖像匹配精度,則通過不同算法配準(zhǔn)得到的均方根誤差值RMSE來評價,主要使用式(19)進(jìn)行計(jì)算

RMSE=

(19)

式中,M、N是待拼接圖像重疊區(qū)域O的大小;IO(i,j)、I′O(i,j)分別代表了待拼接圖像重疊區(qū)域像素和參考圖像重疊區(qū)域像素。RMSE越小則拼接精度越高。實(shí)驗(yàn)結(jié)果如圖7所示。

圖7 圖像拼接效果對比Fig.7 Image mosaicing effect comparison

通過圖7對拼接完成的圖像畫框部分進(jìn)行對比,可以發(fā)現(xiàn)SIFT算法在畫框處拼接沒有對齊,這是因?yàn)樵撍惴ㄔ谔卣髌ヅ溥^程后的變換模型計(jì)算不夠精確。在SURF算法的圖像中出現(xiàn)了重影,且其畫框的位置還有部分未對齊,說明相較于SIFT算法,SURF算法在加快拼接速度的同時降低了拼接的精度。在兩張圖像具有明顯的亮度區(qū)別時,SIFT與SURF兩種算法同時都使用最佳縫合線法進(jìn)行圖像的拼接,拼接完成后的圖像有明顯的拼縫。而本文方法采用的SPHP算法并無明顯的拼縫,拼接效果更好。表2所示為三種拼接方法的客觀對比,通過表2中不同算法的RMSE值對比可以看出,SIFT+最佳縫合線法RMSE值最小為9.27,SURF+最佳縫合線法RMSE值最小為13.61,而本文方法RMSE值最小為3.43,精度有明顯提升。

表2 不同拼接方法對比Tab.2 Comparison of different mosaicing methods

2.4 多張圖像拼接結(jié)果

使用基于改進(jìn)的ORB-GMS-SPHP圖像拼接算法對多張航拍圖像進(jìn)行逐次拼接,最終的拼接結(jié)果如圖8所示。從圖8可以看出,最終的拼接圖像無拼縫、無鬼影,重疊區(qū)域過渡自然,亮度變化均勻,拼接效果好。

圖8 多張圖像拼接效果圖Fig.8 Multi-image mosaicing effect diagram

3 結(jié)語

1) 在進(jìn)行圖像特征點(diǎn)提取時,本文提出的算法構(gòu)建了基于高斯尺度空間網(wǎng)格化處理的ORB算法,實(shí)現(xiàn)了圖像中特征點(diǎn)的均勻分布,解決了傳統(tǒng)ORB-GMS算法由于特征點(diǎn)太過集中導(dǎo)致的拼接重影問題;利用GMS算法網(wǎng)格化加速處理的特點(diǎn),提高了特征點(diǎn)匹配速度;采用SPHP算法進(jìn)行圖像拼接,拼接后對圖像進(jìn)行泊松融合消除拼接重影,以保證圖像拼接的空間一致性,提高了圖像拼接精度。

2) 經(jīng)實(shí)驗(yàn)結(jié)果證明,本文提出的基于改進(jìn)ORB-GMS-SPHP算法的快速圖像拼接方法,相較于傳統(tǒng)算法圖像拼接速度明顯變快,且無鬼影與色差,拼接效果好,可以用于地形航拍或者遙感地圖繪制。

3) 由于拼接速度仍不足以支持實(shí)時圖像拼接,后續(xù)仍需在不降低拼接質(zhì)量的同時提高拼接速度,實(shí)現(xiàn)視頻畫面的實(shí)時拼接。