張萌生,楊樹(shù)文,賈鑫,臧麗日
(1.蘭州交通大學(xué)測(cè)繪與地理信息學(xué)院,蘭州 730070; 2.地理國(guó)情監(jiān)測(cè)技術(shù)應(yīng)用國(guó)家地方聯(lián)合工程研究中心,蘭州 730070; 3.甘肅省地理國(guó)情監(jiān)測(cè)工程實(shí)驗(yàn)室,蘭州 730070)
遙感影像配準(zhǔn)是一個(gè)空間映射的過(guò)程,即通過(guò)某種空間變換使得2幅影像中同一目標(biāo)點(diǎn)達(dá)到空間位置一致。遙感影像配準(zhǔn)技術(shù)在影像自動(dòng)處理領(lǐng)域得到廣泛應(yīng)用,是目前遙感研究應(yīng)用的熱點(diǎn)問(wèn)題之一,學(xué)者們先后提出了多種配準(zhǔn)算法[1]。影像配準(zhǔn)算法大致可分為基于灰度信息和基于特征2種配準(zhǔn)算法。其中,基于特征的影像配準(zhǔn)算法以計(jì)算量小、速度快、魯棒性強(qiáng)的特點(diǎn)被廣泛的應(yīng)用。
在基于特征的影像配準(zhǔn)算法中最具代表性的是Lowe提出的尺度不變特征變換算法(scale-invariant feature transform,SIFT)[2-3],因具有優(yōu)秀的仿射不變性和魯棒性[4]在影像配準(zhǔn)領(lǐng)域得到了廣泛的認(rèn)可。在此基礎(chǔ)上,李曉明等首次將SIFT算法應(yīng)用在遙感影像的自動(dòng)配準(zhǔn)中,但是傳統(tǒng)SIFT算法進(jìn)行遙感影像配準(zhǔn)過(guò)程中的效果并不理想。為此,李曉明等[5]引入了隨機(jī)抽樣一致(random sample consensus,RANSAC)算法[6],較為有效地剔除了誤匹配點(diǎn)對(duì)并提高了匹配精度。然而,由于遙感影像的不確定性,SIFT與RANSAC算法結(jié)合進(jìn)行遙感影像匹配過(guò)程中仍存在大量的誤匹配點(diǎn)對(duì),達(dá)不到實(shí)際應(yīng)用的匹配效果。
針對(duì)此問(wèn)題,程焱等[7]提出使用M估計(jì)代替RANSAC算法提高遙感影像自動(dòng)配準(zhǔn)精度的建議。但由于在遙感影像的匹配過(guò)程中誤匹配點(diǎn)對(duì)較多,使用傳統(tǒng)的統(tǒng)計(jì)學(xué)方法剔除誤匹配點(diǎn)對(duì)仍較為困難。因此,學(xué)者們針對(duì)這一問(wèn)題提出了一系列改進(jìn)算法,如李芳芳等[8]對(duì)SIFT算法匹配精度進(jìn)行了優(yōu)化,采用雙向匹配算法并結(jié)合匹配點(diǎn)對(duì)坐標(biāo)差進(jìn)行誤匹配點(diǎn)對(duì)的剔除,該方法很大程度上提高了匹配點(diǎn)對(duì)的精確度; 程紅等[9]提出了利用象限和角度剔除SIFT特征匹配的誤匹配點(diǎn)對(duì)的思路,也在一定程度上解決了誤匹配的問(wèn)題; 張謙等[10-11]在多源影像配準(zhǔn)過(guò)程中提出了使用透視變換方程耦合均方根誤差作為誤差模型剔除誤匹配的方法; 沈宇臻等[12]在多源影像匹配時(shí)提出了通過(guò)計(jì)算特征點(diǎn)對(duì)之間距離、方向夾角的關(guān)系等進(jìn)行誤匹配點(diǎn)對(duì)剔除的思路,但是該方法需要首先設(shè)定距離閾值和方向閾值。
綜上所述,在實(shí)際配準(zhǔn)過(guò)程中,由于存在紋理相似、圖像噪聲等遙感影像不確定性因素的影響,在2幅圖像上檢測(cè)出的特征點(diǎn)存在較大差異,從而使得一些非同名特征點(diǎn)也被錯(cuò)誤地匹配成為配準(zhǔn)點(diǎn)對(duì)。為了進(jìn)一步提高影像配準(zhǔn)的精度,在影像進(jìn)行SIFT算法特征點(diǎn)的提取和匹配之后,還需進(jìn)一步剔除誤匹配點(diǎn)對(duì),提高配準(zhǔn)點(diǎn)對(duì)的數(shù)量和精度。為此,本文提出使用格網(wǎng)索引對(duì)SIFT算法進(jìn)行優(yōu)化,剔除大量的誤匹配點(diǎn)對(duì)之后再使用RANSAC算法,其顯著提高了SIFT算法在遙感影像配準(zhǔn)中的精度,并且使用該算法進(jìn)行影像配準(zhǔn)得到了較好的結(jié)果。
SIFT算法利用高斯差分金字塔構(gòu)建多尺度空間,尋找多尺度空間的穩(wěn)點(diǎn)特征和描述。SIFT算法的核心思路可分為4步[3]:
1)尺度空間極值檢測(cè)?;诙喑叨瓤臻g理論通過(guò)高斯差分代替拉普拉斯差分建立多層高斯差分金字塔,在差分金字塔中尋找極值檢測(cè)點(diǎn)。
2)關(guān)鍵點(diǎn)定位。比較檢測(cè)點(diǎn)所在圖像的3×3鄰域8個(gè)像素點(diǎn),以及其相鄰的上下2層的3×3鄰域18個(gè)像素點(diǎn)共26個(gè)像素點(diǎn),是否為極值點(diǎn)。通過(guò)曲線(xiàn)擬合尋找尺度空間的極值點(diǎn)的位置,再去除低對(duì)比度的關(guān)鍵點(diǎn)和不穩(wěn)定的邊緣響應(yīng)點(diǎn),得到穩(wěn)定性強(qiáng)的關(guān)鍵點(diǎn)。
3)關(guān)鍵點(diǎn)主方向分配。利用關(guān)鍵點(diǎn)鄰域像素的梯度分布特性來(lái)確定其方向參數(shù),再利用圖像的梯度直方圖求取關(guān)鍵點(diǎn)局部結(jié)構(gòu)的穩(wěn)定方向。
4)關(guān)鍵點(diǎn)描述子構(gòu)造。以關(guān)鍵點(diǎn)為中心取16×16的窗口,并均分為4×4個(gè)子區(qū)域,計(jì)算每個(gè)子區(qū)域8個(gè)方向的梯度方向直方圖,這樣每個(gè)關(guān)鍵點(diǎn)都可以產(chǎn)生4×4×128維的特征向量。
為了驗(yàn)證、分析SIFT算法的效率和精度,基于GF-2影像進(jìn)行了大量分析實(shí)驗(yàn),結(jié)果如圖1和2所示。其中,圖1是使用SIFT算法對(duì)2幅實(shí)驗(yàn)區(qū)域相同的遙感影像提取特征點(diǎn),圖1(a)為GF-2待配準(zhǔn)全色影像(空間分辨率為1 m)所提取得到的特征點(diǎn)圖像,大小為500像素×500像素,圖1(b)為GF-2經(jīng)人工配準(zhǔn)融合后基準(zhǔn)多光譜影像(空間分辨率為1 m)所提取得到的特征點(diǎn)圖像,大小為737像素×633像素。圖2是圖1這2幅影像利用歐式距離進(jìn)行特征點(diǎn)匹配的結(jié)果。從圖2中可以直觀(guān)地看出匹配的結(jié)果中存在大量誤匹配點(diǎn)對(duì)。
圖2 SIFT算法進(jìn)行匹配后的結(jié)果(隨機(jī)顯示100對(duì))Fig.2 Result of matching by SIFT algorithm
鑒于SIFT算法存在的不足,在大量實(shí)驗(yàn)分析的基礎(chǔ)上,發(fā)現(xiàn)引入格網(wǎng)索引能夠有效提高匹配精度。格網(wǎng)索引是一種常見(jiàn)的空間索引,其原理是將一定地理范圍劃分成M行N列,得到M×N個(gè)格網(wǎng)[13]。為了建立起地理區(qū)域與格網(wǎng)索引的對(duì)應(yīng)關(guān)系,存儲(chǔ)了每個(gè)空間對(duì)象落在格網(wǎng)區(qū)域內(nèi)的索引信息,并對(duì)每個(gè)格網(wǎng)賦予唯一的索引值。具體步驟為: 首先,通過(guò)SIFT算法匹配得到待配準(zhǔn)影像在基準(zhǔn)影像中的對(duì)應(yīng)區(qū)域; 然后,建立相對(duì)應(yīng)的格網(wǎng),如圖3所示; 最后,根據(jù)空間對(duì)象的地理坐標(biāo)計(jì)算出空間對(duì)象屬于的格網(wǎng),再將其索引信息存儲(chǔ)到該點(diǎn)內(nèi)。本文將SIFT算法檢測(cè)出的特征點(diǎn)建立格網(wǎng)索引(格網(wǎng)大小為5×5),通過(guò)索引值將SIFT算法匹配得到的特征點(diǎn)對(duì)進(jìn)行剔除,保留索引值相同的特征點(diǎn)對(duì)。
在進(jìn)一步的實(shí)驗(yàn)研究中發(fā)現(xiàn),將RANSAC算法與格網(wǎng)索引進(jìn)行耦合,能夠進(jìn)一步提高匹配精度。RANSAC算法從包含較多噪聲點(diǎn)或無(wú)效點(diǎn)的數(shù)據(jù)集中,通過(guò)反復(fù)選擇數(shù)據(jù)中的隨機(jī)子集建立模型,符合該模型的數(shù)據(jù)稱(chēng)為“內(nèi)點(diǎn)”,不符合的稱(chēng)為“外點(diǎn)”,最后通過(guò)“內(nèi)點(diǎn)”和模型的錯(cuò)誤率選擇最優(yōu)模型,確定出有效樣本。該算法對(duì)圖像噪聲有很好的魯棒性,因此在消除誤匹配點(diǎn),提高配準(zhǔn)精度方面已有廣泛的應(yīng)用。使用RANSAC算法對(duì)SIFT匹配結(jié)果進(jìn)行優(yōu)化,能夠一定程度上提高匹配的精確度。但是由于遙感影像會(huì)存在近似的紋理特征,導(dǎo)致誤匹配點(diǎn)對(duì)較多,并且由于誤匹配點(diǎn)對(duì)數(shù)量增多,造成RANSAC算法“外點(diǎn)”增多,會(huì)導(dǎo)致RANSAC無(wú)法準(zhǔn)確區(qū)分“內(nèi)點(diǎn)”與“外點(diǎn)”,影響RANSAC算法優(yōu)化SIFT匹配的結(jié)果。
在上述多個(gè)理論的基礎(chǔ)上,提出了基于格網(wǎng)索引優(yōu)化的遙感影像自動(dòng)配準(zhǔn)算法,流程如圖4所示。
圖4 基于格網(wǎng)索引優(yōu)化的遙感影像配準(zhǔn)流程Fig.4 Flow chart of remote sensing imageregistration based on grid index
為了驗(yàn)證本文算法的有效性,進(jìn)行了大量的遙感影像配準(zhǔn)實(shí)驗(yàn),并與SIFT算法、SIFT+RANSAC算法和分塊SIFT算法進(jìn)行匹配性能的比較,其中分塊SIFT算法[14]中使用RANSAC算法剔除誤匹配。本文實(shí)驗(yàn)環(huán)境: Intel Core I5-4200U 1.60 GHz處理器,8 GB運(yùn)行內(nèi)存,64位Win7操作系統(tǒng),OpenCV 3.0.0。本文選取3組不同區(qū)域且拍攝時(shí)間不同的遙感影像進(jìn)行配準(zhǔn)實(shí)驗(yàn),實(shí)驗(yàn)數(shù)據(jù)詳細(xì)信息如表1所示,其中基準(zhǔn)影像為經(jīng)人工配準(zhǔn)融合后的GF-1多光譜影像(空間分辨率為2 m),如圖5所示。
表1 實(shí)驗(yàn)數(shù)據(jù)的詳細(xì)信息Tab.1 Detailed description of test data
對(duì)3組實(shí)驗(yàn)區(qū)域影像采用SIFT算法、SIFT+RANSAC算法、分塊SIFT算法和本文算法進(jìn)行對(duì)比實(shí)驗(yàn),上述4種算法所得的實(shí)驗(yàn)結(jié)果如表2所示。表2分別統(tǒng)計(jì)了4種算法的配準(zhǔn)點(diǎn)數(shù)量和正確率,可以看出本文算法的正確率得到了較大提升,并且正確配準(zhǔn)點(diǎn)對(duì)數(shù)量較SIFT+RANSAC算法得到顯著提升。
表2 4種算法配準(zhǔn)點(diǎn)對(duì)數(shù)量和正確率對(duì)比Tab.2 Comparison of the number and correct rate of registration of four algorithms
圖6展示了通過(guò)本文算法進(jìn)行影像配準(zhǔn)的效果(圖中上層影像為已配準(zhǔn)的全色影像透明度為50%,下層圖像為基準(zhǔn)影像),可以看出圖6中由于得到了大量高精度匹配點(diǎn)對(duì),使得多項(xiàng)式幾何糾正后的配準(zhǔn)精度更高。
為了定量分析本文算法的配準(zhǔn)精度,從第一組實(shí)驗(yàn)的基準(zhǔn)影像和配準(zhǔn)影像中選取10對(duì)同名像點(diǎn)作為檢查點(diǎn)如表3所示,計(jì)算得到坐標(biāo)的均方根誤差為2.560 24,即0.695 69個(gè)像素。其中2幅影像均為WGS84坐標(biāo)系,投影系為UTM投影。
表3 配準(zhǔn)精度評(píng)價(jià)Tab.3 Registration accuracy evaluation
1)本文針對(duì)SIFT算法在遙感圖像配準(zhǔn)中出現(xiàn)的大量誤匹配現(xiàn)象,提出了基于格網(wǎng)索引的遙感影像自動(dòng)配準(zhǔn)算法,引入格網(wǎng)索引剔除了SIFT算法的大量誤匹配點(diǎn)對(duì),從而減少了RANSAC算法中的“外點(diǎn)”,提升了RANSAC算法的效果。利用本文優(yōu)化的SIFT算法可以同時(shí)提高遙感影像配準(zhǔn)點(diǎn)對(duì)的正確率和配準(zhǔn)點(diǎn)對(duì)數(shù)量。實(shí)驗(yàn)表明,該算法相對(duì)于原有傳統(tǒng)的分塊SIFT算法顯著提升了遙感影像配準(zhǔn)的精度,結(jié)果更加理想。
2)本文算法部分過(guò)程計(jì)算量較大,效率較低,并且本文算法配準(zhǔn)的精度跟檢測(cè)到配準(zhǔn)點(diǎn)對(duì)數(shù)量的多少有關(guān),在遙感影像存在輻射差異的情況下配準(zhǔn)效果較差,下一步將對(duì)此問(wèn)題進(jìn)行深入研究,以提升遙感影像配準(zhǔn)的普適性。