丁赤飚 仇曉蘭 徐 豐 梁興東 焦?jié)衫?張福博
①(中國科學(xué)院空天信息創(chuàng)新研究院 北京 100190)
②(微波成像技術(shù)國家級重點實驗室 北京 100190)
③(中國科學(xué)院空間信息與應(yīng)用系統(tǒng)重點實驗室 北京 100190)
④(中國科學(xué)院大學(xué) 北京 100049)
⑤(復(fù)旦大學(xué) 上海 200433)
以合成孔徑雷達(dá)(Synthetic Aperture Radar,SAR)為代表的微波成像技術(shù)是高分辨率對地觀測的重要技術(shù)手段,在軍事偵查、地形測繪、環(huán)境監(jiān)測、地質(zhì)勘探和災(zāi)情調(diào)查等方面具有重大應(yīng)用價值。然而,由于SAR與光學(xué)成像機理顯著不同,SAR目標(biāo)識別與圖像解譯難度極大,已成為制約當(dāng)前星載和機載SAR裝備應(yīng)用效能有效發(fā)揮的關(guān)鍵瓶頸。其中的重要原因是傳統(tǒng)SAR只能獲取2維影像,在地形變化陡峭和環(huán)境復(fù)雜的區(qū)域,3維目標(biāo)在2維圖像上會產(chǎn)生嚴(yán)重混疊,導(dǎo)致大量目標(biāo)看不清、辨不明、難以理解。SAR 3維成像可以直接獲得目標(biāo)的3維電磁散射結(jié)構(gòu),消除SAR圖像中由于成像機理導(dǎo)致的收縮、疊掩、頂?shù)椎怪玫痊F(xiàn)象,對3維環(huán)境構(gòu)建、目標(biāo)精細(xì)化解譯、城市測繪以及災(zāi)害評估等應(yīng)用具有重大意義。
在此背景下,SAR 3維成像技術(shù)受到了各國的重視,不斷發(fā)展進(jìn)步。以是否具備3維分辨能力為區(qū)分,SAR成像從2維到3維的發(fā)展過程大致可以劃分為兩個階段。第1個階段從上世紀(jì)60年代起,發(fā)展出干涉合成孔徑雷達(dá)[1](Interferometric SAR,InSAR)和SAR立體像對技術(shù)[2,3](StereoSAR),以獲得場景3維信息。然而,InSAR和StereoSAR技術(shù)本質(zhì)上均是利用不同角度觀測對配準(zhǔn)后的像素進(jìn)行3維位置的解算,對于同一像素中疊掩多個散射點的情況,只能求解合成散射中心的位置,因此僅能夠獲得3維表面信息,不具備3維分辨能力。第2階段則從上世紀(jì)九十年代起,1995年美國海軍研究實驗室的K.K.Knaell和G.P.Cardillo[4]首次提出了3維SAR的概念,并提出了利用高度維的合成孔徑實現(xiàn)3維成像的技術(shù)思路。在此之后,美國、歐洲、中國等均開展了大量SAR 3維成像的研究工作[5-11],目前主要形成了兩種3維成像技術(shù),分別是合成孔徑雷達(dá)層析成像技術(shù)(SAR Tomography,TomoSAR)和陣列干涉SAR 3維成像技術(shù)(Array InSAR)。上述兩種SAR 3維成像技術(shù)通過多次航過或多個天線的多角度觀測,形成高度維的合成孔徑,獲得第3維分辨能力。然而上述技術(shù)需要大量的多角度觀測,導(dǎo)致成像周期長或系統(tǒng)高度復(fù)雜,推廣應(yīng)用存在較大的難度。
綜觀SAR 3維成像技術(shù)發(fā)展,從早期的干涉SAR技術(shù)到現(xiàn)階段的TomoSAR 3維成像技術(shù),本質(zhì)上講均為利用精確的雷達(dá)成像幾何物理模型,結(jié)合多角度觀測進(jìn)行目標(biāo)3維位置解算。而實際上,在單幅SAR圖像中,蘊含了場景與目標(biāo)的結(jié)構(gòu)、紋理、遮擋關(guān)系等3維空間線索,這些有效信息在目前的成像體制中尚未得到充分的挖掘與利用。本文提出了一種新的SAR 3維成像技術(shù),稱之為“合成孔徑雷達(dá)微波視覺3維成像”技術(shù),通過對微波散射機制和圖像視覺語義的深入挖掘,提取雷達(dá)回波和2維圖像中蘊含的3維線索,結(jié)合傳統(tǒng)的SAR成像理論,實現(xiàn)高效3維成像,大幅減少所需觀測的數(shù)目。
本文首先深入分析了當(dāng)前合成孔徑雷達(dá)3維成像技術(shù)的基本原理、技術(shù)特點和局限性。在此基礎(chǔ)上,提出了合成孔徑雷達(dá)微波視覺3維成像技術(shù),詳細(xì)介紹了SAR微波視覺3維成像技術(shù)的概念、內(nèi)涵和關(guān)鍵科學(xué)問題,并給出了初步的技術(shù)途徑,最后對未來的發(fā)展進(jìn)行了展望。
針對大量存在疊掩現(xiàn)象的城區(qū)等復(fù)雜場景3維重建的目的,國內(nèi)外研究機構(gòu)開展了大量研究,借鑒醫(yī)學(xué)CT(Computed Tomography)成像技術(shù),提出了層析SAR(SAR Tomography,TomoSAR)3維成像技術(shù)。層析SAR 3維成像原理如圖1所示。
圖1展示了TomoSAR技術(shù)3維分辨能力的來源。與傳統(tǒng)2維SAR成像相同,距離向通過發(fā)射大帶寬信號結(jié)合脈沖壓縮技術(shù)獲得距離分辨率,方位向通過合成孔徑獲取分辨能力。為了獲得高程向分辨能力,利用航跡精確控制、滿足奈奎斯特定律的多次觀測構(gòu)建高程向的等效陣列,實現(xiàn)高度維的合成孔徑,獲得高程向分辨能力。TomoSAR 3維成像幾何模型如圖2所示[7],利用較小視角差異的多幅SAR圖像,經(jīng)圖像配準(zhǔn)后,逐像素進(jìn)行解算。
TomoSAR成像數(shù)學(xué)模型如下,第n次觀測得到SAR圖像像素表達(dá)式如式(1)[6]
針對同一像素,多次觀測得到的像素值構(gòu)成觀測向量y,將高程向離散化可以得到觀測方程為
圖1 TomoSAR 3維成像原理圖Fig.1 Diagrammatic sketch of TomoSAR 3D imaging
圖2 TomoSAR 3維成像幾何原理圖Fig.2 TomoSAR imaging geometry
其中,Φi,j=exp(-j4π/λ·Δbisj/R0)。根據(jù)式(2)即可求解得到目標(biāo)散射系數(shù)沿高程向分布γ。
層析SAR 3維成像技術(shù)研究始于上世紀(jì)九十年代中期,其技術(shù)發(fā)展經(jīng)過了實驗室研究、機載層析成像以及星載層析成像3個階段。1995年,歐洲微波信號實驗室(European Microwave Signature Laboratory,EMSL)的Pasquali等人[8]首次證明了利用多次觀測在高程向合成孔徑實現(xiàn)高度維分辨是可行的,該實驗室設(shè)計了具有8條基線的Ku波段雷達(dá)系統(tǒng),對隱藏在介質(zhì)中的兩層金屬球?qū)崿F(xiàn)了高度維分辨,實現(xiàn)了層析SAR 3維成像技術(shù)從理論到實驗的跨越。1998年,德國宇航局(Deutsches Zentrum für Luft-und Raumfahrt,DLR)的Reigber等人[9]開展了機載層析SAR成像技術(shù)的研究,利用L波段的機載SAR實測數(shù)據(jù)實現(xiàn)了對建筑和植被3維結(jié)構(gòu)的重建,是世界上首個機載層析SAR 3維成像結(jié)果。2005年,意大利那不勒斯大學(xué)的Fornaro等人[10]利用歐洲遙感衛(wèi)星(European Remote Sensing Satellite,ERS)在1992年至1998年間獲取的意大利Naples地區(qū)30景SAR圖像,首次實現(xiàn)了星載層析SAR 3維成像。2007年,德國TerraSAR-X(TSX)衛(wèi)星發(fā)射,該衛(wèi)星具有良好的控軌能力和極高的相位測量精度,聚束模式SAR圖像分辨率可達(dá)1 m,進(jìn)一步促進(jìn)了TomoSAR技術(shù)的發(fā)展。2010年,德宇航的朱曉香等人[12]利用TerraSAR-X數(shù)據(jù),首次獲得了復(fù)雜城市場景(如LasVegas)的層析3維成像結(jié)果,見圖3。在此之后,該團(tuán)隊又利用該衛(wèi)星數(shù)據(jù)開展了豐富的星載TomoSAR研究,在層析SAR 3維成像算法方面取得了豐富的成果[13-18]。
圖3 2010年,德宇航首個城區(qū)TomoSAR 3維成像[12]Fig.3 TomoSAR 3D imaging result of urban areas by DLR in 2010[12]
伴隨著更多全極化星載與機載SAR系統(tǒng)的投入使用,極化層析SAR(Polarimetric TomoSAR,PolTomoSAR)技術(shù)應(yīng)運而生,在森林生物量反演等應(yīng)用中發(fā)揮重大作用[19]。此外,由于普通的TomoSAR成像從一個角度進(jìn)行觀測,SAR圖像陰影區(qū)域無法實現(xiàn)層析成像,因此德國開展了機載圓跡層析(SAR Holography,HoloSAR)成像技術(shù)研究,實現(xiàn)了360度觀測的3維成像[20]。圖4展示了極化層析及HoloSAR 3維成像的部分結(jié)果。國內(nèi)也紛紛開展TomoSAR技術(shù)的研究,中國科學(xué)院電子學(xué)研究所、武漢大學(xué)、電子科技大學(xué)等單位[21-24]均在TomoSAR成像算法方面取得了豐富的成果。
TomoSAR 3維成像技術(shù)在城區(qū)等復(fù)雜地區(qū)3維成像中取得了巨大成功,然而在實際應(yīng)用中面臨兩大主要困難。第一,利用傳統(tǒng)信號處理方法(如匹配濾波、譜估計等),需要數(shù)十次甚至上百次飛行,周期長、成本高,不利于時效性要求較高的應(yīng)用。第二,為了保證TomoSAR重軌觀測SAR圖像之間的相干性,需要實現(xiàn)航跡的精確控制,增加了實施的難度。
由于層析SAR 3維成像理論針對每一個距離方位單元進(jìn)行處理,地物目標(biāo)在高程向稀疏分布,因此壓縮感知理論的提出為第1個問題提供了解決思路。2006年由Donoho等人[25]提出的壓縮感知(Compressed Sensing,CS)理論,突破了奈奎斯特定律的限制,在滿足稀疏性假設(shè)的前提下,能夠利用少數(shù)觀測以較高概率重建原始信號。2007年,Baraniuk等人[26,27]提出將壓縮感知理論應(yīng)用到雷達(dá)成像中。2009年,意大利的Alessandra Budillion等人[28,29]基于壓縮感知理論進(jìn)行了層析SAR仿真實驗,指出壓縮感知理論可以減少目標(biāo)3維重構(gòu)所需重軌觀測次數(shù),之后又將該技術(shù)應(yīng)用于ERS衛(wèi)星數(shù)據(jù),成功實現(xiàn)了建筑物的3維成像。同年,DLR的朱曉香團(tuán)隊[16]將壓縮感知理論應(yīng)用于TerraSARX的高分辨率數(shù)據(jù),獲取了TerraSAR實測數(shù)據(jù)層析成像結(jié)果。2011年,該團(tuán)隊提出了SLIMMER算法并系統(tǒng)分析了算法性能。近年來,國內(nèi)外學(xué)者針對結(jié)合壓縮感知理論的層析成像開展了大量研究,在稀疏成像算法等方面成果豐碩[17,18,30-32]。圖5展示了觀測稀疏化前后層析成像結(jié)果的對比,利用7景圖像實現(xiàn)了TomoSAR 3維成像,相比64景圖像重建結(jié)果分辨率差異較小,證實了航跡稀疏化的可行性。
為了保證TomoSAR重復(fù)觀測圖像之間相干性,需要層析SAR重軌觀測基線較短,避免空間去相關(guān),對于重復(fù)觀測的軌道控制精度提出了較高要求。隨著衛(wèi)星控軌技術(shù)的進(jìn)步,諸如TerraSAR-X等衛(wèi)星控軌精度已較高,如TerraSAR-X多次重復(fù)觀測,相對于參考航跡軌道控制精度優(yōu)于500 m,所有重軌觀測航跡控制在以參考航跡為軸心250 m為半徑的“管道”內(nèi)(如圖6所示),尤其在徑向,重復(fù)軌道控制精度優(yōu)于100 m[33],軌道測量精度則優(yōu)于10 cm。目前,如TerraSAR-X,Cosmo-Skymed等高分辨率星載SAR系統(tǒng)均具有較高的軌道控制與測量精度[33-37],星載SAR的軌道控制精度已經(jīng)能夠滿足TomoSAR的處理需求,但是機載系統(tǒng)由于受到氣流等的影響,獲得有效的TomoSAR數(shù)據(jù)非常困難。
總之,目前TomoSAR 3維成像處理仍然需要十余次嚴(yán)格控軌的重復(fù)觀測,時間跨度較長,難以滿足時效性要求較高的應(yīng)用場景。
圖4 極化層析SAR與HoloSAR 3維成像Fig.4 Three-dimensional imaging results of PolTomoSAR and HoloSAR
圖5 德國聯(lián)邦鐵路公司總部層析成像結(jié)果[32]Fig.5 TomoSAR imaging results of DB Headquarters in Munich[32]
圖6 TerraSAR-X衛(wèi)星軌道控制精度示意圖[33]Fig.6 Diagrammatic sketch of TSX orbit control performance[33]
下視陣列合成孔徑雷達(dá)3維成像技術(shù)是一種基于陣列天線的SAR 3維成像技術(shù),通過在跨航向安裝陣列天線,以期對載機平臺正下方場景實現(xiàn)3維成像。下視陣列3維成像技術(shù)工作示意圖見圖7。
下視陣列3維成像技術(shù)向飛機正下方發(fā)射寬帶信號,結(jié)合脈沖壓縮技術(shù)實現(xiàn)高程向分辨;在方位向借助平臺運動獲得航跡向多普勒信息,形成合成孔徑,實現(xiàn)方位向分辨;在跨航向借助陣列天線實現(xiàn)跨航向合成孔徑,進(jìn)而實現(xiàn)跨航向分辨。
圖7 下視陣列3維成像技術(shù)示意圖Fig.7 Diagrammatic sketch of downward looking array 3D imaging
1999年,DLR首次提出了下視2維成像雷達(dá)的概念[38]。2004年,法國ONERA的Giret等人[39]提出了下視陣列3維成像技術(shù),將陣列技術(shù)和合成孔徑雷達(dá)相結(jié)合,能夠獲得跨航向、方位向和高程向的分辨能力。之后,其開始研制相應(yīng)下視陣列3維成像系統(tǒng)DRIVE,該系統(tǒng)具有下視3維和正側(cè)視2維兩種工作模式,試驗載機是翼展23 m重約900 kg的滑翔機[40]。2006年至2010年間,Nouvel等人[41]利用DRIVE系統(tǒng)開展了下視陣列成像試驗,并公開了方位向長度1 km的方位-高程2維成像結(jié)果(見圖8),其中跨航向測繪帶寬度為42 m。德國FGAN-FHR的Klare等人[42,43]從2005年開始研制無人機下視陣列3維SAR系統(tǒng)ARTINO,載機翼展4 m、重量25 kg。2010年,針對定標(biāo)點開展了飛行試驗,但沒有公布3維成像結(jié)果[44]。國內(nèi)中國科學(xué)院電子學(xué)研究所、電子科技大學(xué)等單位[45,46]針對下視陣列3維成像開展研究,在成像算法以及試驗裝置研究等方面取得了豐富成果。
然而,下視陣列SAR受限于成像體制,存在以下問題:首先,下視陣列SAR測繪帶寬一般較窄,例如DRIVE系統(tǒng)跨航向測繪帶寬僅42 m,工作效率低下;其次,由于陣列下視SAR在跨航向采用實孔徑進(jìn)行分辨,為解決分辨率和測繪帶寬之間的矛盾,需要系統(tǒng)具有很多的通道數(shù)量,使得系統(tǒng)具有較高的復(fù)雜度,成本較高;最后,由于采用下視模式,且陣列天線長度受限,其跨航向分辨率較低,3維重建點云密度較低,3維成像性能較差。截至目前,國內(nèi)外尚未見下視陣列3維SAR的3維場景成像結(jié)果公開發(fā)表。
針對下視陣列SAR 3維成像技術(shù)存在的問題,中科院電子所提出了陣列干涉SAR(Array InSAR)技術(shù)進(jìn)行3維成像。陣列干涉SAR進(jìn)行側(cè)視成像,利用跨航向的陣列天線,基于多輸入多輸出技術(shù)(Multi-Input Multi-Output,MIMO)虛擬多個天線等效相位中心,通過接收地物回波獲取多通道相干SAR圖像,一次飛行即可得到多角度觀測數(shù)據(jù),可以實現(xiàn)單次航過3維成像,相干性好、時效性強。相比下視陣列3維成像技術(shù),陣列干涉SAR 3維成像采用側(cè)視工作模式,測繪帶更寬;等效相位中心數(shù)量遠(yuǎn)小于下視陣列系統(tǒng),系統(tǒng)復(fù)雜度較低,具有更高的穩(wěn)定性和易實現(xiàn)性;距離向分辨率更佳,重建點云密度高,3維成像性能相對優(yōu)秀。陣列干涉SAR 3維成像原理如圖9所示。
圖8 全球陣列SAR 3維成像系統(tǒng)Fig.8 Global array 3D imaging systems
圖9 陣列干涉SAR 3維成像示意圖Fig.9 Diagrammatic sketch of Array InSAR 3D imaging
中科院電子所[47,48]2005年開始研制陣列干涉SAR系統(tǒng),采用長2 m重150 kg的剛性天線陣來保證基線的穩(wěn)定性,通過毫米級的基線高精度定標(biāo)、以及基于陣列圖像匹配干涉和逐像素3維解算的3維成像處理方法,于2015年獲得了國際首幅3維場景成像結(jié)果。該系統(tǒng)融合了多通道的分辨能力和相干測量的高精度兩項優(yōu)勢,可以實現(xiàn)疊掩等復(fù)雜場景的3維重建,彌補了常規(guī)InSAR技術(shù)的缺陷,拓展了SAR測繪技術(shù)的應(yīng)用范圍。
陣列干涉SAR技術(shù)利用陣列天線單次航過實現(xiàn)3維成像,解決了層析SAR觀測周期長、下視陣列測繪效率低等問題,但是也面臨3個核心技術(shù)難題。第一,陣列干涉SAR高程向分辨能力源自角度分辨,根據(jù)雷達(dá)分辨理論,分辨率與天線尺寸成反比,分辨率越高,天線尺寸越長,要實現(xiàn)1 m的3維成像分辨率,需要約20~50 m的機載雷達(dá)天線,工程上難以實現(xiàn),成為制約高分辨率3維成像的核心難題;第二,陣列干涉SAR系統(tǒng)基于MIMO原理,為了增加等效通道數(shù)量,多個通道同時發(fā)射同時接收信號,多路信號之間會產(chǎn)生嚴(yán)重的干擾和混疊,傳統(tǒng)正交編碼方法無法有效抑制此干擾,也是制約陣列干涉SAR性能的瓶頸問題;第三,陣列干涉SAR 3維成像對相位精度要求高,需要陣列天線相對形變小于1 mm,而在航空條件下,受到飛機震顫以及側(cè)風(fēng)等影響,分布式陣列天線柔性形變量達(dá)到厘米量級,導(dǎo)致多通道信號之間的相參性被破壞,無法實現(xiàn)高精度3維成像。
為了解決上述問題,中科院電子所研究團(tuán)隊提出了系列解決方案。
針對陣列天線長度有限導(dǎo)致高程向分辨率低的問題,提出了陣列干涉3維超分辨成像方法。對疊掩問題進(jìn)行了詳細(xì)分析,根據(jù)連續(xù)地形疊掩場景的特點發(fā)明了一種基于曲線模型約束的超分辨方法。將連續(xù)自然地形表述為分段曲線模型,將傳統(tǒng)基于相關(guān)匹配濾波的目標(biāo)分辨成像問題,轉(zhuǎn)化為曲線模型參數(shù)的最優(yōu)估計問題[47]。利用分段曲線參數(shù)滿足稀疏化條件,可實現(xiàn)超分辨參數(shù)估計的特點,通過求解陣列雷達(dá)觀測方程,實現(xiàn)小尺寸天線條件下的3維超分辨成像。陣列干涉SAR 3維超分辨成像方法原理見圖10。
具體實現(xiàn)上,首先提出了自適應(yīng)分段曲線劃分方法,根據(jù)雷達(dá)回波2維空間譜確定的地物分辨率,進(jìn)行最優(yōu)的分段曲線劃分。進(jìn)一步,由于疊掩地形曲線可以表示為距離r關(guān)于斜高s的函數(shù),且曲線上的點有3個信息即散射系數(shù)幅度、相位以及坐標(biāo),提出了基于地形2階導(dǎo)數(shù)最小化約束的陣列雷達(dá)觀測模型,首次在觀測模型中引入了連續(xù)地形空間相關(guān)性約束,優(yōu)化目標(biāo)函數(shù)為
圖10 陣列干涉SAR 3維超分辨成像算法原理示意圖Fig.10 Diagrammatic sketch of Array InSAR super-resolution imaging algorithm
式(3)包含兩層含義,一是求解的空間譜盡量接近測量值,二是使曲線盡量滿足先驗知識,即曲線盡量平滑,算法詳細(xì)說明見文獻(xiàn)[47]。通過在陣列干涉SAR觀測模型中引入的連續(xù)地形空間相關(guān)性約束,結(jié)合最優(yōu)化求解方法可以大幅提升3維分辨性能,相比傳統(tǒng)方法,高程分辨率理論上可提高50倍,工程上提高了10~20倍。即采用2 m的天線,可獲得20~40 m天線的分辨率。利用傳統(tǒng)譜估計方法和陣列超分辨成像算法得到的3維成像結(jié)果對比見圖11,從圖11(b)和圖11(c)的對比中可知,由于陣列天線尺寸受限,傳統(tǒng)成像方法高程向分辨率低,陣列干涉超分辨算法則有效解決了這個問題,有效提升了3維成像質(zhì)量。
圖11 傳統(tǒng)成像算法與陣列超分辨算法原理及效果對比Fig.11 Comparison of principles and performances between traditional methods and Array InSAR imaging method
針對陣列天線多通道信號之間干擾的問題,文獻(xiàn)[49-52]提出了MIMO陣列雷達(dá)正交信號編碼方法,在時頻2維編碼的基礎(chǔ)上,利用陣列天線運動形成的空間維度,增加了空間相位編碼,采用多維濾波模型,在空時頻3維空間實現(xiàn)了多個混疊回波的解調(diào)分離(見圖12),將混疊抑制比從-10 dB提高到-38 dB,圖像質(zhì)量顯著提高(如圖13)。針對分布式陣列天線隨飛機震顫產(chǎn)生彈性形變的問題,文獻(xiàn)[53]發(fā)明了一種剛?cè)峤M合的柔性基線測量和補償方法,原理見圖14。首先用慣性測量系統(tǒng)實現(xiàn)1 cm精度的天線基線剛性段測量,據(jù)此反演出3維地形初值,并利用地面控制點計算出與實際高程的偏差,精密反演出慣性測量系統(tǒng)的內(nèi)置誤差,進(jìn)一步利用多基線干涉模型精確反演出每個陣列節(jié)點的柔性形變量,最終能夠?qū)崿F(xiàn)優(yōu)于1 mm的天線形變測量和補償。
圖12 空時頻多維信號波形編碼方案原理示意圖Fig.12 Diagrammatic sketch of multidimensional waveform coding
2015年,中科院電子所研制成功國際上第1部陣列干涉3維SAR系統(tǒng),見圖15。該機載雷達(dá)系統(tǒng)采用側(cè)視工作模式,共10個陣元2發(fā)8收,跨航向形成16個通道,等效相位中心均勻分布。系統(tǒng)工作于Ku波段,采用調(diào)頻連續(xù)波體制,發(fā)射信號帶寬500 MHz,測繪帶寬度達(dá)到34 km。同年,在山西地區(qū)開展了大量飛行試驗,國際上首次實現(xiàn)了基于機載陣列的大面積復(fù)雜城市3維成像。圖16展示了針對獨棟建筑的陣列干涉SAR 3維重建結(jié)果。如圖16所示,原始SAR圖像中疊掩現(xiàn)象嚴(yán)重,地面、建筑側(cè)面與頂面3個部分難以分辨,利用陣列干涉SAR 3維成像方法能夠?qū)B掩的3部分進(jìn)行區(qū)分,最終得到了基于建筑物3維模型約束的SAR 3維成像結(jié)果。從該圖中可以看到樓前地面的散射信息,樓前臺階、水泥路面,樓體側(cè)面的紋理信息,窗戶、玻璃幕墻和雨罩等結(jié)構(gòu),以及建筑的二面角反射等特征。圖17則展示了整個小區(qū)的SAR圖像以及陣列干涉SAR 3維成像結(jié)果,可以看出,小區(qū)3維結(jié)構(gòu)清晰,證實了陣列干涉SAR的高精度城市3維成像能力。
圖13 多維信號波形正交編碼成像結(jié)果對比圖Fig.13 Comparison between traditional and multidimensional orthogonal waveform imaging results
圖14 剛?cè)峤M合的柔性基線測量和補償方法原理示意圖Fig.14 Diagrammatic sketch of flexible baseline measurement and compensation algorithm
圖15 中科院電子所陣列干涉SAR 3維成像系統(tǒng)Fig.15 Array InSAR 3D imaging system by IECAS
由上可見,目前國內(nèi)外提出的TomoSAR以及陣列干涉SAR 3維成像技術(shù)體制,由于需要在高程向構(gòu)建等效陣列,至少需要十余個飛行架次或天線陣列,導(dǎo)致在實際應(yīng)用中,在軌衛(wèi)星實現(xiàn)難、推廣應(yīng)用難、小型化難。因此,如何降低TomoSAR和陣列干涉SAR 3維成像所需陣列或重軌觀測的數(shù)量,成為SAR 3維成像領(lǐng)域的核心難題。
為了解決上述問題,需要挖掘新的信息來源。實際上SAR 2維圖像中蘊藏著3維信息,經(jīng)過一定訓(xùn)練的SAR圖像判讀人員觀察SAR圖像能夠很強烈的感知其中的3維信息,尤其對于SAR圖像中建筑、橋梁等先驗知識比較豐富的3維目標(biāo)。此外,SAR回波散射機制中也蘊藏著3維信息,通過散射機制的提取和參數(shù)反演,具備對散射中心結(jié)構(gòu)一定的判斷能力。因此,本文提出能否將SAR 2維圖像和回波信號中的信息充分挖掘提取,成為新的信息來源,與合成孔徑雷達(dá)成像機理相結(jié)合,實現(xiàn)3維成像,同時降低對陣列通道數(shù)和重軌觀測次數(shù)的需求。這便是本文提出的合成孔徑雷達(dá)微波視覺3維成像的基本思路。
圖16 獨棟建筑陣列干涉SAR 3維成像結(jié)果Fig.16 Array InSAR 3D imaging results of a single building
圖17 陣列干涉SAR小區(qū)場景3維重建結(jié)果Fig.17 3D imaging results by array InSAR of the observed scene
SAR微波視覺3維成像,是指將雷達(dá)回波和2維圖像中隱含的3維線索,通過微波散射機制(微波)和圖像視覺語義(視覺)挖掘的方法加以提取,并引入到傳統(tǒng)的SAR成像方法中,從而降低所需多角度觀測的數(shù)量,實現(xiàn)高效的3維成像技術(shù)。SAR微波視覺3維成像,融合了計算電磁學(xué)、計算機視覺以及雷達(dá)信號處理相關(guān)理論,是一種新的SAR 3維成像技術(shù)路線。
SAR微波視覺3維成像,相較傳統(tǒng)3維成像方法,主要有以下特點。第一,SAR微波視覺3維成像方法從回波出發(fā),建立目標(biāo)部件3維結(jié)構(gòu)和回波之間的3維散射映射關(guān)系,并構(gòu)建目標(biāo)3維散射機制的結(jié)構(gòu)化參數(shù)表征,增加目標(biāo)3維重建信息量。第二,現(xiàn)有SAR 3維成像方法逐像素孤立解算,而SAR微波視覺3維成像則結(jié)合計算機視覺方法提取圖像中的語義信息對第3維重建增加約束,減少所需觀測數(shù)。
SAR微波視覺3維成像技術(shù)與傳統(tǒng)成像技術(shù)在信息來源、分辨機理等方面均有所不同,具體對比如表1所示。SAR的距離維分辨,分辨機理是時間分辨,信息來源是頻率擴展,處理方法是脈沖壓縮;方位維分辨機理是角度分辨,信息來源是空間擴展,處理方法是合成孔徑;現(xiàn)有技術(shù)的高度維分辨,其機理也是角度分辨,信息來源是空間擴展,處理方法從根本上講依然是合成孔徑。本技術(shù)SAR微波視覺3維成像,信息來源引入了散射機制和視覺語義,處理方法是SAR微波視覺3維成像這一新手段。可見,該技術(shù)與現(xiàn)有技術(shù)有實質(zhì)的不同,是一種全新的技術(shù)思路。
為了實現(xiàn)SAR微波視覺3維成像的目的,需要挖掘SAR回波及2維圖像中所蘊藏的3維信息。針對上述目的,雖已有一些研究基礎(chǔ),包括基于SAR圖像內(nèi)容提取目標(biāo)3維信息的方法[54-56]和基于SAR信號散射機制提取的目標(biāo)3維信息反演方法[57-59]等,但上述方法仍有較大的局限性,難以滿足復(fù)雜場景SAR微波視覺3維成像的需求??偨Y(jié)而言,作為一種全新的3維成像方法,SAR微波視覺3維成像需進(jìn)行理論與方法的探索性研究,主要包括3個核心科學(xué)問題,分別是:微波3維散射機制及其逆問題,SAR圖像視覺3維認(rèn)知理論與方法,以及基于微波視覺的3維成像理論與方法。
(1)微波3維散射機制及其逆問題
微波3維散射機制及其逆問題是要解決如何從SAR回波數(shù)據(jù)中識別出微波散射機制,從一定程度上重構(gòu)目標(biāo)3維認(rèn)知參數(shù)的問題。根據(jù)散射機制反演目標(biāo)結(jié)構(gòu)是一個電磁散射的逆問題,如圖18,由于實際目標(biāo)的電磁散射機制復(fù)雜,目標(biāo)散射特性及其在SAR圖像的成像特性與其幾何物理參數(shù)(外形、材質(zhì)等)、波形參數(shù)(頻率、極化等)、觀測條件(角度、模式等)等多個因素相關(guān),因此,電磁散射逆問題存在多解性、收斂性、魯棒性等問題。3維散射機制是目標(biāo)微波視覺的重要信息,3維散射機制的識別是實現(xiàn)SAR微波視覺3維成像的核心科學(xué)問題之一,需要解決散射機制的檢測識別、目標(biāo)3維認(rèn)知參數(shù)的反演與估計等理論方法問題[60,61]。
表1 SAR微波視覺3維成像與傳統(tǒng)成像技術(shù)的對比Tab.1 Comparison between SAR microwave vision 3D imaging and traditional 3D imaging techniques
圖18 電磁散射求逆問題示意圖Fig.18 Diagrammatic sketch of inverse problem of electromagnetic scattering
(2)SAR圖像視覺3維認(rèn)知理論與方法
SAR圖像視覺3維認(rèn)知理論與方法是解決如何理解SAR圖像中的視覺語義并提取出典型目標(biāo)的3維結(jié)構(gòu),挖掘出3維線索的問題。
針對光學(xué)圖像,基于計算機視覺的圖像理解和目標(biāo)3維重建的研究已經(jīng)比較成熟,已有研究可通過單幅光學(xué)影像進(jìn)行3維重建[62]。但SAR與光學(xué)成像機理存在顯著不同,如圖19。首先SAR與光學(xué)的成像幾何不同,光學(xué)是角度投影,有遮擋無疊掩、有角度信息無深度信息;而SAR是距離投影,有遮擋同時又有疊掩、無角度信息而有深度信息。第二,SAR與光學(xué)的電磁散射機理不同,光學(xué)是非相干成像,圖像符合人眼視覺習(xí)慣,圖像平滑、對觀測角度不敏感,容易獲取大量學(xué)習(xí)樣本;而SAR是相干成像,圖像相干斑噪聲嚴(yán)重、隨觀測角度變化劇烈,很難獲取大量學(xué)習(xí)樣本,導(dǎo)致現(xiàn)有光學(xué)圖像解譯的方法應(yīng)用于SAR圖像視覺語義理解時,魯棒性弱、泛化能力差等問題非常突出。因此,目前主要針對光學(xué)圖像的計算機視覺理論方法無法直接照搬應(yīng)用于SAR圖像視覺理解,需要創(chuàng)新性地發(fā)展SAR圖像3維特征挖掘、目標(biāo)表征和識別等理論方法,建立SAR微波視覺3維成像的視覺認(rèn)知基礎(chǔ)。
(3)基于微波視覺的3維成像理論與方法
基于微波視覺的3維成像理論與方法是要解決如何根據(jù)3維線索信息,高效精確地進(jìn)行3維成像的問題,即:如何將微波散射機制和視覺語義與傳統(tǒng)的SAR信號處理方法相結(jié)合,實現(xiàn)復(fù)雜環(huán)境和目標(biāo)的3維成像,如圖20。
圖19 SAR成像與光學(xué)成像的區(qū)別Fig.19 Differences between SAR and optical images
圖20 基于微波視覺的3維成像概念Fig.20 SAR microwave vision 3D imaging
通過“微波視覺”[63]一般獲得的是異構(gòu)、模糊、定性的3維線索,如何將異構(gòu)定性的3維線索與定量化的SAR成像方法相結(jié)合,實現(xiàn)精確定量的3維成像,是必須解決的一個理論問題。現(xiàn)有SAR 3維成像技術(shù)需要大量多角度觀測,核心原因是SAR圖像方程中的高度維參數(shù)的解空間巨大,少數(shù)觀測無法獲得參數(shù)的唯一精確解。如果加入微波散射機制和圖像視覺語義信息等約束條件,可有效縮小解空間范圍,從而精確確定高度方向的各項參數(shù),實現(xiàn)3維成像[64]。因此,需要創(chuàng)新構(gòu)建SAR微波視覺3維成像理論框架,解決圖像語義與微波散射機制的約束模型構(gòu)建、異構(gòu)非線性SAR 3維成像方程最優(yōu)化求解等難題,發(fā)展基于微波視覺的3維成像理論與方法。
初步技術(shù)思路如下。根據(jù)SAR成像方程,如式(4)
該等式為某次觀測下SAR圖像方程中復(fù)數(shù)據(jù)表達(dá)式,其中Rj是斜距,ηj對應(yīng)方位向慢時間,λ是雷達(dá)工作波長,σi對應(yīng)等距圓弧上第i個散射中心對應(yīng)的散射系數(shù),?i為該散射系數(shù)的相位,hi為該散射中心的高度,N為該等距圓弧上疊掩的散射中心的個數(shù),如圖21所示。
圖21 SAR圖像中某疊掩像素的信號表達(dá)式Fig.21 Signal model of the overlapping pixel
在現(xiàn)有的稀疏3維成像算法中,對σi有稀疏性假設(shè),但對σi和高程hi沒有約束條件,解空間很大,在少量觀測下無法滿足求解條件,故對多角度觀測的數(shù)量有較高要求。本技術(shù)思路在綜合考慮目標(biāo)散射特性與SAR圖像語義信息的情況下,引入視覺語義和散射機制的約束,縮小求解空間,如式(5)所示,
其中,hi ∈f(h,x)表示根據(jù)微波視覺推斷得到散射中心位于某條曲線上,N ∈{K}表示疊掩的散射中心數(shù)量具有先驗知識,(|σi|,?i)∈{|σK|,?K}表示散射中心的取值具有一定先驗知識,通過聯(lián)立上述方程組實現(xiàn)求解。此外,如微波視覺獲得的約束無上述顯式表達(dá),還可基于散射機制和視覺語義中挖掘的目標(biāo)幾何基元對應(yīng)像素間的連續(xù)性約束、待求參數(shù)符合一定先驗分布等建立約束模型,采用多約束壓縮感知以及深度神經(jīng)網(wǎng)絡(luò)來實現(xiàn)復(fù)雜多約束下逆問題的優(yōu)化求解。
合成孔徑雷達(dá)3維成像技術(shù)可以直接獲得目標(biāo)的3維電磁散射結(jié)構(gòu),在城市測繪和災(zāi)害評估等領(lǐng)域發(fā)揮了重大作用。本文回顧了合成孔徑雷達(dá)3維成像技術(shù)的發(fā)展,詳細(xì)介紹了TomoSAR以及陣列干涉SAR的技術(shù)體制和特點,指出現(xiàn)有3維成像技術(shù)受限于理論制約,系統(tǒng)復(fù)雜度高或成像周期長,限制了其大規(guī)模推廣應(yīng)用。
針對上述問題,本文提出了SAR微波視覺3維成像理論方法,針對現(xiàn)有3維成像方法中并未利用的微波散射機制、圖像視覺語義等含有的3維信息,利用計算電磁學(xué)、計算機視覺等相關(guān)理論方法加以提取,并將其表達(dá)成對SAR信號處理的約束條件,實現(xiàn)3維信息的饋入,大大降低3維成像對空間擴展觀測數(shù)量的依賴,最終實現(xiàn)少量觀測下的SAR 3維成像,為SAR 3維成像技術(shù)發(fā)展開辟了新的方向。目前,SAR微波視覺3維成像的研究尚處于理論探索階段,需要進(jìn)一步開展相關(guān)研究,推進(jìn)SAR 3維成像技術(shù)的發(fā)展。