亚洲免费av电影一区二区三区,日韩爱爱视频,51精品视频一区二区三区,91视频爱爱,日韩欧美在线播放视频,中文字幕少妇AV,亚洲电影中文字幕,久久久久亚洲av成人网址,久久综合视频网站,国产在线不卡免费播放

        ?

        針對高分影像的RDU-Net鄉(xiāng)村路網(wǎng)提取方法

        2021-03-30 08:10:28吳仁哲蔡嘉倫劉國祥李勇張瑞
        遙感信息 2021年1期
        關鍵詞:標簽卷積道路

        吳仁哲,蔡嘉倫,劉國祥,2,李勇,張瑞,2

        (1.西南交通大學 地球科學與環(huán)境工程,成都 611756;2.西南交通大學 國家鐵路高速鐵路安全空間信息技術聯(lián)合工程實驗室,成都 611756)

        0 引言

        道路是極為重要的地理要素,對于經(jīng)濟建設、城市規(guī)劃有著決策性作用。隨著我國大力發(fā)展城鄉(xiāng)建設,道路的矢量生產(chǎn)工作日益增多。人工矢量化更新效率低下,且隨著道路的新增和擴建通常無法獲得最新道路矢量數(shù)據(jù),因此道路數(shù)字信息的自動提取和快速更新一直是相關領域的研究熱點[1]。通過遙感影像獲取道路網(wǎng)絡信息,具有客觀高效的優(yōu)勢,也能夠為導航、規(guī)劃等相關領域提供基礎數(shù)據(jù)[2]。近年來隨著高分辨率傳感器的發(fā)展和廣泛應用,一方面能夠更詳細地反映地物的特征信息[3-4],另一方面因地物細節(jié)化、差異性的增大導致影像分類離散化和不規(guī)則化,且較中低分辨遙感數(shù)據(jù)更為顯著。如何在更為復雜的數(shù)據(jù)場景中實現(xiàn)穩(wěn)定、可靠的圖像分割,是限制其應用拓展的主要瓶頸。近年來,深度學習作為一種有效的遙感圖像語義分割方法,被看作是突破瓶頸的可行思路,受到國內外學者的廣泛關注[5-6]。

        高效的圖像表示是遙感圖像分割任務的核心[7]。因高分衛(wèi)星圖像的道路周邊存在大量的自然和人造地物,對于道路信息的提取干擾非常明顯[8-9]?;跓o監(jiān)督特征學習的特征編碼方法采用小波變換增強道路信息,實現(xiàn)多分辨率顯示[10],基于具有少量人工標注特征的特征編碼方法采用SVM提取道路信息,較好提取出道路主干信息[11],但是這些傳統(tǒng)求解方法生成的圖像特征都極少,從本質上阻礙了遙感影像特征的提取。目前,深度學習已逐漸成為機器學習領域中的熱點,尤其是全卷積神經(jīng)網(wǎng)絡(full convolutional neural network,F(xiàn)CN)利用編碼與解碼卷積實現(xiàn)影像特征的提取[12],具有較好的性能。Zhong等[13]使用FCN方法,針對馬薩諸塞州道路和建筑數(shù)據(jù)集,成功實現(xiàn)了語義分割。然而,F(xiàn)CN分類方法難以回避定位和識別精度權衡的問題,路網(wǎng)識別精度將隨著定位精度的提升而發(fā)生損失。經(jīng)算法改進后,Ronneberger等[14]提出了U-Net (U型網(wǎng)絡) 網(wǎng)絡模型,能夠較好地平衡定位和識別精度權衡問題,僅通過30張圖片并輔以數(shù)據(jù)擴充就達到了非常低的錯誤率。Sun等[15]通過堆疊U-Net模型大幅度提升了網(wǎng)絡的深度,應用于城市道路提取取得較好的結果。但是,U-Net卷積運算時沒有進行填充,而是采用鏡像操作處理邊界像素,后續(xù)卷積運算仍然存在尺度單一、層與層之間常發(fā)生信息丟失的問題,導致識別和定位精度大幅度下降。

        本文采用長短連接、Tversky系數(shù)、空洞卷積相結合的策略,在增大模型感受野的同時減少下采樣引起的信息損失,將恒等映射轉換為更適合機器學習的差值計算防止模型退化,并通過批標準化強制神經(jīng)元輸入輸出符合正態(tài)分布,避免梯度消失,從而基于少量的訓練樣本結合數(shù)據(jù)擴充方法,獲得一個性能較好的RDU-Net(殘差空洞卷積U型網(wǎng)絡)道路提取模型。為了論證模型與算法的可行性及精度、回調率,選取內江市羅泉鎮(zhèn)鄉(xiāng)村道路典型研究對象開展實驗,提取公路以及機耕道信息,并通過形態(tài)學閉運算、種子填充法、節(jié)點替換的方法連接道路,消除獨立圖斑。最后,針對RDU-Net與U-Net模型獲得的路網(wǎng)提取結果,開展了比較驗證與精度差異分析。

        1 道路提取方法與流程

        1.1 U-Net網(wǎng)絡模型

        U-Net在FCN的模型架構之上進行了修改和擴展,旨在以較少的訓練圖像產(chǎn)生更精確的圖像分割模型,其網(wǎng)絡結構如圖1所示。在上采樣部分,該模型擁有大量功能通道,這些功能通道允許網(wǎng)絡將上下文信息傳播到更高分辨率的層。上采樣路徑與下采樣路徑形成對稱,產(chǎn)生了U形結構。U-Net在靠近輸入的較淺層提取的是相對小尺度上的簡單特征,而在靠近輸出的較深層提取的則是相對大尺度上的復雜特征。它同時具備了捕捉上下文信息的收縮路徑和允許精確定位的對稱擴展路徑,這使得網(wǎng)絡將上下文信息向更高層分辨率傳播,融合多尺度信息進行判斷。本文將U-Net鏡像裁邊方法更改為在卷積運算時進行填充,因此無需對輸入圖像進行邊緣擴充。

        圖1 本文使用的U-Net模型

        1.2 改進的RDU-Net模型

        在復雜場景的遙感圖像中,道路信息的占比通常極小(<3%)。由于使用數(shù)量不平衡的數(shù)據(jù)進行訓練將導致預測結果相對準確但是靈敏度很低,另外如果沒有平衡這些標簽,學習過程可能會收斂到局部損失函數(shù)的最小值,預測值與標簽值之間會存在偏差,因此,常規(guī)的損失函數(shù)(如交叉熵誤差、均方誤差等)難以適用于此類正負樣本不平衡的訓練數(shù)據(jù)。最終的圖像分割模型若僅能保證結果準確而在靈敏度方面不能達標,是無法滿足圖像分割要求的。

        為解決上述問題,本文引入Tversky系數(shù)以平衡模型精度和靈敏度之間的矛盾。Tversky系數(shù)在設計之初主要應用于醫(yī)學病灶區(qū)檢測,通過平衡假陰性與假陽性,提高函數(shù)的回調率從而在精度和靈敏度之間獲得更好的平衡。應用于道路提取,可有效降低圖像分割時前景和背景像素數(shù)量差異造成的影響[16]。Tversky系數(shù)的計算方法如式(1)所示。

        (1)

        式中:A為預測集,B為真實標簽集;|A∩B|為成功預測,|A-B|為假陽性(背景識別為道路),|B-A|為假陰性(道路識別為背景);α和β分別控制假陽性和假陰性,根據(jù)文獻[16]結果,通常采用α=3和β=0.7定義損失函數(shù)。

        本文使用的RDU-Net模型的Tversky系數(shù)由式(2)計算得出。

        (2)

        通常情況下,增加卷積神經(jīng)網(wǎng)絡的網(wǎng)絡深度可以提升網(wǎng)絡的準確率,但是很深的網(wǎng)絡層,由于參數(shù)初始化一般更靠近0,這樣在訓練的過程中更新淺層網(wǎng)絡的參數(shù)時,很容易隨著網(wǎng)絡的深入而導致梯度消失,使得淺層的參數(shù)無法更新。同時,隨著網(wǎng)絡深度的增加,求解器難以利用多層網(wǎng)絡擬合同等函數(shù),最終使得準確度變得飽和、網(wǎng)絡退化。殘差網(wǎng)絡(residual network,ResNet)利用殘差結構通過直接將輸入信息繞道傳到輸出,保護信息的完整性,將擬合同等函數(shù)轉化為使F(xi,ωi)趨于0的優(yōu)化函數(shù),簡化學習目標和難度,解決了深層神經(jīng)網(wǎng)絡出現(xiàn)的網(wǎng)絡退化以及梯度爆炸的問題[17-18]。殘差結構原理如式(3)所示。

        (3)

        式中:y為非線性層需要擬合的復雜函數(shù);x為上一層輸入;ω為權重參數(shù);W為線性投影函數(shù)。

        為了更好地應對下采樣時參數(shù)量大幅度增加的問題,同時增大RDU-Net的感受野,采用空洞卷積,以較少的運算量獲得更細致的紋理信息[19-20]??斩淳矸e的定義如式(4)所示。

        (4)

        式中:d為空洞率;x、y分別為輸入、輸出;h為波器;K為波器大小。通過空洞卷積將下采樣過程中信息損失降低到最小??斩淳矸e時感受野的計算如式(5)所示。

        (5)

        式中:r為感受野大??;K為波器大??;S為卷積運算時的步長。由圖2可以看出,RDU-Net通過在最底層采用2個空洞分別為3和5的卷積,感受野隨之大幅增加,從而有效提升了輸出特征圖對原始圖像的映射范圍。

        圖2 感受野變化

        為彌補傳統(tǒng)分割算法層與層之間信息丟失、梯度消失、錯分漏分現(xiàn)象頻繁的問題,本文采用批標準化、空洞卷積、Tversky損失函數(shù)、殘差結構與長短連接相結合,在正負樣本極度不均衡的情況下,依然能夠保證訓練正常進行,防止隨著網(wǎng)絡深度增加出現(xiàn)的退化問題,保護信息的完整性從而使用較少的訓練數(shù)據(jù)獲得一個魯棒性更好的模型RDU-Net(圖3)。根據(jù)輸入影像和道路標簽特征圖,使用步長為2的3×3卷積代替U-Net中的2×2最大池化進行下采樣。每一次下采樣和上采樣之間都加入了殘差結構,通過殘差結構將上下采樣層進行連接、轉換擬合函數(shù),使用更容易計算的優(yōu)化函數(shù)取代同等函數(shù)。在下采樣最底層采用空洞卷積,大幅度增加感受野,以提升RDU-Net網(wǎng)絡模型對影像全局信息的把握。

        圖3 RDU-Net網(wǎng)絡模型

        1.3 道路提取流程

        整體實驗流程如圖4所示。實驗數(shù)據(jù)采用高分二號衛(wèi)星覆蓋內江市羅泉鎮(zhèn)的遙感影像,通過目視解譯進行道路矢量化建立道路標簽圖層。由于訓練樣本有限,故通過影像與道路標簽進行匹配、分割、旋轉、變換亮度等操作擴充訓練數(shù)據(jù)??紤]到純背景的標簽缺乏意義并且會削弱網(wǎng)絡的訓練速度、靈敏度,實驗舍棄了完全背景的數(shù)據(jù),最終打包成二進制文件的訓練數(shù)據(jù)集。將數(shù)據(jù)集分為2個部分,第一部分為訓練數(shù)據(jù)共60 000幅圖像,第二部分為驗證數(shù)據(jù)共16 400幅圖像,道路標簽圖像共3 185幅。預測數(shù)據(jù)選擇影像另一區(qū)域僅進行圖像的分塊處理,共150幅圖像。本文模型訓練的硬件采用實驗室提供的Nvidia Quadro P2000 6 GB顯卡。RDU-Net中卷積核參數(shù)使用高斯初始化,每一次卷積運算都進行批標準化。使用Tversky指導梯度下降方向,通過訓練數(shù)據(jù)對RDU-Net進行迭代訓練,調整卷積核參數(shù),進而使用調整參數(shù)后的RDU-Net對預測數(shù)據(jù)進行預測,并計算各種指標分數(shù)。由于圖像分割屬于像素級別的預測分類,在利用卷積神經(jīng)網(wǎng)絡對目標區(qū)域進行檢測時,提取結果易受到與目標對象特征相似的其他地物的影響,會使得預測結果中存在大量的獨立小斑塊[21-22]。此外,實驗選擇的地區(qū)為鄉(xiāng)村,有較多樹木、灌木遮擋道路,易出現(xiàn)斷點。如何將道路連通以及刪減錯誤圖斑非常重要,故在道路信息提取后,進行圖像合并、膨脹—濾波—腐蝕、節(jié)點替換進行道路全局連接,以及種子填充進行濾波。

        圖4 實驗流程

        2 實驗與結果分析

        2.1 實驗區(qū)域及數(shù)據(jù)介紹

        為驗證RDU-Net在高分辨率遙感影像中提取復雜路網(wǎng)的能力,本文選擇高分二號遙感圖像作為實驗數(shù)據(jù)。高分二號衛(wèi)星擁有0.8 m的全色分辨率,以及3.2 m的多光譜分辨率,成像幅寬45 km,為道路的識別和提取提供了良好的圖像信息。實驗采用的影像條帶號為25,行編號166,影像日期為2017年9月12日,覆蓋內江市羅泉鎮(zhèn)研究區(qū)。該區(qū)域屬于典型鄉(xiāng)村地區(qū),道路受房屋、草木、田埂等多種信息干擾,且有田埂信息作為線狀目標嚴重干擾機耕道提取,需要結合周邊環(huán)境進行判斷,完整提取道路信息更加困難。

        2.2 實驗結果與分析

        實驗結果圖5表明:RDU-Net相較于U-Net擁有更好的道路提取能力且錯分現(xiàn)象明顯減少;同時,RDU-Net擁有更好的泛化能力,訓練樣本中機耕道的訓練數(shù)據(jù)較少,但RDU-Net仍然能夠完整地提取機耕道信息。圖5中第一行為道路標簽與影像疊加,第二行為RDU-Net道路提取結果,第三行為U-Net提取結果。在使用交叉熵誤差作為損失函數(shù)時,由于前景(道路)與背景像素個數(shù)極度不平衡,導致?lián)p失函數(shù)值非常小,模型收斂于局部最優(yōu)解,無法進行模型訓練,因此對比實驗使用的U-Net網(wǎng)絡模型(圖1)也采用批標準化、Tversky函數(shù)。根據(jù)A1、A2所示,對于道路與背景有明顯差異的遙感影像,2種模型均能夠很好地提取道路信息,但是A1相較于A2信息保留更完整,在道路拐點處連接更為平滑。B1、B2顯示,在道路情況較為復雜有少量樹木遮擋的情況下,道路的主干信息也能夠被很好地提取,且都能在受到較小的干擾時保證道路的連通,但B2包含有更多的噪聲并有錯分現(xiàn)象。C1、C2圖像上方道路由于陰影遮蓋導致提取差異較大,C1對于陰影遮蓋的道路也能較為完整地提取。D1、E1、D2、E2為機耕道信息的提取,顯然D1、E1道路信息提取效果優(yōu)于D2、E2,D1、E1中機耕道主干信息已被提取,只有少量的錯分漏分現(xiàn)象。

        注:紅框內為差異部分。圖5 RDU-Net與U-Net預測結果對比

        由圖6(a)可知,RDU-Net能夠較完整地提取道路主干信息,但是由于遙感影像中道路受樹木、房屋等遮擋,存在有較多的斷點,所得道路信息難以用于生產(chǎn)。因此采用形態(tài)學閉運算結合方框濾波將道路進行閉合處理,所得結果如圖6(b)所示,斷點信息大多數(shù)已經(jīng)連接,但是道路交叉口由于圖像閉運算出現(xiàn)了大量節(jié)點且有許多噪聲點也被放大化,不僅影響道路信息的準確度而且影響美觀。為了消除噪聲點以及道路間節(jié)點,通過種子填充法監(jiān)測連通區(qū)域結果如圖6(c)所示,每一個連通區(qū)被填充為一種顏色,當連通區(qū)像素數(shù)小于100時,該連通區(qū)被標記為噪聲進行去除。利用腐蝕算法對圖6(c)處理,獲得縮小后節(jié)點信息,得到最終道路提取結果如圖6(d)所示,其中綠色線條代表通過限定連通區(qū)像素閾值最終得到的道路信息,紅色為標簽數(shù)據(jù),小路仍有遺漏但道路主干信息提取較為完整且連貫性較好。

        圖6 道路連通處理

        為定量評估道路分割的精度,本實驗引入IoU分數(shù)與F1分數(shù)作為評價指標,分析結果如表1所示。IoU分數(shù)是對象類別分割問題的標準性能度量。給定一組圖像,IoU測量給出了在該組圖像中存在的對象的預測區(qū)域和地面實況區(qū)域之間的相似性。F1分數(shù)是統(tǒng)計學中用來衡量二分類模型精確度的一種指標,它同時兼顧了分類模型的精確率和召回率。

        根據(jù)表1對比分析可知,RDU-Net的精度和回調率都優(yōu)于U-Net模型,RDU-Net相比于U-Net在復雜道路網(wǎng)絡提取具有更好的性能,尤其是感受野一項,優(yōu)勢尤為突出。相比常見的面狀要素提取,IoU得分較低,主要是由于IoU分數(shù)對線性要素的位移有較高敏感度,當提取結果與道路標簽存在位移時,IoU分數(shù)亦會隨之發(fā)生降低。另外,在建立標簽時樹木與房屋遮蓋處并未斷開,這樣雖然能夠更好地訓練模型的抗干擾能力,但是也會使得預測值與標簽值不對應(預測值在有遮擋地方斷開,而標簽值連續(xù)),從而導致IoU分數(shù)大幅下降。

        表1 RDU-Net與U-Net性能參數(shù)對比

        根據(jù)植被覆蓋的復雜場景重點開展比較分析可知,RDU-Net與U-Net都有假陽性提取,錯誤地將背景識別為道路,但對比這些錯誤識別的道路信息發(fā)現(xiàn),大多數(shù)即使人工也難以分辨(如圖5(b)中所對應的池塘上方,難以確定是道路或堤壩)。U-Net使用的是卷積與最大池化進行下采樣,在此過程中影像信息丟失較多,且感受野較小網(wǎng)絡難以對全局信息進行分析,這導致U-Net在復雜場景下提取機耕道的正確率偏低,往往受到背景的干擾或在草木較茂盛的區(qū)域出現(xiàn)道路斷開的問題,難以完整提取。而在此類復雜場景下,RDU-Net擁有更好的魯棒性,在稀疏草木遮擋區(qū)域道路斷開情況較少出現(xiàn),而草木茂盛的區(qū)段存在有少量斷點,可以結合道路連通方法加以消除,故所得道路信息較為準確、完整??偟貋砜?,本文所使用的RDU-Net在鄉(xiāng)村道路提取效果優(yōu)于傳統(tǒng)的U-Net網(wǎng)絡,道路提取較為完整且錯分現(xiàn)象較少。

        3 結束語

        道路作為重要的地理要素之一,對于經(jīng)濟建設、地貌研究、城鄉(xiāng)規(guī)劃等都有著至關重要的作用。而深度學習作為當前人工智能領域的前沿方向,盡管在道路提取方面已有很多研究,但在高分辨率影像復雜場景下的路網(wǎng)提取方面尚有不足。為此,本文提出了RDU-Net模型,選取內江市羅泉鎮(zhèn)為研究對象,采用高分二號衛(wèi)星影像數(shù)據(jù)進行鄉(xiāng)村復雜場景下的路網(wǎng)提取,并與U-Net模型進行對比實驗。

        本文選取內江市羅泉鎮(zhèn)的鄉(xiāng)村道路典型研究對象,充分考慮到鄉(xiāng)村道路與背景更容易混淆,存在有樹木、房屋、田埂等多種干擾源,且高分辨率遙感影像中地物細節(jié)化差異性增大、影像離散化和不規(guī)則化、提取時容易得到大面積假陰性等問題,借助批標準化、長短連接、空洞卷積、Tversky損失函數(shù)構建了感受野和回調率更高的RDU-Net道路分割模型。通過與現(xiàn)有的U-Net模型進行橫向對比,RDU-Net的錯分率和漏分率大幅降低,道路信息更加連貫完整,模型的泛化能力顯著增強,且模型的IoU、F1分數(shù)提升均超過10%,在不同的區(qū)域均能夠準確提取道路信息。另外,少量的遮擋不會導致道路斷裂,模型抗干擾能力亦有較大提升,保障了基于深度學習實現(xiàn)鄉(xiāng)村路網(wǎng)提取的可靠性。

        本文提出的RDU-Net模型僅通過少量的訓練樣本輔以數(shù)據(jù)擴充,便能夠滿足基于高分辨率遙感影像提取鄉(xiāng)村路網(wǎng)信息的要求,較現(xiàn)有模型與算法具有更好性能。相關算法流程及實驗結果可為相關領域研究和應用拓展提供參考。

        猜你喜歡
        標簽卷積道路
        堅持中國道路——方向決定道路,道路決定命運
        當代陜西(2022年4期)2022-04-19 12:08:50
        道聽途說
        基于3D-Winograd的快速卷積算法設計及FPGA實現(xiàn)
        我們的道路更寬廣
        青年歌聲(2020年12期)2020-12-23 06:30:00
        從濾波器理解卷積
        電子制作(2019年11期)2019-07-04 00:34:38
        無懼標簽 Alfa Romeo Giulia 200HP
        車迷(2018年11期)2018-08-30 03:20:32
        不害怕撕掉標簽的人,都活出了真正的漂亮
        海峽姐妹(2018年3期)2018-05-09 08:21:02
        基于傅里葉域卷積表示的目標跟蹤算法
        標簽化傷害了誰
        一次騎行帶來的感悟
        麻豆精品久久久久久久99蜜桃 | 亚洲中文字幕无码久久2020| 999久久66久6只有精品| 国产在线观看免费不卡视频| 精品国产一区二区三区不卡在线| 又黄又硬又湿又刺激视频免费| 国产激情对白一区二区三区四| 青青青草国产熟女大香蕉| 中文字幕亚洲精品在线免费| 麻豆av一区二区三区| 国产乱子伦精品无码码专区| 国产熟女av一区二区三区四季| 东风日产车是不是国产的| 色综合av综合无码综合网站| 亚洲人成人影院在线观看| 少妇高潮惨叫久久久久电影| 中文字幕一区二区av| 国产乱了真实在线观看| 亚洲成a人片在线看| 搡老熟女老女人一区二区| 国产欧美日韩中文久久| 午夜男女靠比视频免费| 亚洲中文字幕一区精品自拍| 18禁美女裸体网站无遮挡| 国产日产久久福利精品一区| 白白色发布的在线视频| 国偷自产视频一区二区久| 乱伦一区二| 夜色视频在线观看麻豆| 99精品视频69v精品视频| 日韩精品一区二区亚洲av| 无码人妻精品中文字幕免费| 久久精品亚洲熟女av麻豆| 国产裸体舞一区二区三区| 久久天天躁狠狠躁夜夜2020!| 久久国产精品懂色av| 久久人人爽人人爽人人片av高请 | 99久久无码一区人妻| 免费看久久妇女高潮a| 久久精品国产av大片| 开心五月婷婷激情综合网|