張桂英

（遼寧省檢驗檢測認證中心，遼寧沈陽 110034）

大數(shù)據(jù)是指無法在一定時間范圍內用常規(guī)軟件工具進行捕捉、管理和處理的數(shù)據(jù)集合，是需要新處理模式才能具有更強的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產。

一、大數(shù)據(jù)地理信息數(shù)據(jù)質量控制的目的和意義

基礎性地理信息數(shù)據(jù)是大數(shù)據(jù)地理信息數(shù)據(jù)生產的基石，通過計算機技術，自動識別、篩選、歸類，形成專題性、針對性的新型測繪地理信息成果服務于各行各業(yè)。

當前，基礎性測繪地理信息數(shù)據(jù)中具有基礎性、現(xiàn)勢性、可靠性的國家基本比例尺的3D（DLG， DEM，DOM）成果基本已經(jīng)建成，省級負責的1:1萬比例尺3D成果在各行各業(yè)得到了廣泛的應用，其得天獨厚資源是生產大數(shù)據(jù)地理信息數(shù)據(jù)的基礎性數(shù)據(jù)。

挖掘、綜合信息，使信息更真實，決策符合預期或是趨勢的同時，地理信息數(shù)據(jù)演變得體量越來越大，承載信息越來越豐富，質量控制隨之面臨挑戰(zhàn)。

控制大數(shù)據(jù)地理信息數(shù)據(jù)質量，充分發(fā)揮基礎性地理信息數(shù)據(jù)的優(yōu)勢，是將優(yōu)質數(shù)據(jù)質量延伸至數(shù)據(jù)行業(yè)應用，從而為更加彰顯利用基礎測繪數(shù)據(jù)生產大數(shù)據(jù)地理信息數(shù)據(jù)質量控制的重要性。以坡度圖生產和質量控制為例，思考測繪地理信息大數(shù)據(jù)質量控制所面臨的問題及解決方案。

1.坡度圖

坡度圖是表示地面傾斜率的地圖。用圖上某點的切平面與水平地面的夾角表示某點的傾斜程度即為坡度。用坡度值表示地勢的變化，坡度值低就表示地勢平坦，坡度值高就意味地勢陡峭。

坡度圖生產是第三次全國國土調查的子項目，所用的數(shù)據(jù)源是各省基礎測繪成果DEM柵格數(shù)據(jù)和縣域界線矢量數(shù)據(jù)。坡度圖為計算耕地坡度，精準丈量國土起到重要作用。

2.坡度圖生產

“坡度圖生產是使用ArcGIS軟件，利用符合要求的最新1:10000 DEM數(shù)據(jù)，經(jīng)數(shù)據(jù)預處理、DEM拼接、坡度計算、生成柵格坡度圖，對柵格坡度圖進行分級后，將數(shù)據(jù)轉為坡度分級矢量數(shù)據(jù)，再對坡度分級矢量數(shù)據(jù)按照設計要求進行圖斑綜合、拓撲檢查、數(shù)據(jù)裁切，最終形成以縣級為單位的坡度分級圖。

3.坡度圖由柵格數(shù)據(jù)轉換到矢量數(shù)據(jù)其核心的內容

（1）坡度計算采用三階反距離平方權差分(Horn 算法)。

（2）坡度分為5級：1級≤2°，2級為2°～6°，3級為6°～15°，4級 為15°～25°，5級 為＞25°，范圍值上含下不含。

（3）利用ArcGIS軟件對坡度分級柵格數(shù)據(jù)進行矢量化處理，建立數(shù)據(jù)結構。

（4）對矢量化數(shù)據(jù)進行圖斑綜合、界線平滑、拓撲重建、數(shù)據(jù)裁切等處理：將圖上面積小于30平方毫米的坡度分級圖斑按坡度級就低不就高原則并入鄰近圖斑；將寬度小于或等于1個格網(wǎng)尺寸的線狀坡度圖斑按平均配賦原則合并至相鄰圖斑中；坡度分級矢量數(shù)據(jù)的圖斑界線與坡度分級柵格數(shù)據(jù)空間位置偏移一般不超過1個格網(wǎng)，最大偏移量不得超過2個格網(wǎng)；分縣、分區(qū)處理的坡度分級矢量數(shù)據(jù)，須進行接邊處理，接邊限差不得超過2個格網(wǎng)；對綜合后的圖斑進行平滑處理，最后進行拓撲重建，使之屬性結構同標準一致；用外擴1千米后的縣界對光滑后的矢量數(shù)據(jù)進行裁剪，生成以縣為基本單位的坡度分級矢量數(shù)據(jù)圖。

二、大數(shù)據(jù)地理信息數(shù)據(jù)坡度圖質量控制

大數(shù)據(jù)地理信息應用成果與常規(guī)的測繪成果質量檢查是有區(qū)別的，首先大數(shù)據(jù)生產中允許不精確，接受混雜性，包容同類性。精確對于大數(shù)據(jù)地理信息數(shù)據(jù)來說是不存在的，當前測繪地理信息的生產模式?jīng)]有絕對精確的數(shù)據(jù)，在成果質量檢查實踐中，追求和所關注的是數(shù)據(jù)成果質量整體性上移的可靠性，通過檢查動作更多的是對數(shù)據(jù)成果的符合性判斷，如坡度分級矢量化中任意一條技術處理都沒有一個具體固定的答案，只是要求在一定的“動作 ”范圍內就可以判斷為符合要求?，F(xiàn)階段測繪成果質量控制手段為自查、互查、小組查、院級檢查、檢查驗收，檢查實踐中每一道檢查，甚至到了“檢查驗收”數(shù)據(jù)仍然存在有問題，所謂“撒網(wǎng)千層，網(wǎng)網(wǎng)有魚”，但數(shù)據(jù)整體質量在一定的限差或范圍內呈上升趨勢，成果質量的可靠性便可得到保證。

有效判定大數(shù)據(jù)地理信息數(shù)據(jù)成果的質量，是大數(shù)據(jù)數(shù)據(jù)成果應用的要求，因此質量控制要圍繞項目成果的需求進行開展。

1.數(shù)據(jù)源質量控制

數(shù)據(jù)源（Data Source）顧名思義，數(shù)據(jù)的來源，盡可能采用1:1萬DEM數(shù)據(jù)更新省級坡度圖。1:1萬比例尺數(shù)字高程模型（Digital Elevation Model)，簡稱DEM，是省級基礎性測繪地理信息數(shù)字成果之一，具有統(tǒng)一的空間參考、均勻的位置精度，具有相同的裁切原則和一致的格網(wǎng)尺寸，且具有生產“三調”所要求的時間精度，數(shù)據(jù)成果為柵格數(shù)據(jù)，只有具備邏輯上一致特點，才能符合坡度圖數(shù)據(jù)加工要求。

覆蓋完整的DEM數(shù)據(jù)成果是數(shù)據(jù)源質量控制的另一個方面，只有區(qū)域DEM成果覆蓋完整性得到保障，才不至于形成“無米之炊”現(xiàn)象發(fā)生。

2.生產實施方案質量控制

“三調”項目成果所要求的“坡度圖”為計算耕地坡度，精準丈量國土所用，項目要求坡度圖應為矢量數(shù)據(jù)，充分挖掘數(shù)據(jù)源柵格數(shù)據(jù)（GRID）與成果數(shù)據(jù)（GDB）的矢量數(shù)據(jù)之間內在聯(lián)系，選擇適合的生產的平臺，流程化地實現(xiàn)數(shù)據(jù)的轉換。其生產實施方案質量是衡量數(shù)據(jù)質量依據(jù)的前提條件。任何大數(shù)據(jù)地理信息數(shù)據(jù)成果生產前，必須經(jīng)過充分論證實施方案，包括：項目概況、數(shù)據(jù)源、主要技術指標、總體技術流程、項目成果、組織實施、質量管理、安全與保密等，形成生產技術流，為能夠高效、批量生產乃至符合要求的成果質量做好充分的理論基礎。

3.生產工藝流程質量控制

大數(shù)據(jù)地理信息數(shù)據(jù)生產要實行全流程質量控制。坡度圖生產的每個節(jié)點由前至后呈遞進關系，前一節(jié)點是后一節(jié)點的前提，后一節(jié)點可以成為前一節(jié)點的質量檢查，節(jié)點之間形成大數(shù)據(jù)生產的技術流，對于數(shù)據(jù)成果來說，每個節(jié)點都至關重要，質量控制要貫穿于數(shù)據(jù)生產的始終。

4.利用首件成果驗證生產工藝流程質量控制

（1）首件成果驗證

大數(shù)據(jù)測繪地理信息數(shù)據(jù)成果在概念上早已不再稱為測繪產品了。為了驗證數(shù)據(jù)生產的流程是否符合項目成果的要求，以便能夠展開批量生產，選取區(qū)域內以縣區(qū)為單位的坡度圖成果進行的驗證工作稱為首件成果驗證。質量驗證主要采取符合性驗證，必要時需要通過三方軟件驗證，如坡度圖生產“坡度計算”和“坡度分級”便采用了Excel軟件驗證了技術的正確性。

坡度圖主要關注的是根據(jù)設計要求，依據(jù)圖上高程不同而進行的分級、圖斑合并、區(qū)域間接邊等，因此首件成果選取相鄰兩個縣區(qū)成果作為首件成果。驗證后對不符合要求的生產工藝、成果形式提出修正意見，為后期批量生產打牢基礎，最終要編寫首件成果驗證報告。

（2）首件成果驗證主要內容

選擇合適的數(shù)據(jù)源、生產平臺后，首件成果主要是從坡度圖數(shù)據(jù)成果驗證工藝、流程的適應性、合理性。適應性是指坡度圖的生產工藝流程是否符合大數(shù)據(jù)地理信息數(shù)據(jù)生產的要求；合理性是指生產過程中經(jīng)人工在軟件平臺下，對數(shù)據(jù)整理如圖斑合并、縣區(qū)接邊等，處理后數(shù)據(jù)表達是否合理。

（3）大數(shù)據(jù)地理信息數(shù)據(jù)成果質量評價

大數(shù)據(jù)地理信息數(shù)據(jù)成果質量評價的指標,要根據(jù)項目要求達到普遍性的預期或趨勢，因此利用“差異率”來評價成果質量是一項重要指標。

差異率：當坡度圖坡度與DEM計算坡度不一致，綜合考慮坡度圖進行了圖斑綜合、以及不同坡度級管理重要性不同等因素，依據(jù)坡度圖坡度與DEM計算坡度的相應情況進行加權計算，統(tǒng)計出問題圖斑總面積和面積占比，以面積占比作為差異率。對差異率低于3%的，認定為成果合格，否則認定為不合格。

加權系數(shù)和計算公式為：

問題圖斑總面積=（圖斑面積×加權系數(shù)）的總和

差異率=（問題圖斑總面積/全部圖斑總面積）×100%

三、問題處理

對首件成果檢查發(fā)現(xiàn)，技術性要求中“對綜合后的圖斑進行平滑處理，最后進行拓撲重建，使之屬性結構同標準一致”，通過首件成果驗證，發(fā)現(xiàn)DEM柵格數(shù)據(jù)轉為矢量數(shù)據(jù)后，經(jīng)歷“平滑處理”，造成了數(shù)據(jù)單條曲線數(shù)據(jù)量呈幾何數(shù)量級增大，縣域面積在平方千米，計算實踐太長且人工處理“小圖斑”時，計算機運行每一個動作，都存在“卡頓”現(xiàn)象，無法想象6000平方千米的縣域如何操作；且經(jīng)過“平滑處理”后，每一點都不在柵格數(shù)據(jù)的角點，成果數(shù)據(jù)無法進行“差異率”計算。

1.圖斑合并問題

（1）提高人工合并圖斑的準確性，避免圖斑合并錯誤。如將1級平坦地勢的大圖斑合并到5級陡峭小圖斑，造成地勢表達錯誤，如果錯誤面積過大，也可能“差異率”超過3%，數(shù)據(jù)成果質量不能合格。

（2）將寬度小于或等于1個格網(wǎng)尺寸的線狀坡度圖斑合并至相鄰圖斑中。

（3）線狀坡度圖斑處理時由原設計的按平均配賦原則與相鄰圖斑合并，變更為與相鄰圖斑合并。

2.調整和優(yōu)化生產工藝流程

依據(jù)實際情況調整和優(yōu)化生產工藝流程：

（1）刪除“坡度分級矢量數(shù)據(jù)的圖斑界線與坡度分級柵格數(shù)據(jù)空間位置偏移一般不超過1個格網(wǎng)，最大偏移量不得超過2個格網(wǎng)。”

（2）“對綜合后的圖斑進行平滑處理，最后進行拓撲重建，使之屬性結構同標準一致?！敝小捌交幚怼保环洗髷?shù)據(jù)地理信息數(shù)據(jù)成果質量要求，因此調整了生產工藝為“對綜合后的圖斑后拓撲重建，使之屬性結構同標準一致?！?，除圖斑合并外不再進行“平滑處理”。

四、結束語

盡管坡度圖是地圖其中的一種，對于“三調”項目坡度圖卻不能完全套用傳統(tǒng)方式制成地圖，這是大數(shù)據(jù)地理系信息數(shù)據(jù)的需要。實踐中要從需求的實際出發(fā)合理制定質量控制實施方案。

為提高大數(shù)據(jù)地理信息數(shù)據(jù)整體質量，優(yōu)化計算機法，提高自動化程度，盡量減少人工干預，應是大數(shù)據(jù)地理信息數(shù)據(jù)生產的趨勢。