亚洲免费av电影一区二区三区,日韩爱爱视频,51精品视频一区二区三区,91视频爱爱,日韩欧美在线播放视频,中文字幕少妇AV,亚洲电影中文字幕,久久久久亚洲av成人网址,久久综合视频网站,国产在线不卡免费播放

        ?

        貴陽市政府?dāng)?shù)據(jù)開放平臺設(shè)計與實現(xiàn)

        2017-09-15 10:49:43黃明峰劉軍靖劍波
        電信科學(xué) 2017年9期
        關(guān)鍵詞:開放平臺貴陽市政府

        黃明峰,劉軍,靖劍波

        (貴陽市信息產(chǎn)業(yè)發(fā)展中心,貴州 貴陽 550081)

        運營技術(shù)廣角

        貴陽市政府?dāng)?shù)據(jù)開放平臺設(shè)計與實現(xiàn)

        黃明峰,劉軍,靖劍波

        (貴陽市信息產(chǎn)業(yè)發(fā)展中心,貴州 貴陽 550081)

        政府?dāng)?shù)據(jù)作為社會公共資源的價值和作用已成為全球的廣泛共識,而我國政府?dāng)?shù)據(jù)開放平臺建設(shè)整體上處于起步階段。以貴陽市政府?dāng)?shù)據(jù)開放平臺為例,介紹了政府?dāng)?shù)據(jù)開放平臺設(shè)計和建設(shè)方案,從平臺定位、總體框架、數(shù)據(jù)采集、數(shù)據(jù)質(zhì)量和元數(shù)據(jù)建設(shè)等方面進(jìn)行闡述和探討,為我國地方政府?dāng)?shù)據(jù)開放平臺建設(shè)提供借鑒與參考。

        總體框架;政府?dāng)?shù)據(jù)開放;數(shù)據(jù)質(zhì)量;元數(shù)據(jù)

        1 引言

        政府?dāng)?shù)據(jù)作為社會公共資源的價值和作用已成為全球的廣泛共識,根據(jù)《2016聯(lián)合國電子政務(wù)調(diào)查報告》[1]的數(shù)據(jù),聯(lián)合國 193個成員國中已有106個提供了開放數(shù)據(jù)目錄。《促進(jìn)大數(shù)據(jù)發(fā)展行動綱要》[2]中提出:2018年底前,建成國家政府?dāng)?shù)據(jù)統(tǒng)一開放平臺,2020年底前,逐步實現(xiàn)信用、交通、醫(yī)療、衛(wèi)生、就業(yè)、社保、地理、文化、教育、科技、資源、農(nóng)業(yè)、環(huán)境、安監(jiān)、金融、質(zhì)量、統(tǒng)計、氣象、海洋、企業(yè)登記監(jiān)管等民生保障服務(wù)相關(guān)領(lǐng)域的政府?dāng)?shù)據(jù)集向社會開放。國務(wù)院辦公廳印發(fā)的《政務(wù)信息系統(tǒng)整合共享實施方案》[3]提出了基于政府信息資源目錄體系,推動政府部門的原始性、可機器讀取、可供社會化再利用的數(shù)據(jù)集向社會開放的要求。

        復(fù)旦大學(xué)與提升政府治理能力大數(shù)據(jù)應(yīng)用技術(shù)國家工程實驗室在2017年中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上聯(lián)合發(fā)布的《2017中國地方政府?dāng)?shù)據(jù)開放平臺報告》[4]指出,我國符合政府?dāng)?shù)據(jù)開放特征的平臺僅為19個,整體上處于起步探索階段。我國共有300多個地級行政區(qū),除國務(wù)院另有規(guī)定外,國家原則上不再審批有關(guān)部門、地市級以下(不含地市級)政府新建孤立的信息平臺和信息系統(tǒng),地市級政府?dāng)?shù)據(jù)開放平臺對推動我國政府?dāng)?shù)據(jù)開放工作有著重要作用。

        貴州作為我國首個大數(shù)據(jù)綜合試驗區(qū),政府?dāng)?shù)據(jù)開放是試驗區(qū)首要任務(wù)的核心,貴陽市作為該試驗區(qū)的核心區(qū)域,從2016年底啟動政府?dāng)?shù)據(jù)開放工作,通過體制和機制的創(chuàng)新,2017年1月初,政府?dāng)?shù)據(jù)開放平臺(www.gyopendata.gov.cn)上線運行,目前開放數(shù)據(jù)集總數(shù)超過1 160個,數(shù)據(jù)量超過520萬條,在《2017中國地方政府?dāng)?shù)據(jù)開放平臺報告》中綜合分值排名第二。

        本文基于貴陽市政府?dāng)?shù)據(jù)開放平臺的實踐,從平臺的定位、問題與分析、總體框架設(shè)計、數(shù)據(jù)采集、數(shù)據(jù)質(zhì)量、開放元數(shù)據(jù)、項目組織等方面進(jìn)行闡述和探討,為我國地方政府?dāng)?shù)據(jù)開放平臺建設(shè)提供借鑒與參考。

        2 存在的問題和應(yīng)對策略

        從根本上講,制約我國政府?dāng)?shù)據(jù)開放工作進(jìn)程的主要因素還是體制機制方面的問題,但這不屬于本文討論的內(nèi)容,本文更多還是從項目技術(shù)實施角度,通過總結(jié)、借鑒和學(xué)習(xí)國內(nèi)外相關(guān)政府?dāng)?shù)據(jù)開放平臺的成果,結(jié)合貴陽市的實際,闡述政府?dāng)?shù)據(jù)開放面臨的問題和相關(guān)分析。

        2.1 存在的主要問題

        (1)平臺定位不清晰

        從國內(nèi)已建成的數(shù)據(jù)開放平臺來看,平臺的定位存在較大差異。從功能角度,不少數(shù)據(jù)開放平臺與信息公開平臺混淆;從服務(wù)對象角度,多數(shù)平臺的服務(wù)對象不清,參與的主體也不明;從平臺參與對象的角度,平臺以及平臺的管理者、數(shù)據(jù)使用者、數(shù)據(jù)需求者、數(shù)據(jù)提供者(政府組成部門)之間關(guān)系鏈不清晰。

        (2)數(shù)據(jù)開放范圍不明確

        哪些政府?dāng)?shù)據(jù)能開放,哪些數(shù)據(jù)不能開放的問題是制約數(shù)據(jù)開放進(jìn)程的主要原因,從國內(nèi)其他已建成的數(shù)據(jù)開放平臺提供的數(shù)據(jù)集來看,不同政府開放數(shù)據(jù)的數(shù)量和內(nèi)容有較大差異。

        (3)數(shù)據(jù)開放標(biāo)準(zhǔn)缺乏

        我國還缺乏數(shù)據(jù)開放的指標(biāo)和標(biāo)準(zhǔn)指導(dǎo),導(dǎo)致在現(xiàn)有的數(shù)據(jù)開放平臺上,已公開的各類數(shù)據(jù)缺乏統(tǒng)一的規(guī)范,由于數(shù)據(jù)資源種類繁多,格式、發(fā)布標(biāo)準(zhǔn)和元數(shù)據(jù)不統(tǒng)一,更新周期也缺乏明確的預(yù)期[5]。

        (4)數(shù)據(jù)安全保障體系不健全

        目前,我國還沒有專門的法律來界定敏感數(shù)據(jù)和用戶隱私,政府?dāng)?shù)據(jù)分類分級的規(guī)范和標(biāo)準(zhǔn)未建立,無法有效識別重要數(shù)據(jù)、敏感數(shù)據(jù)和隱私數(shù)據(jù),缺少針對不同類型數(shù)據(jù)開放的原則指導(dǎo),政府部門因過度擔(dān)心隱私問題或者以隱私保護(hù)為由,影響政府?dāng)?shù)據(jù)的開放共享[6]。

        (5)部門信息化水平參差不齊

        各部門由于行政履職和資源配置上的差異,導(dǎo)致各部門信息化水平存在較大差異,相當(dāng)多的部門數(shù)據(jù)資源還是電子文件甚至是紙質(zhì)檔案,“有數(shù)據(jù)無系統(tǒng)”的現(xiàn)象普遍存在。

        2.2 應(yīng)對策略

        (1)探索政府?dāng)?shù)據(jù)開放平臺的定位

        政府?dāng)?shù)據(jù)開放對提高政府治理能力和服務(wù)水平,激發(fā)市場活力和社會創(chuàng)造力有著重要的作用。《貴陽市政府?dāng)?shù)據(jù)共享開放條例》規(guī)定,公民、法人和其他組織可以通過開放平臺,提出開放需求,申請政府?dāng)?shù)據(jù),平臺應(yīng)當(dāng)以可機讀、標(biāo)準(zhǔn)格式開放數(shù)據(jù),公民、法人和其他組織可以在線訪問、獲取和利用。因此,貴陽市政府?dāng)?shù)據(jù)開放平臺的定位為“政府主導(dǎo)、市場參與、服務(wù)產(chǎn)業(yè)、數(shù)據(jù)惠民”,這個定位把數(shù)據(jù)開放平臺和信息公開平臺區(qū)別開來。服務(wù)對象不僅有法人和其他組織,還包括普通公民,同時平臺是貴陽市政府釋放數(shù)據(jù)資源的綜合窗口,通過該平臺對數(shù)據(jù)的管理者、提供者、需求者、使用者建立有效的關(guān)系。

        (2)創(chuàng)新數(shù)據(jù)開放范圍的思路

        一是梳理國內(nèi)已經(jīng)開放的數(shù)據(jù)集作為首批開放的目標(biāo),實現(xiàn)普遍開放;二是以統(tǒng)計、旅游、商貿(mào)、氣象、文化、教育、企業(yè)登記監(jiān)管等較為成熟領(lǐng)域為重點,實現(xiàn)價值密度大的數(shù)據(jù)的重點開放;三是以依申請開放為創(chuàng)新手段,實現(xiàn)數(shù)據(jù)的供給側(cè)和需求側(cè)的統(tǒng)一,實現(xiàn)按需開放。

        (3)實施數(shù)據(jù)標(biāo)準(zhǔn)化策略

        一是按照筆者參與編制的《政府?dāng)?shù)據(jù) 數(shù)據(jù)分類分級指南》(DB52/T 1123-2016)和《政府?dāng)?shù)據(jù)數(shù)據(jù)脫敏工作指南》(DB52/T 1126-2016)等貴州省地方標(biāo)準(zhǔn),統(tǒng)一對數(shù)據(jù)集進(jìn)行分類分級,建立統(tǒng)一的開放目錄;二是參考國內(nèi)外領(lǐng)先的政府開放平臺,制定了24個指標(biāo)項的開放元數(shù)據(jù);三是建立統(tǒng)一數(shù)據(jù)的采集、加工、脫敏、成果檢測全工作流程的數(shù)據(jù)質(zhì)量控制體系。

        (4)建立多元化的數(shù)據(jù)采集手段

        針對各部門信息化水平參差不齊的現(xiàn)狀,特別是要解決“有數(shù)據(jù)無系統(tǒng)”的問題,建立數(shù)據(jù)直報、前置機、接口等多元化的數(shù)據(jù)采集手段,同時針對每個數(shù)據(jù)提供部門編制數(shù)據(jù)開放工作指南,確保數(shù)據(jù)采集的標(biāo)準(zhǔn)化和持續(xù)性。

        (5)探索數(shù)據(jù)安全控制機制

        在數(shù)據(jù)治理的內(nèi)容研究中,數(shù)據(jù)政策是首要的促進(jìn)方式,數(shù)據(jù)質(zhì)量是必要的實現(xiàn)目標(biāo),數(shù)據(jù)隱私和安全是重要的保障前提[7]。開放數(shù)據(jù)需要做好數(shù)據(jù)分類分級和脫敏工作,有效降低數(shù)據(jù)安全風(fēng)險,同時加強數(shù)據(jù)溯源、態(tài)勢感知、安全審計等數(shù)據(jù)安全監(jiān)控工作。在具體實施上,通過委托國內(nèi)有能力的數(shù)據(jù)處理公司,統(tǒng)一對開放的數(shù)據(jù)進(jìn)行控制,建立安全可控的項目管理和數(shù)據(jù)處理機制。

        3 開放平臺建設(shè)總體方案

        國內(nèi)已建成的開放平臺普遍存在著數(shù)據(jù)量少、價值密度低、更新不及時、獲取體驗差、實際利用效果不理想等共性問題,數(shù)據(jù)開放平臺在建設(shè)模式、運營模式、價值釋放途徑、價值挖掘引導(dǎo)等方面還沒有成熟經(jīng)驗,建設(shè)合法合規(guī)獲取數(shù)據(jù)、分析數(shù)據(jù)和應(yīng)用數(shù)據(jù)的政府?dāng)?shù)據(jù)開放平臺,并確保數(shù)據(jù)的廣度、深度、鮮活度和價值密度,是大數(shù)據(jù)產(chǎn)業(yè)發(fā)展和提升社會雙創(chuàng)能力的重要組成。

        3.1 建設(shè)思路

        國際上,開放政府工作組(以下簡稱OGWG)提出的完整性、原生性、及時性、可獲取性、可機讀性、非歧視性、非私有性和免于授權(quán)(涉及隱私、安全和特別限制的除外)8項基本原則是目前國際公認(rèn)的原則。國內(nèi)目前還缺少國家層面體系化的指標(biāo)體系,參考基礎(chǔ)、數(shù)據(jù)、平臺三大層面共13個維度構(gòu)成的評估框架[8](如圖1所示),結(jié)合國際國內(nèi)發(fā)展趨勢和相關(guān)要求,以問題、需求和應(yīng)用為導(dǎo)向,以標(biāo)準(zhǔn)化為基線,以數(shù)據(jù)治理為重點,是貴陽市政府?dāng)?shù)據(jù)開放架構(gòu)設(shè)計的建設(shè)思路,本文重點闡述平臺和數(shù)據(jù)層的設(shè)計與實現(xiàn)。

        圖1 政府?dāng)?shù)據(jù)開放指標(biāo)框架

        3.2 總體框架

        政府?dāng)?shù)據(jù)開放平臺的核心是提供數(shù)據(jù)的能力。數(shù)據(jù)驅(qū)動下的電子政務(wù)總體架構(gòu),不再是以應(yīng)用、系統(tǒng)平臺為重點的傳統(tǒng)建設(shè)架構(gòu),需要圍繞數(shù)據(jù)這個中心,更多地關(guān)注數(shù)據(jù)的生命周期,從數(shù)據(jù)視圖來對待應(yīng)用的需求和資源的需求[9]。

        圖2 貴陽市政府?dāng)?shù)據(jù)開放平臺整體框架

        貴陽市政府?dāng)?shù)據(jù)開放平臺整體框架包括數(shù)據(jù)基礎(chǔ)設(shè)施層、數(shù)據(jù)資源層、平臺支撐層和應(yīng)用服務(wù)層(如圖2所示)。基礎(chǔ)設(shè)施層是承載平臺運行所需的網(wǎng)絡(luò)、計算、存儲和安全資源;數(shù)據(jù)資源層包括數(shù)據(jù)采集子層、數(shù)據(jù)處理子層、數(shù)據(jù)管理子層和數(shù)據(jù)存儲子層,數(shù)據(jù)采集子層支撐多種方式從部門和數(shù)據(jù)共享交換平臺采集數(shù)據(jù),構(gòu)建多元異構(gòu)的數(shù)據(jù)采集平臺;數(shù)據(jù)存儲子層是實現(xiàn)對采集及加工后的結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)以及數(shù)據(jù)目錄等內(nèi)容的存儲;數(shù)據(jù)處理層主要是實現(xiàn)數(shù)據(jù)的清洗加工、標(biāo)準(zhǔn)化、脫敏等處理;數(shù)據(jù)管理子層主要是對數(shù)據(jù)質(zhì)量、生命周期等進(jìn)行管理;平臺支撐層是對平臺整體資源、用戶、接口、目錄等的管理,具體包括數(shù)據(jù)開放管理平臺和開放目錄管理系統(tǒng);應(yīng)用服務(wù)層為面向公眾提供服務(wù)的窗口,包括電腦端的門戶網(wǎng)站和移動端的微信公眾號,主要提供數(shù)據(jù)下載、應(yīng)用程序編程接口(application programming interface,API)調(diào)用及互動交流等功能。

        3.3 開放數(shù)據(jù)發(fā)布流程

        貴陽市政府?dāng)?shù)據(jù)開放分為主動開放(政府部門制定數(shù)據(jù)開放計劃)和依申請開放(以需求為導(dǎo)向)兩種模式。此外,數(shù)據(jù)使用者在使用數(shù)據(jù)過程中發(fā)現(xiàn)數(shù)據(jù)問題,可通過平臺反饋到數(shù)據(jù)的提供方,進(jìn)行數(shù)據(jù)的疑義校核,及時修復(fù)或更改數(shù)據(jù)錯誤,并重新發(fā)布。

        政府開放數(shù)據(jù)過程包含數(shù)據(jù)的提供、處理和發(fā)布,主要分為3個部分,分別是資源編目發(fā)布流程、數(shù)據(jù)集開放處理流程、數(shù)據(jù)接口開放流程(如圖3所示)。

        資源編目發(fā)布流程是政府部門通過梳理數(shù)據(jù)資源,明確數(shù)據(jù)開放范圍和內(nèi)容,并結(jié)合相關(guān)業(yè)務(wù)屬性,完成數(shù)據(jù)分類和元數(shù)據(jù)編制,實現(xiàn)數(shù)據(jù)的編目、審核和發(fā)布。

        數(shù)據(jù)集開放處理流程從部門數(shù)據(jù)采集開始,經(jīng)過數(shù)據(jù)交換共享平臺或數(shù)據(jù)直報系統(tǒng),通過抽取、轉(zhuǎn)換、加載(ETL)和脫敏之后,存入開放數(shù)據(jù)庫,再經(jīng)過數(shù)據(jù)開放管理平臺進(jìn)行數(shù)據(jù)加工封裝,最終在數(shù)據(jù)開放門戶網(wǎng)站上形成可機讀的數(shù)據(jù)文件(如.xls、.xml、.csv、.json等)或封裝生成 API,整體上包括數(shù)據(jù)采集、清洗、入庫、加工和發(fā)布等數(shù)據(jù)生命周期流程。

        數(shù)據(jù)接口開放流程是將部門提供的API按照open API標(biāo)準(zhǔn),通過API代理總線統(tǒng)一轉(zhuǎn)向政府?dāng)?shù)據(jù)開放平臺,并利用API manager 進(jìn)行統(tǒng)一規(guī)范管理,最終在數(shù)據(jù)開放門戶網(wǎng)站形成可在線調(diào)用的API服務(wù)。

        圖3 開放數(shù)據(jù)發(fā)布流程

        4 主要功能的實現(xiàn)

        4.1 數(shù)據(jù)采集架構(gòu)

        開放數(shù)據(jù)采集需要充分整合利用現(xiàn)有基礎(chǔ),并有效適應(yīng)部門不同信息化的現(xiàn)狀,采用多種數(shù)據(jù)采集方式,包括文件采集(如 FTP 上傳、WebLoad等)、服務(wù)/接口采集(如Web services等)、數(shù)據(jù)庫采集(通過前置庫、緩沖庫采集)、在線直報采集方式等,構(gòu)建多源異構(gòu)的數(shù)據(jù)采集體系,實現(xiàn)部門異構(gòu)應(yīng)用系統(tǒng)與數(shù)據(jù)交換網(wǎng)關(guān)之間的數(shù)據(jù)提取、轉(zhuǎn)換和推送。數(shù)據(jù)采集功能如圖4所示。

        4.2 開放數(shù)據(jù)目錄架構(gòu)

        整體上參考國家《政務(wù)信息資源目錄體系標(biāo)準(zhǔn)》(GB/T 21063-2007)標(biāo)準(zhǔn)要求,包括資源準(zhǔn)備階段、編目階段、注冊階段、發(fā)布階段、目錄查詢階段、目錄維護(hù)階段和運行維護(hù)機制等,同時,將數(shù)據(jù)分類和元數(shù)據(jù)管理功能也融入目錄管理系統(tǒng)。開放數(shù)據(jù)目錄系統(tǒng)的整體建設(shè)框架設(shè)計如圖5所示。

        圖4 數(shù)據(jù)采集子系統(tǒng)架構(gòu)

        圖5 開放數(shù)據(jù)目錄子系統(tǒng)架構(gòu)

        4.3 開放元數(shù)據(jù)建設(shè)

        元數(shù)據(jù)開放的目的是促進(jìn)大量的結(jié)構(gòu)化或非結(jié)構(gòu)化數(shù)據(jù)的獲取、管理和共享,元數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范是促進(jìn)數(shù)據(jù)開放共享的關(guān)鍵[10],但目前國內(nèi)開放元數(shù)據(jù)的建設(shè)尚未有正式標(biāo)準(zhǔn),需要在項目建設(shè)中建立健全。

        借鑒國際元數(shù)據(jù)指標(biāo),如都柏林核心元數(shù)據(jù)(Dublin core metadata,DC)、W3C公司的數(shù)據(jù)分類詞匯表(data catalog vocabulary,DCAT),遵循國內(nèi)《政務(wù)信息資源目錄體系 第3部分:核心元數(shù)據(jù)》(GB/T 21063.3-2007 )和《政務(wù)信息資源目錄編制指南(試行)》等要求,并結(jié)合我國政府行政管理及地方數(shù)據(jù)特色,貴陽市提出 24個指標(biāo)項的開放元數(shù)據(jù)標(biāo)準(zhǔn)(包括 14個核心元數(shù)據(jù)和 10個擴展元數(shù)據(jù)),見表1。同時,平臺還提供了基于元數(shù)據(jù)的數(shù)據(jù)集的查詢。

        表1 政府開放數(shù)據(jù)集元數(shù)據(jù)標(biāo)準(zhǔn)

        4.4 依申請開放的實現(xiàn)

        當(dāng)下,在數(shù)據(jù)開放范圍尚未規(guī)范性約束時,依申請開放是打通數(shù)據(jù)供給側(cè)和數(shù)據(jù)需求側(cè)最好的創(chuàng)新手段。

        《貴陽市政府?dāng)?shù)據(jù)共享開放條例》中允許公民、法人和其他組織通過開放平臺提出開放需求申請,政府?dāng)?shù)據(jù)提供機關(guān)應(yīng)當(dāng)自申請之日起10日內(nèi)答復(fù),同意的及時列入目錄或者開放,不同意的說明理由。公民、法人和其他組織對政府?dāng)?shù)據(jù)提供機關(guān)的答復(fù)有異議的,可以向市大數(shù)據(jù)行政主管部門提出復(fù)核申請,政府?dāng)?shù)據(jù)依申請開放流程如圖6所示。

        圖6 政府?dāng)?shù)據(jù)依申請開放流程

        4.5 數(shù)據(jù)分類

        數(shù)據(jù)資源合理分類是提高數(shù)據(jù)使用效率的重要技術(shù)手段。目前國內(nèi)地方政府?dāng)?shù)據(jù)開放平臺上的數(shù)據(jù)分類大部分采取按主題、部門和行業(yè)分類的方式。貴陽市政府開放數(shù)據(jù)平臺采用貴州省標(biāo)準(zhǔn)《政府?dāng)?shù)據(jù) 數(shù)據(jù)分類分級指南》,在國內(nèi)率先實現(xiàn)了主題、服務(wù)、行業(yè)、領(lǐng)域和部門 5種分類,如圖 7所示。其中,數(shù)據(jù)主題和數(shù)據(jù)服務(wù)分類引用自國家標(biāo)準(zhǔn)《政務(wù)信息資源目錄體系 第4部分:政務(wù)信息資源分類》(GB/T 21063.4-2007);數(shù)據(jù)行業(yè)分類引用自國家標(biāo)準(zhǔn)《國民經(jīng)濟(jì)行業(yè)分類》(GB/T 4754-2011);數(shù)據(jù)領(lǐng)域分類是根據(jù)政府?dāng)?shù)據(jù)實際情況,結(jié)合地方特色,對所有數(shù)據(jù)進(jìn)行的專題歸類和包裝;數(shù)據(jù)部門分類是根據(jù)部門行政職能設(shè)置,按數(shù)據(jù)來源進(jìn)行的分類。

        圖7 數(shù)據(jù)資源分類關(guān)系

        4.6 數(shù)據(jù)質(zhì)量管理

        數(shù)據(jù)質(zhì)量管理是信息系統(tǒng)建設(shè)的首要問題[11],數(shù)據(jù)質(zhì)量的高低代表了該數(shù)據(jù)滿足消費者期望的程度[12]?!禗AMA數(shù)據(jù)管理知識體系指南》[13]提出的數(shù)據(jù)質(zhì)量維度包括:準(zhǔn)確性、完整性、一致性、時效性、精確度、隱私、合理性、參照完整性、及時性、唯一性和有效性。數(shù)據(jù)清洗是數(shù)據(jù)質(zhì)量提高技術(shù)研究的主要內(nèi)容,它主要關(guān)注數(shù)據(jù)實例層面的問題,主要集中在幾個方面:重復(fù)對象檢測、缺失數(shù)據(jù)處理、異常數(shù)據(jù)檢測、邏輯錯誤檢測、不一致數(shù)據(jù)處理等[11]。

        數(shù)據(jù)質(zhì)量的持續(xù)提升依賴一套閉環(huán)的改進(jìn)流程,包括規(guī)則制定、質(zhì)量核查、問題分析、整改優(yōu)化和預(yù)防監(jiān)控,通過流程管控不斷訓(xùn)練、優(yōu)化規(guī)則,并進(jìn)行及時的數(shù)據(jù)問題處理,不斷提升數(shù)據(jù)質(zhì)量。在項目的實施過程中,根據(jù)已有的理論,提出如圖 8所示的數(shù)據(jù)質(zhì)量管控流程和如圖 9所示的數(shù)據(jù)質(zhì)量管控子系統(tǒng)框架,并以此完成了51家部門的1 160余個開放數(shù)據(jù)集相關(guān)工作。

        4.7 數(shù)據(jù)處理子系統(tǒng)

        按照《政府?dāng)?shù)據(jù) 數(shù)據(jù)脫敏工作指南》和總體框架要求,該子系統(tǒng)包含了 ETL、清洗、脫敏等功能,結(jié)合整體架構(gòu),技術(shù)實現(xiàn)分為4個層次,分別為數(shù)據(jù)存儲層、數(shù)據(jù)計算引擎層、數(shù)據(jù)分析引擎層以及數(shù)據(jù)交互處理層,如圖10所示。

        數(shù)據(jù)存儲層主要實現(xiàn)部門數(shù)據(jù)的存儲,包括結(jié)構(gòu)化數(shù)據(jù)庫、非結(jié)構(gòu)化數(shù)據(jù)庫;數(shù)據(jù)計算引擎層為數(shù)據(jù)加工提供基本的數(shù)據(jù)計算和處理技術(shù),有效提升數(shù)據(jù)處理的速度和效率;數(shù)據(jù)分析引擎層,包括深度學(xué)習(xí)、多維分析、關(guān)聯(lián)分析、統(tǒng)計分析和數(shù)據(jù)建模等數(shù)據(jù)分析功能;數(shù)據(jù)交互處理層包括實現(xiàn)數(shù)據(jù)的 ETL、脫敏等基礎(chǔ)處理以及數(shù)據(jù)服務(wù)封裝和數(shù)據(jù)可視化處理。

        在整個脫敏過程中,脫敏規(guī)則的制定仍然是難點,特別是數(shù)據(jù)疊加以后的監(jiān)測工作,仍然是制約數(shù)據(jù)脫敏效率不高的主要因素。

        4.8 安全設(shè)計

        政府?dāng)?shù)據(jù)開放平臺的安全防護(hù)體系包括基礎(chǔ)設(shè)施、數(shù)據(jù)庫、平臺及應(yīng)用層面的安全,其核心在于保障開放數(shù)據(jù)的安全,即數(shù)據(jù)采集、存儲、加工和開放等全生命周期的數(shù)據(jù)安全保障。主要的安全防護(hù)技術(shù)包括數(shù)據(jù)加密、脫敏、溯源、訪問控制和日志審計。數(shù)據(jù)開放平臺整體安全體系框架如圖11所示。

        圖8 數(shù)據(jù)質(zhì)量管控流程

        圖9 質(zhì)量管理子系統(tǒng)框架

        圖10 開放數(shù)據(jù)加工與脫敏

        圖11 數(shù)據(jù)開放平臺安全體系架構(gòu)

        4.9 用戶互動

        用戶互動功能能夠及時有效地感知用戶對資源的使用情況并獲取相關(guān)建議,用戶也能充分實現(xiàn)表達(dá)權(quán),是打通供需兩端和持續(xù)優(yōu)化數(shù)據(jù)質(zhì)量的重要途徑。貴陽市政府?dāng)?shù)據(jù)開放平臺在電腦端(門戶網(wǎng)站)和移動端(微信公眾號)都提供了相關(guān)的用戶互動功能,包括可以通過QQ、微信等第三方賬號登錄開放平臺,并可將開放平臺數(shù)據(jù)資源分享到第三方社交平臺,開放平臺提供數(shù)據(jù)預(yù)覽、測試功能,用戶可以對數(shù)據(jù)或文章進(jìn)行評分和評論,提供相關(guān)建議。

        5 平臺的運營

        在平臺運營方面,平臺與媒體合作,借助媒體在內(nèi)容采編和宣傳推廣方面的優(yōu)勢,強化平臺內(nèi)容運營和數(shù)據(jù)價值推廣,通過建立官方微信號,以數(shù)據(jù)融媒方式將枯燥、晦澀的數(shù)據(jù),通過采編提煉成圖文產(chǎn)品,讓數(shù)據(jù)理解更加平民化、通俗化、生動化,有效建立起數(shù)據(jù)價值釋放政府—公民(government to citizen,G2C)的路徑,開辟數(shù)據(jù)惠民新路徑。同時,平臺廣泛與數(shù)據(jù)企業(yè)、研究機構(gòu)和眾創(chuàng)空間等創(chuàng)新主體合作,形成生態(tài)聯(lián)盟,推動數(shù)據(jù)轉(zhuǎn)化為二次產(chǎn)品、應(yīng)用產(chǎn)品、數(shù)據(jù)服務(wù)等,探索建立數(shù)據(jù)價值釋放政府—企業(yè)(government to business,G2B)和政府—企業(yè)—公民(government to business to citizen,G2B2C)的路徑。

        6 數(shù)據(jù)開放平臺的成效

        采用文中的平臺架構(gòu)設(shè)計和務(wù)實的項目組織方式,貴陽市政府?dāng)?shù)據(jù)開放平臺通過兩個多月的建設(shè)和實施,于2017年1月18日實現(xiàn)了正式上線。目前已經(jīng)完成了2.0版本的建設(shè),開放數(shù)據(jù)集總數(shù)超過1 160個,數(shù)據(jù)量超過520余萬條,實現(xiàn)了51個有對外服務(wù)職能部門的全覆蓋,在《2017中國地方政府?dāng)?shù)據(jù)開放平臺報告》中綜合分值排名第二,在評估的12項關(guān)鍵評估指標(biāo)中,貴陽市政府在數(shù)據(jù)集數(shù)量、機讀格式數(shù)量、開放格式數(shù)量、元數(shù)據(jù)覆蓋率、關(guān)鍵詞覆蓋率、機構(gòu)覆蓋率、主題覆蓋率、歷史檔存8項指標(biāo)中都獲得滿分。

        7 結(jié)束語

        我國政府?dāng)?shù)據(jù)開放水平整體處于起步階段,在平臺定位、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)采集等方面還需要探索,在技術(shù)上還需要加大創(chuàng)新和實踐力度。本文基于貴陽市政府?dāng)?shù)據(jù)開放平臺的設(shè)計和實現(xiàn),提出的政府?dāng)?shù)據(jù)開放平臺相關(guān)子系統(tǒng)的設(shè)計模型,在一定程度上可為其他地級市政府?dāng)?shù)據(jù)開放平臺的建設(shè)提供參考,希望能為提高政府治理能力和服務(wù)水平、激發(fā)市場活力和社會創(chuàng)造力提供一個研究范例。

        [1] 聯(lián)合國經(jīng)濟(jì)和社會事務(wù)部. 2016聯(lián)合國電子政務(wù)調(diào)查報告[R].中國國家行政學(xué)院電子政務(wù)研究中心, 譯. 紐約: 聯(lián)合國經(jīng)濟(jì)和社會事務(wù)部, 2016. United Nations Department of Economic and Social Affairs. 2016 United Nations e-government investigation report[R]. Translated by E-Government Research Center. New York: United Nations Department of Economic and Social Affairs, 2016.

        [2] 國務(wù)院關(guān)于印發(fā)促進(jìn)大數(shù)據(jù)發(fā)展行動綱要的通知[EB/OL]. (2015-08-31)[2017-07-26]. http://www.gov.cn/zhengce/content/ 2015-09/05/content_10137.htm. Circular of the State Council on printing and distributing the platform for action for the development of large data[EB/OL]. (2015-08-31)[2017-07-26]. http://www.gov.cn/zhengce/content/ 2015-09/05/content_10137.htm.

        [3] 國務(wù)院辦公廳關(guān)于印發(fā)政務(wù)信息系統(tǒng)整合共享實施方案的通知[EB/OL]. (2017-05-03)[2017-07-26]. http://www.gov.cn/ zhengce/content/2017-05/18/content_5194971.htm. Notice of the General Office of the State Council on printing and distributing the implementation plan for the integration and sharing of administrative information system[EB/OL]. (2017-05-03)[2017-07-26]. http://www.gov.cn/zhengce/content/ 2017-05/18/content_5194971.htm.

        [4] 復(fù)旦大學(xué), 提升政府治理能力大數(shù)據(jù)應(yīng)用技術(shù)國家工程實驗室. 2017中國地方政府?dāng)?shù)據(jù)開放平臺報告[R]. 上海: 復(fù)旦大學(xué), 2015. National Engineering Laboratory of Big Data Application for Improving Governance Capability, Fudan University. 2017 China local government open data platform report[R]. Shanghai: Fudan University, 2015.

        [5] 晴青, 趙榮. 北京市政府?dāng)?shù)據(jù)開放現(xiàn)狀研究[J]. 情報雜志, 2016, 35(4): 177-182. QING Q, ZHAO R. Research on current status of Beijing’s open government data[J]. Journal of Intelligence, 2016, 35(4): 177-182.

        [6] 葉潤國, 陳雪秀. 政府?dāng)?shù)據(jù)開放共享安全保障問題與建議[J].信息技術(shù)與標(biāo)準(zhǔn)化, 2016(6): 22-26. YE R G, CHEN X X. Issues and suggestions of governmentaldata opening and sharing security assurance[J]. Information Technology & Standardization, 2016(6): 22-26.

        [7] 張寧, 袁勤儉. 數(shù)據(jù)治理研究述評[J].情報雜志, 2017, 36(5):129-134. ZHANG N, YUAN Q J. A review of data governance research[J]. Journal of Intelligence, 2017, 36(5):129-134.

        [8] 鄭磊, 高豐. 中國開放政府?dāng)?shù)據(jù)平臺研究: 框架、現(xiàn)狀與建議[J].電子政務(wù), 2015(7): 8-16. ZHENG L, GAO F. Open government data platform in China: framework, status and suggestion[J]. E-Government, 2015(7): 8-16.

        [9] 霍小軍, 袁飚, 舒春燕. 新形勢下地方政府電子政務(wù)數(shù)據(jù)規(guī)劃與建設(shè)研究[J]. 電子政務(wù), 2016(11): 79-90. HUO X J, YUAN B, SHU C Y. E-government data planning and construction of local government under the new status[J]. E-Government, 2016(11): 79-90.

        [10] 黃如花, 李楠. 澳大利亞開放政府?dāng)?shù)據(jù)的元數(shù)據(jù)標(biāo)準(zhǔn)——對Data.gov.au的調(diào)研與啟示[J]. 圖書館雜志, 2017(5): 87-97. HUANG R H, LI N. Metadata standards of open government data in Australia: investigation and inspiration of Data.gov.au[J]. Library Journal, 2017(5): 87-97.

        [11] 韓京宇, 徐立臻, 董逸生. 數(shù)據(jù)質(zhì)量研究綜述[J]. 計算機科學(xué), 2008(2): 1-12. HAN J Y, XU L Z, DONG Y S. An overview of data quality research [J]. Computer Science, 2008(2): 1-12.

        [12] Governance is an essential building block for enterprise information management[EB/OL]. (2008-10-14)[2017-07-26]. https://www.gartner.com/doc/777214/governance-essentialbuilding-block-enterprise.

        [13] DAMA International. DAMA數(shù)據(jù)管理知識體系指南[M]. 馬歡, 劉晨, 譯. 北京: 清華大學(xué)出版社, 2012. DAMA International. The DAMA guide to the data management body of knowledge[M]. Translated by MA H, LIU C. Beijing: Tsinghua University Press, 2012.

        Design and practice of Guiyang open government data platform

        HUANG Mingfeng, LIU Jun, JING Jianbo
        Guiyang Information Industry Center, Guiyang 550081, China

        As the social public resources, the value and function of government data has become a global consensus, but the construction of our local open government data platforms is still in a preliminary stage. Taking the Guiyang open government data platform as an example, the design and construction scheme of open government data platform was introduced from various modes, general framework, potential data acquisition mode, data quality management and metadata construction. The meaningful reference for the construction of our local open government data platform was provided.

        general framework, open government data, data quality, metadata

        TP391

        :A

        10.11959/j.issn.2096-0271.2017260

        黃明峰(1977-),男,貴陽市信息產(chǎn)業(yè)發(fā)展中心高級工程師,主持多項大數(shù)據(jù)地方標(biāo)準(zhǔn)的研究和編制,參與貴陽市大數(shù)據(jù)發(fā)展相關(guān)政策以及規(guī)劃的制定,在國家級核心刊物上發(fā)表過多篇專業(yè)論文,主要研究方向為政府大數(shù)據(jù)應(yīng)用與規(guī)劃、智慧城市建設(shè)等。

        劉軍(1988-),男,貴陽市信息產(chǎn)業(yè)發(fā)展中心工程師,參與多項大數(shù)據(jù)地方標(biāo)準(zhǔn)的研究和編制,貴陽市政府?dāng)?shù)據(jù)開放平臺項目建設(shè)主要參與者,主要研究方向為政府?dāng)?shù)據(jù)共享與開放。

        靖劍波(1980-),男,貴陽市信息產(chǎn)業(yè)發(fā)展中心工程師,主要從事政務(wù)信息化工程建設(shè)、信息系統(tǒng)項目管理及應(yīng)用工作。

        2017-07-26;

        :2017-08-28

        黃明峰,thinbamboo@qq.com

        猜你喜歡
        開放平臺貴陽市政府
        基于在線開放平臺的混合式課堂教學(xué)模式構(gòu)建與實踐
        知法犯法的政府副秘書長
        基于AliGenie語音開放平臺的傳統(tǒng)家居智聯(lián)網(wǎng)解決方案
        電子制作(2018年17期)2018-09-28 01:56:46
        關(guān)于貴陽市低碳交通發(fā)展路徑的探討
        離貴陽市區(qū)最近的滑雪場 高坡滑雪場
        搭建開放平臺 收獲真情實感——談《品德與生活》教學(xué)中開放式教學(xué)的實施
        貴陽市烏當(dāng)區(qū)地下水問題及防治
        依靠政府,我們才能有所作為
        政府手里有三種工具
        云計算開放平臺的知識產(chǎn)權(quán)問題研究
        影音先锋男人站| 日韩av综合色区人妻| 国产精品一品二区三区| 国产亚洲精品品视频在线| 成人一区二区免费中文字幕视频| 国产精品久久久久久婷婷| 成人动漫久久| 亚洲国产av剧一区二区三区| 国产黄色一级大片一区二区| 97成人精品国语自产拍| 欧美精品亚洲精品日韩专区| 亚洲熟女乱色一区二区三区| 久久久久久久久久免免费精品| 中文字幕日韩一区二区不卡| 91日韩东京热中文字幕| 色偷偷av一区二区三区| 波多野结衣中文字幕久久| 亚洲AV无码一区二区一二区色戒| 亚洲男人在线天堂av| 男女射黄视频网站在线免费观看 | 日韩夜夜高潮夜夜爽无码 | 亚洲精品久久久久久动漫| 国产精品福利久久香蕉中文| 精品午夜中文字幕熟女| 午夜国产视频一区二区三区| 亚洲成av人的天堂在线观看| 国产成人精品成人a在线观看| 国产av无码专区亚洲aⅴ| 国产三级av在线精品| 国产精品美女久久久免费| 国产成熟人妻换╳╳╳╳| 亚洲V在线激情| 亚洲视一区二区三区四区| 精品国产亚洲av麻豆| 午夜精品久久久久久毛片| 国产精品一区二区久久精品| 亚洲精品日本久久久中文字幕 | 小13箩利洗澡无码免费视频 | 亚洲天堂av免费在线看| 精品久久免费国产乱色也| 亚洲成av人片女在线观看|