李光亞,張敬誼,童慶
大數(shù)據(jù)在智慧城市中的應(yīng)用
李光亞,張敬誼,童慶
伴隨智慧城市的發(fā)展,多源、異構(gòu)、冗余的大數(shù)據(jù)應(yīng)運而生。利用數(shù)據(jù)挖掘、決策分析等技術(shù),實現(xiàn)大數(shù)據(jù)轉(zhuǎn)化為數(shù)據(jù)資產(chǎn),必將成為大數(shù)據(jù)時代智慧城市智能化、互聯(lián)化的必要手段。闡述了智慧城市概念、智慧城市數(shù)據(jù)資源及大數(shù)據(jù)處理技術(shù),分析了智慧城市中的大數(shù)據(jù)綜合應(yīng)用,闡明了大數(shù)據(jù)在智慧城市重點行業(yè)領(lǐng)域的應(yīng)用現(xiàn)狀,并對其進行展望,為未來智慧城市中大數(shù)據(jù)的深入應(yīng)用提供解決方案和思路。
智慧城市;大數(shù)據(jù)
當(dāng)前,城市發(fā)展面臨諸如人口膨脹、環(huán)境惡化、公共衛(wèi)生事件頻發(fā)、交通擁堵、資源浪費等的挑戰(zhàn),人們的生活也因此受到不利的影響。而且,隨著城市化文明進程的推進,人們?nèi)找媾蛎浀男枨笈c城市日益有限的供給之間的矛盾會繼續(xù)增大,未來人們的生活質(zhì)量和城市的發(fā)展不容樂觀。基于和諧發(fā)展的智慧地球、智慧城市是未來的發(fā)展趨勢。
智慧城市是指在物聯(lián)網(wǎng)和互聯(lián)網(wǎng)結(jié)合的基礎(chǔ)上,通過各種智能化的應(yīng)用,提升城市基礎(chǔ)設(shè)施的運作效率,提升城市運行管理和公共服務(wù)水平,讓人們的生活更美好。截止2013年,我國已經(jīng)有311個城市提出或正在建設(shè)智慧城市。
大數(shù)據(jù)是支撐智慧城市發(fā)展的重要信息資源,城市運行體征是通過數(shù)據(jù)進行量化表現(xiàn)出來的,通過大數(shù)據(jù)技術(shù)收集各部門有關(guān)城市運行體征的數(shù)據(jù),可幫助城市管理者進行數(shù)據(jù)匯總、分析,最終對城市體征的量化形態(tài)即各類數(shù)據(jù)進行管理。大數(shù)據(jù)與智慧城市的關(guān)系可表述為:大數(shù)據(jù)的發(fā)展源于物聯(lián)網(wǎng)技術(shù)的應(yīng)用,并用于支撐智慧城市的發(fā)展;智慧城市的衡量指標(biāo)由大數(shù)據(jù)來體現(xiàn),大數(shù)據(jù)促進智慧城市的發(fā)展;物聯(lián)網(wǎng)是大數(shù)據(jù)產(chǎn)生的催化劑,大數(shù)據(jù)源于物聯(lián)網(wǎng)應(yīng)用[1]。
本文通過分析智慧城市的數(shù)據(jù)資源組成,綜述數(shù)據(jù)資源管理技術(shù),并在此基礎(chǔ)上闡述智慧城市中的大數(shù)據(jù)綜合應(yīng)用以及在重點領(lǐng)域的行業(yè)應(yīng)用,為后續(xù)智慧建設(shè)城市中大數(shù)據(jù)應(yīng)用及創(chuàng)新提供參考。
智慧城市是創(chuàng)新與新信息技術(shù)發(fā)展、成長于社會創(chuàng)新環(huán)境下的新興城市形態(tài),是傳統(tǒng)城市文明與新知識、新技術(shù)的創(chuàng)新融合的產(chǎn)物。智慧城市將極大改變城市的管理方式和生活方式,并有效保障城市的可持續(xù)發(fā)展。建設(shè)和發(fā)展智慧城市,是經(jīng)濟增長的新動力和經(jīng)濟發(fā)展方式轉(zhuǎn)變的重要契機,也是提高城鎮(zhèn)化質(zhì)量,緩解的“大城市病”的重要方式。
智慧城市具有以下特征:
(1)感知與互聯(lián)。通過智能傳感器,對城市的物理空間進行全面感知,對城市核心的運行系統(tǒng)進行實時監(jiān)測。通過互聯(lián)網(wǎng)將智能傳感器網(wǎng)絡(luò)連接起來,實現(xiàn)對數(shù)據(jù)的智能存儲、管理、使用。
(2)重視基礎(chǔ)建設(shè)。通過互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、衛(wèi)星傳感器網(wǎng)的融合,以及多源異構(gòu)數(shù)據(jù)的整合,為智慧城市的建設(shè)提供信息基礎(chǔ)設(shè)施,從源頭上保障智慧城市的良性發(fā)展。
(3)協(xié)同與智能。在建設(shè)智慧城市基礎(chǔ)設(shè)施的基礎(chǔ)上,協(xié)調(diào)智慧城市各要素、單元、系統(tǒng)的高效運行;通過構(gòu)建新的服務(wù)模式與服務(wù)體系,對各類數(shù)據(jù)進行處理、挖掘,提供各種不同層次的智能化服務(wù)。
(4)鼓勵創(chuàng)新。在城市智慧信息基礎(chǔ)設(shè)施上,鼓勵各級各類主體進行各種形式的創(chuàng)新應(yīng)用,不斷為城市經(jīng)濟、文化的可持續(xù)發(fā)展提供動力。
智慧城市的數(shù)據(jù)來源廣泛、結(jié)構(gòu)多樣,涵蓋智能交通、智能醫(yī)療、智能樓宇、智能電網(wǎng)、智能農(nóng)業(yè)、智能安防、智能環(huán)保、智慧旅游、智慧教育、智能水務(wù)等大數(shù)據(jù)資源,涉及眾多方方面面智慧城市應(yīng)用范疇[2]。其多是互聯(lián)網(wǎng)、傳感設(shè)備、視頻監(jiān)控、移動設(shè)備、智能設(shè)備、非傳統(tǒng)IT設(shè)備等渠道產(chǎn)生的海量結(jié)構(gòu)化或非結(jié)構(gòu)化數(shù)據(jù),并且時時刻刻都在源源不斷地滲入城市日常管理和運作的方方面面[3]。
智慧城市的數(shù)據(jù)資源體量巨大,但有價值的信息密度低,需要進行深度整合和分析,將不同來源、不同格式、不同類型、不同應(yīng)用的數(shù)據(jù)進行規(guī)范、融合,形成“智慧城市”的數(shù)據(jù)資源體系,打破各系統(tǒng)間數(shù)據(jù)不能共享的現(xiàn)狀,實現(xiàn)空間信息和非空間信息的統(tǒng)籌管理、統(tǒng)一服務(wù)、共享共用[4]。
從智慧城市的業(yè)務(wù)需求角度來說,一方面,智慧城市管理需要深度整合、分析數(shù)據(jù);另一方面,大數(shù)據(jù)環(huán)境下的智慧城市運行體征管理,需要對城市運行狀況進行信息的收集和整合。因此,需要從整合現(xiàn)有信息資源并為未來的信息化建設(shè)提供統(tǒng)一支撐的角度,打破各個系統(tǒng)間數(shù)據(jù)不能共享的現(xiàn)狀,實現(xiàn)空間信息和非空間信息的統(tǒng)籌管理、統(tǒng)一服務(wù)、共享共用。
從業(yè)務(wù)內(nèi)容角度來看,智慧城市需要有建立在標(biāo)準(zhǔn)規(guī)范之上的信息資源體系,它是一個分層的樹狀結(jié)構(gòu),包括元數(shù)據(jù)資源、數(shù)據(jù)資源、服務(wù)資源三大類,如圖1所示:
圖1 智慧城市信息資源體系層次結(jié)構(gòu)
從技術(shù)實現(xiàn)的角度上來看,對智慧城市數(shù)據(jù)資源的管理,可采用數(shù)據(jù)生命周期管理、大數(shù)據(jù)采集、大數(shù)據(jù)存儲、大數(shù)據(jù)處理、智慧城市大數(shù)據(jù)決策分析等技術(shù)。
(1)數(shù)據(jù)生命周期管理。主要對智慧城市業(yè)務(wù)數(shù)據(jù)的產(chǎn)生、規(guī)范、使用和存檔的各個階段進行有效地監(jiān)控和管理,以保證數(shù)據(jù)的共享性、完整性、可靠性和有效性等,并以此為基礎(chǔ)提供給上層決策分析系統(tǒng)。
A.數(shù)據(jù)共享性。采用主數(shù)據(jù)管理技術(shù),消除“信息孤島”,加強各系統(tǒng)間關(guān)聯(lián)性,建立規(guī)范、統(tǒng)一的數(shù)據(jù)源,實現(xiàn)數(shù)據(jù)共享。
B.數(shù)據(jù)完整性。采用元數(shù)據(jù)管理技術(shù),從數(shù)據(jù)格式、源頭、服務(wù)等方面建立信息資源規(guī)范,以確保數(shù)據(jù)的完整性。
C.數(shù)據(jù)可靠性。采用數(shù)據(jù)清洗技術(shù),可以有效的清除臟數(shù)據(jù)、保證數(shù)據(jù)的質(zhì)量。
D.數(shù)據(jù)有效性。對數(shù)據(jù)歸類和特征分析,利用在線存儲、近線存儲、歸檔存儲等技術(shù)進行選擇存儲,保證數(shù)據(jù)的有效性[5]。
(2)大數(shù)據(jù)采集。主要通過網(wǎng)絡(luò)數(shù)據(jù)獲取,媒體流獲取,日志信息獲取和傳統(tǒng)應(yīng)用數(shù)據(jù)獲取等技術(shù)在智慧城市場景中獲取大數(shù)據(jù)。
A.網(wǎng)絡(luò)數(shù)據(jù)獲取。主要利用互聯(lián)網(wǎng)搜索引擎技術(shù)如網(wǎng)絡(luò)爬蟲等實現(xiàn)有針對性、行業(yè)性、精準(zhǔn)性的數(shù)據(jù)抓取,按照一定規(guī)則和篩選標(biāo)準(zhǔn)進行數(shù)據(jù)歸類,形成數(shù)據(jù)庫文件。
B.媒體流數(shù)據(jù)獲取。媒體流接入服務(wù)采用集群的方式,為每個接入源動態(tài)確定一個存儲服務(wù)器,實現(xiàn)視頻、音頻數(shù)據(jù)以分布式文件方式落地。
C.日志信息獲取。常通過成熟分布式框架如 Chukwa、Flume、Scrib等,實現(xiàn)日志信息的分布式收集和統(tǒng)一處理。
D.傳統(tǒng)應(yīng)用數(shù)據(jù)獲取。主要采用ETL將分布的、異構(gòu)的數(shù)據(jù)如關(guān)系數(shù)據(jù)、平面數(shù)據(jù)文件等抽取到臨時中間層后進行清洗、轉(zhuǎn)換、集成,最終按照定義好的數(shù)據(jù)模型,將數(shù)據(jù)加載到目標(biāo)數(shù)據(jù)庫中。
(3)大數(shù)據(jù)存儲。主要利用CAP原則,通過對大數(shù)據(jù)特征分析,選擇合適的存儲方案。
A.數(shù)據(jù)存儲硬件:本地存儲、SAN存儲和云存儲。
B.數(shù)據(jù)存儲技術(shù)[6]:關(guān)系型數(shù)據(jù)庫、No-SQL數(shù)據(jù)庫、實時數(shù)據(jù)庫、分布式文件存儲、列式數(shù)據(jù)庫等。
(4)大數(shù)據(jù)處理。主要是采用基于大數(shù)據(jù)方案的計算技術(shù)、數(shù)據(jù)挖掘技術(shù)和大數(shù)據(jù)可視化技術(shù)實現(xiàn)數(shù)據(jù)處理。
A.計算技術(shù)[7]:輕量級彈性計算平臺、Map-Reduce離線計算框架、Spark內(nèi)存計算框架、Storm流式計算框架等。
B.數(shù)據(jù)挖掘技術(shù):大數(shù)據(jù)下的頻繁模式挖掘技術(shù)、大數(shù)據(jù)下的聚類分析方法、大數(shù)據(jù)下的分類和預(yù)測算法、大數(shù)據(jù)下的序列挖掘算法。
C.大數(shù)據(jù)可視化技術(shù):借助于圖形化手段,清晰有效地傳達與溝通信息。大規(guī)模數(shù)據(jù)的可視化和繪制主要是基于并行算法設(shè)計的技術(shù),合理利用有限的計算資源,高效地處理和分析特定的數(shù)據(jù)集的特性,主要技術(shù):數(shù)據(jù)流線化、任務(wù)并行化、管道并行化、數(shù)據(jù)并行化。
(5)智慧城市大數(shù)據(jù)決策分析。主要利用當(dāng)前成熟的模型技術(shù),對海量冗余的數(shù)據(jù)源進行抽取轉(zhuǎn)換等操作,以形成高質(zhì)的智慧城市數(shù)據(jù)資產(chǎn),為城市的發(fā)展決策提供明確的數(shù)據(jù)支撐。常見的大數(shù)據(jù)決策分析技術(shù)如下:
A.融合多領(lǐng)域信息的數(shù)據(jù)知識模型。首先,在標(biāo)準(zhǔn)統(tǒng)一的領(lǐng)域數(shù)據(jù)知識模型的基礎(chǔ)上,建立面向不同主題的多領(lǐng)域數(shù)據(jù)知識模型。然后,在建立面向領(lǐng)域的和面向主題的數(shù)據(jù)知識模型的基礎(chǔ)上,形成多領(lǐng)域多層次數(shù)據(jù)知識模型結(jié)構(gòu)。
B.面向智慧城市決策支持的分布式海量數(shù)據(jù)的管理技術(shù)。通過對智慧城市大數(shù)據(jù)的進行決策分析,實現(xiàn)海量數(shù)據(jù)管理和決策分析的雙向耦合,為決策支持提供數(shù)據(jù)管理層面的有效支撐。涉及技術(shù)有:分布式大數(shù)據(jù)的平臺、基于云計算的海量異構(gòu)數(shù)據(jù)的存儲管理技術(shù)、分布式?jīng)Q策模型、流數(shù)據(jù)挖掘技術(shù)。
C.輔助決策模型的智能組合技術(shù)。建立針對模型的規(guī)范化描述,使模型分析的結(jié)果也可以滿足數(shù)據(jù)知識模型體系的數(shù)據(jù)標(biāo)準(zhǔn),從而能夠為其它決策分析模型所利用,在此基礎(chǔ)上能夠建立模型鏈的實例化應(yīng)用,擴展輔助決策支持的范圍,真正發(fā)揮多層級輔助決策支持的能力。包括:決策模型標(biāo)準(zhǔn)化、模型鏈建立與實例化、模型鏈評估與優(yōu)化。
D.高性能多用戶協(xié)同的輔助決策技術(shù)。通過可視化技術(shù),以更直觀、有效的方式將數(shù)據(jù)分析結(jié)果展示給用戶。主要技術(shù)有:決策模型的可視化展現(xiàn)技術(shù)、可視化動態(tài)分析模型、可視化智能決策方案。
智慧城市助推大數(shù)據(jù)的產(chǎn)生,也給大數(shù)據(jù)提供了廣闊的應(yīng)用市場。智慧城市數(shù)據(jù)資源多源、異構(gòu)、冗余,需要從數(shù)據(jù)采集、整合、分析的整個流程,進行綜合數(shù)據(jù)管理,將其轉(zhuǎn)變?yōu)槌鞘械挠行А⒏哔|(zhì)的數(shù)據(jù)資產(chǎn),發(fā)揮大數(shù)據(jù)在城市建設(shè)發(fā)展中的最大效用,如圖2所示:
圖2 大數(shù)據(jù)綜合應(yīng)用
(1)大數(shù)據(jù)采集
網(wǎng)絡(luò)大數(shù)據(jù)和政府部門數(shù)據(jù)資源是智慧城市大數(shù)據(jù)資源的主體,對推動城市智能化、創(chuàng)新化、互聯(lián)化起著舉足輕重的作用。
網(wǎng)絡(luò)大數(shù)據(jù)采集包含對互聯(lián)網(wǎng)數(shù)據(jù)采集、物聯(lián)網(wǎng)數(shù)據(jù)采集和個人數(shù)據(jù)采集?;ヂ?lián)網(wǎng)數(shù)據(jù)的采集涉及頁面和后臺數(shù)據(jù)兩個層面,頁面數(shù)據(jù)可以通過爬蟲程序直接抓取所需的數(shù)據(jù),而網(wǎng)站后臺數(shù)據(jù)層次較深、相對較復(fù)雜,常通過開放或授權(quán)數(shù)據(jù)接口讓各方方便獲取數(shù)據(jù)、開發(fā)應(yīng)用;同時對互聯(lián)網(wǎng)海量的網(wǎng)頁,可以建立大數(shù)據(jù)抓取集群,實現(xiàn)統(tǒng)一的互聯(lián)網(wǎng)數(shù)據(jù)抓取,保證抓取的實時性。物聯(lián)網(wǎng)數(shù)據(jù)采集,主要是建設(shè)城市統(tǒng)一的數(shù)據(jù)監(jiān)測采集系統(tǒng),實現(xiàn)行業(yè)數(shù)據(jù)如車聯(lián)網(wǎng)大數(shù)據(jù)、環(huán)境物聯(lián)網(wǎng)大數(shù)據(jù)等的統(tǒng)一采集、統(tǒng)一管理,各行業(yè)按需調(diào)用相應(yīng)的數(shù)據(jù)服務(wù)即可。個人數(shù)據(jù)采集,主要是對個人日?;顒訑?shù)據(jù)、與政府企業(yè)資源設(shè)施互動數(shù)據(jù)等采集,有助于創(chuàng)新社會管理、提升公共服務(wù)、建立個性化服務(wù)。
政府部門數(shù)據(jù)資源,共享度低,數(shù)據(jù)采集重復(fù)性高,且易形成“信息孤島”。進行跨部門大數(shù)據(jù)管理,以城市一體化為目標(biāo),建設(shè)城市運營數(shù)據(jù)的統(tǒng)一采集,建立起跨部門的數(shù)據(jù)共享體系,為各領(lǐng)域的智慧應(yīng)用提供大數(shù)據(jù)統(tǒng)一服務(wù)。
(2)大數(shù)據(jù)開放服務(wù)
大數(shù)據(jù)要發(fā)揮巨大價值,開放是關(guān)鍵。智慧城市建立統(tǒng)一的大數(shù)據(jù)開放服務(wù),有助于打破信息孤島,并實現(xiàn)數(shù)據(jù)授權(quán),有助于發(fā)展數(shù)據(jù)產(chǎn)業(yè)。智慧城市大數(shù)據(jù)開放服務(wù)的基本思路為:政府?dāng)?shù)據(jù)開放、機器可讀;應(yīng)用云計算等新模式;鼓勵社會化的數(shù)據(jù)再開發(fā);城市一體化而不是部門孤島。大數(shù)據(jù)開放服務(wù),將連接居民、政府、社會開放設(shè)備和平臺,形成一個大數(shù)據(jù)服務(wù)生態(tài)環(huán)境,將使居民更方便的獲取信息、政府實現(xiàn)跨部門數(shù)據(jù)共享、數(shù)據(jù)再開發(fā)利用使數(shù)據(jù)增值、數(shù)據(jù)利用更加安全、城市數(shù)據(jù)服務(wù)一體化等
(3)大數(shù)據(jù)決策分析
大數(shù)據(jù)能提升智慧城市決策支持的能力,形成更智能的趨勢分析。建立大數(shù)據(jù)技術(shù)與業(yè)務(wù)深度融合的模式,簡化各領(lǐng)域應(yīng)用大數(shù)據(jù)進行分析決策的難度,實現(xiàn)對決策支持的服務(wù)。
大數(shù)據(jù)的分析服務(wù),提供大數(shù)據(jù)分析的工具引擎,包括多源數(shù)據(jù)關(guān)聯(lián)分析、數(shù)據(jù)建模、數(shù)據(jù)仿真、數(shù)據(jù)報告等共性功能。深入的分析和挖掘,大數(shù)據(jù)可以為智慧城市的很多領(lǐng)域服務(wù),包括交通運行、醫(yī)療衛(wèi)生、社會管理、農(nóng)業(yè)、商業(yè)、金融以及宏觀經(jīng)濟等。如對醫(yī)療大數(shù)據(jù)進行分析,可以幫助政府更科學(xué)地進行醫(yī)保預(yù)算,實現(xiàn)醫(yī)??刭M,提升醫(yī)療機構(gòu)的疾病診斷能力,提升市民的健康水平;對應(yīng)用電子商務(wù)大數(shù)據(jù)進行分析,可以一定程度上預(yù)測經(jīng)濟狀況,按需生產(chǎn);對公共大數(shù)據(jù)的分析,可發(fā)揮數(shù)據(jù)的協(xié)同作用。
總之,在智慧城市中綜合應(yīng)用大數(shù)據(jù),可以形成趨勢判斷、數(shù)據(jù)共享,將有助于智慧城市的創(chuàng)新社會管理、各行業(yè)的互聯(lián)互通、良性競爭與可持續(xù)發(fā)展。
充分利用智慧城市大數(shù)據(jù)潛能,以滿足城市各行業(yè)發(fā)展需求。智慧城市中大數(shù)據(jù)行業(yè)應(yīng)用重點領(lǐng)域有民生、市場監(jiān)管、政府服務(wù)、基礎(chǔ)設(shè)施等,涵蓋了醫(yī)藥衛(wèi)生、環(huán)境保護、智慧教育、交通物流、市民服務(wù)、市場監(jiān)管、公共安全、國土資源、科技服務(wù)、文化創(chuàng)意、電子政務(wù)等方方面面。
(1)民生領(lǐng)域
智慧城市中采集的人口數(shù)據(jù)、環(huán)境數(shù)據(jù)、交通數(shù)據(jù)、健康數(shù)據(jù)、監(jiān)控數(shù)據(jù)、經(jīng)濟數(shù)據(jù)等是民生大數(shù)據(jù)的重要組成部分。同時,互聯(lián)網(wǎng)上用戶相關(guān)的民生大數(shù)據(jù)的采集是在用戶參與下,由運營商、服務(wù)方分別采集完成的。通過民生大數(shù)據(jù)的開放和共享,構(gòu)建民生大數(shù)據(jù)集市,需求方可按需獲取數(shù)據(jù)。
民生大數(shù)據(jù)將在民生領(lǐng)域的輿情、預(yù)測、決策、調(diào)控等方面發(fā)揮巨大的作用。大數(shù)據(jù)技術(shù)對于把握民生民情民意具有重要意義,可以提煉廣大市民的需求,使民生服務(wù)領(lǐng)先一步,比市民本人知道得更多、了解得更細、發(fā)現(xiàn)得更早,可以分析社會現(xiàn)象本質(zhì),揭露潛在的民生問題,還可預(yù)測趨勢,指導(dǎo)民生決策,使立法、監(jiān)管先行,防患于未然。
(2)市場監(jiān)管領(lǐng)域
市場實時數(shù)據(jù)、歷史數(shù)據(jù)、其他數(shù)據(jù)源等共同構(gòu)成市場監(jiān)管領(lǐng)域大數(shù)據(jù)集[8]。
通過大數(shù)據(jù)智能分析算法和數(shù)據(jù)挖掘技術(shù),實時分析市場數(shù)據(jù),以對市場變化及時做出反應(yīng)。分析歷史數(shù)據(jù),提取出被監(jiān)管對象的行為模式、消費者的行為模式以及他們行為模式的趨勢,并結(jié)合實時數(shù)據(jù)分析,可對非正常的活動提出預(yù)警。將新的數(shù)據(jù)源整合至監(jiān)管領(lǐng)域大數(shù)據(jù)集,可提高對非正常事件進行預(yù)警的準(zhǔn)確度。對不同行業(yè)大數(shù)據(jù)分析,可支持多行業(yè)的監(jiān)管。
(3)政府服務(wù)領(lǐng)域
運用大數(shù)據(jù),通過多渠道數(shù)據(jù)采集、快速綜合的數(shù)據(jù)處理技術(shù),增強社會管理能力,實現(xiàn)政府公共服務(wù)的管理創(chuàng)新、技術(shù)創(chuàng)新和服務(wù)模式的創(chuàng)新。
首先,大數(shù)據(jù)在政府服務(wù)領(lǐng)域的應(yīng)用。一方面,通過大數(shù)據(jù)共享性應(yīng)用,實現(xiàn)政府各部門之間、政府與市民之間的信息共享,提高政府各機構(gòu)協(xié)同辦公效率和為民辦事效率[9]。另一方面,大數(shù)據(jù)價值應(yīng)用,通過大數(shù)據(jù)決策分析,展示給人們關(guān)注信息之間的關(guān)聯(lián)度,實現(xiàn)信息價值的放大。
其次,應(yīng)用大數(shù)據(jù)和云計算等新技術(shù),構(gòu)建實體社會管理與虛擬社會管理相結(jié)合的社會管理一體化模式,實現(xiàn)智慧城市的創(chuàng)新社會管理。
A.動態(tài)感知:對現(xiàn)實社會和虛擬社會中的人員、場所、設(shè)備設(shè)施、活動、輿論等信息進行動態(tài)采集。
B.互聯(lián)互通:實現(xiàn)區(qū)、街道鎮(zhèn)、居委、商務(wù)樓宇等社會綜合管理部門的信息共享,并與市級公安、司法、住房等社會管理相關(guān)部門信息整合。
C.應(yīng)用智能:構(gòu)建社會管理業(yè)務(wù)模型,對采集的海量大數(shù)據(jù)信息進行分析處理,形成趨勢判斷,為社會綜合治理提供預(yù)警和處理的智能化手段。
D.管理創(chuàng)新:形成虛擬社會管理的綜合應(yīng)用,并對實體社會管理提供支撐。
(4)基礎(chǔ)設(shè)施領(lǐng)域
城市基礎(chǔ)設(shè)施是對城市生存、發(fā)展所必須具備的社會性基礎(chǔ)設(shè)施和工程性基礎(chǔ)設(shè)施的總稱[10]。
運用大數(shù)據(jù),通過對各基礎(chǔ)設(shè)施如軌道交通、電力設(shè)施等數(shù)據(jù)采集、分析,將有助于促進城市基礎(chǔ)設(shè)施建設(shè)的完善。如在軌道交通領(lǐng)域,通過采集客流信息、軌交數(shù)據(jù)、監(jiān)測數(shù)據(jù)等,形成軌道交通大數(shù)據(jù)集。通過對大數(shù)據(jù)的數(shù)據(jù)挖掘和決策分析,進行大客流預(yù)測、事件預(yù)警、推送出行路線等,為規(guī)劃新的路線提供決策支持,為安全暢通提供保證,也將有利于城市綜合交通的優(yōu)化。
(5)醫(yī)藥衛(wèi)生領(lǐng)域
在醫(yī)療改革的國家政策背景下,大數(shù)據(jù)在醫(yī)藥衛(wèi)生行業(yè)的應(yīng)用也日顯重要。
醫(yī)藥衛(wèi)生領(lǐng)域,病人個人信息、診療信息、處方醫(yī)囑、檢查報告等共同構(gòu)成醫(yī)藥衛(wèi)生的大數(shù)據(jù)資源。可通過對這些數(shù)據(jù)源的采集、抽取、轉(zhuǎn)換,形成醫(yī)療信息資源庫,為居民個人、醫(yī)生、衛(wèi)生管理部門提供數(shù)據(jù)支持。
面向居民,醫(yī)療信息資源庫為居民提供個性化健康管理,如智能導(dǎo)診、健康記錄、健康問答、個性化保健建議、健康咨詢、健康預(yù)警、個性化健康教育等。
面向醫(yī)生,醫(yī)療信息資源庫為醫(yī)生診斷提供個性化臨床決策支持。如,基于醫(yī)療大數(shù)據(jù)分析提煉病種的關(guān)鍵特征指標(biāo),形成糖尿病、高血壓、腫瘤幾個病種的診療模型。
面向衛(wèi)生管理,醫(yī)療信息資源庫將有助于精細化衛(wèi)生管理。如,采用特異群組挖掘技術(shù),針對就醫(yī)行為大數(shù)據(jù),并結(jié)合持卡人的多元信息,設(shè)計異常就醫(yī)行為檢測算法。
大數(shù)據(jù)的使用已經(jīng)成為一個國家各領(lǐng)域提高生產(chǎn)力、創(chuàng)新能力以及競爭力的關(guān)鍵要素。雖然我國在智慧城市建設(shè)、在大數(shù)據(jù)的開發(fā)和利用方面取得了一定的成績,但是我們要清楚地認識到,在智慧城市的現(xiàn)今階段大數(shù)據(jù)的開發(fā)和利用所面臨的困難:
政府各個部門之間的數(shù)據(jù)共享程度低;
政府?dāng)?shù)據(jù)開放剛剛起步;
大數(shù)據(jù)生態(tài)環(huán)境中各個角色的權(quán)利義務(wù)不清;
數(shù)據(jù)資產(chǎn)所有權(quán)的界定和保護;
數(shù)據(jù)利用中的安全和隱私保護問題;
處理大數(shù)據(jù)能力的技術(shù)和平臺;
大數(shù)據(jù)相關(guān)的人才匱乏。
面向未來,在智慧城市的建設(shè)過程中如何更好的利用大數(shù)據(jù),需要進一步的思考、解決和實踐:
(1)建立政府?dāng)?shù)據(jù)開放的機制:參考國外政府大數(shù)據(jù)開放所遵循的原則,完整性、原始性、及時性、可獲取性、可處理性、非歧視性、非專有性、非許可性等;鼓勵政府部門共享和開放,建立數(shù)據(jù)質(zhì)量評估機制,鼓勵第三方挖掘政府信息資源的積極性,出臺相關(guān)的獎勵措施。
(2)加強對數(shù)據(jù)隱私、安全、知識產(chǎn)權(quán)、法律法規(guī)、標(biāo)準(zhǔn)規(guī)范的研究與制定:建立相關(guān)標(biāo)準(zhǔn)規(guī)范、法律法規(guī);研究個人數(shù)據(jù)保護的法律瓶頸;明確擁有者、使用者、第三方社會資源、最終用戶等各方的責(zé)任、權(quán)利和義務(wù);加強對數(shù)據(jù)主權(quán)研究;加強對數(shù)據(jù)跨境流動監(jiān)管;加強數(shù)據(jù)風(fēng)險分級管理。
(3)加強大數(shù)據(jù)人才(分析、管理、技術(shù))培養(yǎng)與培育:尤其注重培育跨界復(fù)合型人才,既要熟悉政府業(yè)務(wù),又要熟悉大數(shù)據(jù)技術(shù);加強對政府信息化和管理決策部門、對大數(shù)據(jù)技術(shù)人才的相關(guān)培訓(xùn),技術(shù)與業(yè)務(wù)的結(jié)合點。
(4)推動技術(shù)、產(chǎn)品與服務(wù)的加速融合與創(chuàng)新:鼓勵多種形式的服務(wù)模式的探索和創(chuàng)新;鼓勵政府部門購買大數(shù)據(jù)相關(guān)的產(chǎn)品和服務(wù);鼓勵社會第三方基于大數(shù)據(jù)的運營模式探索和創(chuàng)新;支持大數(shù)據(jù)公共服務(wù)平臺、專業(yè)大數(shù)據(jù)公共平臺、產(chǎn)學(xué)研聯(lián)盟以及相關(guān)基礎(chǔ)設(shè)施的建設(shè)。
(5)大數(shù)據(jù)時代真的已經(jīng)來臨,智慧城市的建設(shè)更加離不開大數(shù)據(jù)相關(guān)技術(shù)和產(chǎn)品的應(yīng)用、服務(wù)和管理模式的創(chuàng)新、融合業(yè)務(wù)和運營模式的探索,大數(shù)據(jù)不僅是引領(lǐng)新一輪城市經(jīng)濟社會發(fā)展的重要驅(qū)動因素,一定意義上也將是人類社會發(fā)展進程中的劃時代變革。
[1] 陳素梅. PACS存儲系統(tǒng)的設(shè)計與實現(xiàn)[D].深圳:廈門大學(xué),2013.
[2] Fay Chang,Jeffrey Dean,et al. Bigtable: A Distributed Storage System for Structured Data[J]. ACM Trans Comput. Syst., 2008, Vol.26.
[3] Jeffrey Dean,Sanjay Ghemawat Commun. MapReduce: Simplified Data Processing on Large Clusters[J]. ACM 2008.
[4] 宋杰.面向多類型數(shù)據(jù)源的數(shù)據(jù)倉庫構(gòu)建及ETL關(guān)鍵技術(shù)的研究[D].沈陽:東北大學(xué), 2008.
[5] 李明高.“大數(shù)據(jù)”之于“電子政務(wù)”[J].信息化建設(shè),2013(1):18-19.
[6] 龐擁軍.城市基礎(chǔ)設(shè)施建設(shè)評價研究[D].天津:天津大學(xué), 2008.
The Application of Big Data in Smart City
Li Guangya, Zhang Jingyi, Tong Qing
(Wonders Information Co., Ltd, Shanghai 201112, China)
With the rapid development of Smart City, multi-source, different- structured and redundant big data has been well developed. Technologies such as data excavation and decision analysis provide an opportunity for big data to transfer into data asset which is necessary measures for the intelligence and interconnection of Smart City. Besides, the paper described the concepts, data resource and technologies of data analysis of Smart City. Furthermore, it claimed the synthetic application of big data of wisdom city. What's more, it demonstrated the application status of big data in current key industries and an expectation of its future development. Finally, it provided proposals and ideas for a further application of big data of Smart City.
Smart City; Big Data
TP311.13
A
2014.11.12)
1007-757X(2014)12-0001-04
李光亞(1973-),男,萬達信息股份有限公司,高級工程師(教授級),博士,研究方向:軟件工程、大數(shù)據(jù)管理、云計算、城市智能化,上海,201112
張敬誼(1974-),女,萬達信息股份有限公司,高級工程師,博士,研究方向:大數(shù)據(jù)管理、計算智能、移動醫(yī)療,上海,201112
童 慶(1977-),男,萬達信息股份有限公司,高級工程師,博士,研究方向:大數(shù)據(jù)管理、電子商務(wù),上海,201112