胡雨欣

摘要：21世紀(jì)是數(shù)據(jù)信息大發(fā)展的時(shí)代，“大數(shù)據(jù)”時(shí)代已經(jīng)降臨，這是一場(chǎng)革命，龐大的數(shù)據(jù)資源使得各個(gè)領(lǐng)域開始了量化進(jìn)程，無論學(xué)術(shù)界、商界還是政府，所有領(lǐng)域都將開始這種進(jìn)程。大數(shù)據(jù)幫助人們開啟了循“數(shù)”管理的模式，也是我們當(dāng)下“大社會(huì)”的集中體現(xiàn)。

關(guān)鍵詞：大數(shù)據(jù) 云計(jì)算 數(shù)據(jù)隱私 智慧城市

一、前言

半個(gè)世紀(jì)以來，隨著計(jì)算機(jī)技術(shù)全面融入社會(huì)生活，信息爆炸已經(jīng)積累到了一個(gè)開始引發(fā)變革的程度。互聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、車聯(lián)網(wǎng)、GPS、醫(yī)學(xué)影像、安全監(jiān)控、金融、電信都在瘋狂產(chǎn)生著數(shù)據(jù)。大數(shù)據(jù)時(shí)代對(duì)人類的數(shù)據(jù)駕馭能力提出了新的挑戰(zhàn)，也為人們獲得更為深刻、全面的洞察能力提供了前所未有的空間與潛力。

二、大數(shù)據(jù)的簡(jiǎn)介

（一）大數(shù)據(jù)的定義

大數(shù)據(jù)（Big Data）是指需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。它對(duì)數(shù)據(jù)規(guī)模和傳輸速度要求很高，或者其結(jié)構(gòu)不適合原本的數(shù)據(jù)庫(kù)系統(tǒng)，因此超過了傳統(tǒng)數(shù)據(jù)庫(kù)系統(tǒng)處理的能力。

（二）大數(shù)據(jù)的4V特征

1.大量化（Volume）：數(shù)據(jù)體量巨大，從TB級(jí)別躍升到PB級(jí)別。

2.多樣化（Variety）：數(shù)據(jù)類型繁多，數(shù)據(jù)多樣性的增加主要是由新型多結(jié)構(gòu)數(shù)據(jù)，以及包括網(wǎng)絡(luò)日志、社交媒體、互聯(lián)網(wǎng)搜索、手機(jī)通話記錄及傳感器網(wǎng)絡(luò)等數(shù)據(jù)類型造成。

3.高速化（Velocity）：處理速度快，1秒定律，可從各種類型的數(shù)據(jù)中快速獲得高價(jià)值的信息，這一點(diǎn)也和傳統(tǒng)的數(shù)據(jù)挖掘技術(shù)有著本質(zhì)的不同。

4.價(jià)值（Value）：只要合理利用數(shù)據(jù)并對(duì)其進(jìn)行正確、準(zhǔn)確的分析，將會(huì)帶來很高的價(jià)值回報(bào)。

三、全球各國(guó)大數(shù)據(jù)的發(fā)展現(xiàn)狀

美國(guó)希望利用大數(shù)據(jù)技術(shù)實(shí)現(xiàn)在多個(gè)領(lǐng)域的突破，包括科研教學(xué)、環(huán)境保護(hù)、工程技術(shù)、國(guó)土安全、生物醫(yī)藥等。擁有世界第二多人口的印度，近兩年也持續(xù)運(yùn)用大數(shù)據(jù)，期許打造出一個(gè)更便利、更親民的智慧城市。日本在新一輪IT振興計(jì)劃中，將發(fā)展大數(shù)據(jù)作為國(guó)家戰(zhàn)略層面提出，重點(diǎn)關(guān)注大數(shù)據(jù)應(yīng)用技術(shù)。目前，全球至少擁有大大小小的數(shù)據(jù)開放網(wǎng)站50余個(gè)。

（一）歐盟大數(shù)據(jù)的發(fā)展

目前，歐盟及其成員國(guó)已經(jīng)明確制定大數(shù)據(jù)發(fā)展戰(zhàn)略，其在大數(shù)據(jù)方面的活動(dòng)主要涉及以下四方面內(nèi)容：數(shù)據(jù)價(jià)值鏈戰(zhàn)略計(jì)劃；資助“大數(shù)據(jù)”和“開放數(shù)據(jù)”領(lǐng)域的研究和創(chuàng)新活動(dòng)；實(shí)施開放數(shù)據(jù)政策；促進(jìn)公共資助科研實(shí)驗(yàn)成果和數(shù)據(jù)的使用及再利用。

（二）亞洲大數(shù)據(jù)的發(fā)展

整體來說，相比歐洲，亞洲大數(shù)據(jù)發(fā)展相對(duì)落后，在大數(shù)據(jù)發(fā)展過程中，更多的還是探索學(xué)習(xí)階段。目前，亞洲的很多大數(shù)據(jù)公司都在海外進(jìn)行了相關(guān)市場(chǎng)開拓。未來，亞洲市場(chǎng)將有望成為大數(shù)據(jù)業(yè)務(wù)的主戰(zhàn)場(chǎng)。

四、全球大數(shù)據(jù)的市場(chǎng)與應(yīng)用

（一）全球大數(shù)據(jù)交易現(xiàn)狀

對(duì)于海量并且瞬息萬變的大數(shù)據(jù)來說，存儲(chǔ)已然不是最終目標(biāo)，如何從數(shù)據(jù)中獲得包括商業(yè)價(jià)值在內(nèi)的紅利，才是其真正的意義所在。

目前全球大數(shù)據(jù)企業(yè)主要分為兩大陣營(yíng)。一部分屬于單純以大數(shù)據(jù)技術(shù)為核心的創(chuàng)新型公司，希望為市場(chǎng)帶來創(chuàng)新方案并推動(dòng)技術(shù)發(fā)展。另有一些則是以數(shù)據(jù)庫(kù)/數(shù)據(jù)倉(cāng)儲(chǔ)業(yè)務(wù)為主的知名公司，利用自身資源與技術(shù)優(yōu)勢(shì)地位沖擊大數(shù)據(jù)領(lǐng)域。

全球主要大數(shù)據(jù)企業(yè)有IBM、惠普公司、戴爾公司、Opower公司、Teradata公司、Oracle公司、微軟公司、亞馬遜公司、Google公司、SAP公司和EMC公司等。

（二）全球大數(shù)據(jù)市場(chǎng)規(guī)模

目前全球大數(shù)據(jù)總體加速發(fā)展趨勢(shì)不變且呈現(xiàn)出應(yīng)用成為新增長(zhǎng)動(dòng)力、競(jìng)爭(zhēng)態(tài)勢(shì)愈加激烈、融資并購(gòu)成為市場(chǎng)熱點(diǎn)、產(chǎn)業(yè)生態(tài)不斷優(yōu)化和基礎(chǔ)設(shè)施建設(shè)更加合理等特點(diǎn)，預(yù)計(jì)2020年全球大數(shù)據(jù)市場(chǎng)規(guī)模將達(dá)到1263.21億美元，大數(shù)據(jù)已成為全球IT支出新的增長(zhǎng)點(diǎn)。

（三）全球大數(shù)據(jù)市場(chǎng)結(jié)構(gòu)及應(yīng)用領(lǐng)域

全球大數(shù)據(jù)市場(chǎng)結(jié)構(gòu)從壟斷競(jìng)爭(zhēng)向完全競(jìng)爭(zhēng)格局演化，企業(yè)數(shù)量迅速增多，產(chǎn)品和服務(wù)的差異度增大，技術(shù)門檻逐步降低，市場(chǎng)競(jìng)爭(zhēng)越發(fā)激烈。全球大數(shù)據(jù)市場(chǎng)中，行業(yè)解決方案、計(jì)算分析服務(wù)、存儲(chǔ)服務(wù)、數(shù)據(jù)庫(kù)服務(wù)和大數(shù)據(jù)應(yīng)用為市場(chǎng)份額排名最靠前的細(xì)分市場(chǎng)。

（四）大數(shù)據(jù)的影響

大數(shù)據(jù)可以幫助人們開啟循“數(shù)”管理的模式，也是我們當(dāng)下“大社會(huì)”的集中體現(xiàn)：大數(shù)據(jù)促進(jìn)了政府職能變革；大數(shù)據(jù)能夠幫助我們打造“智慧城市”；大數(shù)據(jù)將促進(jìn)商業(yè)模式創(chuàng)新。

五、大數(shù)據(jù)的發(fā)展趨勢(shì)

大數(shù)據(jù)將成為重要戰(zhàn)略資源，與云計(jì)算深度融合，與此同時(shí)數(shù)據(jù)分析方法將發(fā)生變革，以數(shù)據(jù)為中心的解決方案與應(yīng)用將興起。網(wǎng)絡(luò)安全問題也將凸顯，數(shù)據(jù)隱私標(biāo)準(zhǔn)也會(huì)隨之出臺(tái)。

六、大數(shù)據(jù)發(fā)展的機(jī)遇和挑戰(zhàn)

大數(shù)據(jù)時(shí)代的來臨，除了推動(dòng)現(xiàn)有的信息技術(shù)產(chǎn)業(yè)的改革創(chuàng)新，其對(duì)我們生產(chǎn)生活的方式也將產(chǎn)生重大影響。從個(gè)人視角來看，不管是日常工作中遇到的海量郵件或是從網(wǎng)上獲取的社交、購(gòu)物、娛樂、學(xué)習(xí)、理財(cái)?shù)刃畔?，還是生活中最常見的手機(jī)存儲(chǔ)，大數(shù)據(jù)已經(jīng)滲透到我們?nèi)粘Ｉ畹姆椒矫婷妫瑯O大地方便了我們的生活。對(duì)企業(yè)而言，互聯(lián)網(wǎng)公司已開始采用大數(shù)據(jù)來沖擊傳統(tǒng)行業(yè)，精準(zhǔn)營(yíng)銷與大數(shù)據(jù)驅(qū)動(dòng)的產(chǎn)品快速迭代，促進(jìn)企業(yè)商業(yè)模式創(chuàng)新。在社會(huì)公共服務(wù)方面，教育、醫(yī)療、交通等行業(yè)在大數(shù)據(jù)的影響下，出現(xiàn)了各種新的應(yīng)用：數(shù)據(jù)化、社交化的新媒體平臺(tái)、智能交通與城市數(shù)字監(jiān)管系統(tǒng)，以及病歷存儲(chǔ)調(diào)用的醫(yī)療云等。此外，政府還可以通過大數(shù)據(jù)來高效完成信息采集，這樣可優(yōu)化升級(jí)管理運(yùn)營(yíng)。

然而大數(shù)據(jù)在給我們展示前所未有的發(fā)展機(jī)遇的同時(shí)，也給國(guó)家信息安全、信息技術(shù)、人才等方面帶來了很大的挑戰(zhàn)。大數(shù)據(jù)讓大規(guī)模生產(chǎn)、分享和應(yīng)用數(shù)據(jù)成為可能，將信息存儲(chǔ)和管理集中化，這也使得我們一方面享受了“大數(shù)據(jù)”帶來的諸多便利，但另一方面無處不在的“第三只眼”卻在時(shí)刻監(jiān)控著我們的行動(dòng)。面對(duì)大數(shù)據(jù)在信息安全方面存在的隱憂，我們?cè)诩夹g(shù)上要應(yīng)對(duì)其“大容量、多類別、高時(shí)效”的三大挑戰(zhàn)。在人才方面，無限增長(zhǎng)的數(shù)據(jù)需要相應(yīng)增加IT人員，且專業(yè)化技術(shù)人才和管理人才的需求開始加大，而目前傳統(tǒng)的教育模式很難培養(yǎng)出這種既精通業(yè)務(wù)又能進(jìn)行大數(shù)據(jù)分析的人才，同時(shí)IT人員本身配備不足的現(xiàn)狀與迫切的人才需求矛盾會(huì)更加突出。

參考文獻(xiàn)：

[1]吳偉.海量存儲(chǔ)系統(tǒng)元數(shù)據(jù)管理的研究[D].華中科技大學(xué)，2010.

[2]任崇廣.面向海量數(shù)據(jù)處理領(lǐng)域的云計(jì)算及其關(guān)鍵技術(shù)研究[D].南京理工大學(xué)，2013.

[3]王乾.論大數(shù)據(jù)分析的方法論意義[D].武漢科技大學(xué)，2015.

[4]張?zhí)m廷.大數(shù)據(jù)的社會(huì)價(jià)值與戰(zhàn)略選擇[D].中共中央黨校，2014.

[5]王鈞超.大數(shù)據(jù)時(shí)代產(chǎn)業(yè)經(jīng)濟(jì)信息分析在宏觀決策中的應(yīng)用[D].中國(guó)地質(zhì)大學(xué)（北京），2016.