徜徉于信息之海,與數(shù)字共舞,發(fā)現(xiàn)價值,創(chuàng)造未來——大數(shù)據(jù)時代正向每個人敞開!在國內(nèi),“大數(shù)據(jù)”從一個熱門的IT概念到漸為公眾所知,有一個人功不可沒。他就是旅美信息管理專家、暢銷書《大數(shù)據(jù)》的作者涂子沛。11月13、14日,涂子沛先后做客北京師范大學(xué)和新浪網(wǎng)“大數(shù)據(jù)”沙龍,暢談他對大數(shù)據(jù)時代的理解,并就記者關(guān)心的問題展開了交流,在此特摘錄他的精彩觀點與《數(shù)據(jù)》讀者分享。
大趨勢:從數(shù)據(jù)到大數(shù)據(jù)
從上古的結(jié)繩記事到今天充斥在各個領(lǐng)域的統(tǒng)計數(shù)據(jù),伴隨著人類社會的發(fā)展進步,數(shù)據(jù)的用武之地也日益寬廣。涂子沛認為,認識大數(shù)據(jù)時代,首先要把數(shù)據(jù)的內(nèi)涵搞清楚?!爸猿霈F(xiàn)數(shù)據(jù),是人類認識世界、描述世界、改造世界的需要。數(shù)據(jù)不是數(shù)字,是有根據(jù)的數(shù)字,代表著計算、邏輯、精確、理性、科學(xué)、事實??梢哉f,科學(xué)的語言就是數(shù)據(jù)?!?/p>
數(shù)據(jù)其實一直都在,何以成為大數(shù)據(jù)呢?涂子沛解答道:“進入信息時代后,數(shù)據(jù)的體積和內(nèi)涵都在擴大。數(shù)據(jù)已不僅僅是有根據(jù)的數(shù)字,還演變成指代一切存儲在電腦中、網(wǎng)絡(luò)上的信息,包括數(shù)字、文本、圖片、郵件、音頻和視頻等等?!彼e例說,過去50年《紐約時報》共產(chǎn)生了30億單詞,如今推特(Twitter,知名社交網(wǎng)絡(luò)及微博客服務(wù)網(wǎng)站)一天就能產(chǎn)生80億單詞。
早在上世紀80年代,美國人就提出了“大數(shù)據(jù)”的概念。涂子沛認為,“大數(shù)據(jù)”逐漸流行并受到重視與摩爾定律、普適計算、數(shù)據(jù)挖掘、社交媒體和云計算這五個技術(shù)浪潮息息相關(guān)。
他就此詳解說:隨著這些新技術(shù)的不斷涌現(xiàn),全世界的數(shù)據(jù)處理和存儲不僅越來越快,越來越方便,還越來越便宜,海量數(shù)據(jù)的積累最終成為可能?!叭f物皆聯(lián)網(wǎng)、無處不計算”正在成為現(xiàn)實。數(shù)據(jù)挖掘技術(shù)則把數(shù)據(jù)分析的范圍從“已知”擴大到了“未知”,并最終推動了商務(wù)智能在各行各業(yè)的廣泛應(yīng)用。而隨著2004年,推特、臉譜(Facebook)等社交媒體的興起,個人開始貢獻大量的行為數(shù)據(jù),也就是所謂非結(jié)構(gòu)化的數(shù)據(jù)開始爆炸式增長。數(shù)據(jù)總量大量增加,目前世界80%的數(shù)據(jù)為非結(jié)構(gòu)化數(shù)據(jù),我們已不折不扣地進入到了大數(shù)據(jù)時代。
“這五個因素的共同作用就產(chǎn)生了大數(shù)據(jù)。到2010年,大數(shù)據(jù)成了一個很熱門的詞匯。”涂子沛進一步強調(diào):“‘大數(shù)據(jù)’之‘大’,不僅在于容量,更在于通過數(shù)據(jù)的整合和分析,發(fā)現(xiàn)新的知識,創(chuàng)造大的價值。也正因如此,‘大數(shù)據(jù)’正在成為國家和政府層面的發(fā)展戰(zhàn)略?!?/p>
大影響:從信息時代到智能時代
《大數(shù)據(jù)》一書提到,美國麻省理工學(xué)院的教授布倫喬爾森認為大數(shù)據(jù)的影響就像4個世紀之前人類發(fā)明的顯微鏡一樣?!斑@個新的‘顯微鏡’將擴大人類科學(xué)的邊界,推動人類知識的增長,引領(lǐng)新的經(jīng)濟繁榮”,涂子沛如是評價道?!按髷?shù)據(jù)將引領(lǐng)我們從信息時代、知識時代向智能時代邁進。”可見,他對大數(shù)據(jù)的未來滿懷信心。
無疑,人類已進入信息時代,借助各種搜索工具,你可以迅速找到自己需要的信息。而經(jīng)過系統(tǒng)化整理的信息就構(gòu)成了知識?!艾F(xiàn)在網(wǎng)上有大量免費的整理好的信息,比如在線教育,斯坦福大學(xué)的一堂課可能同時有十萬人在上,而這其中只有100人是坐在教室里聽講的。知識無處不在,所以今天也是一個知識的時代?!?/p>
那么,知識再上升一層是什么?涂子沛將之歸結(jié)為:智慧、智能。“能帶來與眾不同的知識就叫智慧,智慧可以指導(dǎo)行動、產(chǎn)生新的價值。大數(shù)據(jù)就是引領(lǐng)我們進入智能時代的基石。”他舉例說,國際商業(yè)機器公司(IBM)的計算機“沃森”2011年在美國熱門益智節(jié)目中戰(zhàn)勝了兩位人類冠軍選手。與計算機“深藍”只會做一件事(下國際象棋)不同,“沃森”從天文地理到明星八卦無所不知,其背后正得益于大數(shù)據(jù)的支撐,它能處理海量數(shù)據(jù)并快速回答。谷歌計劃幾年后上市的無人駕駛汽車同樣依賴其強大的數(shù)據(jù)處理能力。
由此引申,他指出:“在智能時代,人與人之間的合作、任務(wù)之間的對接會更精確,整個國家和社會的運行成本會更低。由此不難推斷,數(shù)據(jù)將成為創(chuàng)新的新基礎(chǔ)。如今數(shù)據(jù)已成為生產(chǎn)過程中的基本要素和資產(chǎn)。組織擁有數(shù)據(jù)的種類、規(guī)模、活性以及收集運用數(shù)據(jù)的能力成為其核心競爭力?;跀?shù)據(jù)的創(chuàng)新和競爭將成為商業(yè)、國家競爭的重要形式?!?/p>
大數(shù)據(jù)時代,數(shù)據(jù)的價值從何而來?涂子沛認為,海量是基礎(chǔ),整合是關(guān)鍵。他談道:“從目前的趨勢來看,組織所擁有的數(shù)據(jù)已開始多元化,這包括組織內(nèi)部通過自身的信息系統(tǒng)所獲得的精確數(shù)據(jù)、社交媒體產(chǎn)生的模糊數(shù)據(jù)(單條數(shù)據(jù)可能沒有明確的含義),以及組織外部的數(shù)據(jù)(如公共數(shù)據(jù)、其他組織的數(shù)據(jù))。有效地整合這些數(shù)據(jù)便可能創(chuàng)造新的財富和價值?!?/p>
大挑戰(zhàn):從數(shù)據(jù)開放到數(shù)據(jù)權(quán)
計算機專業(yè)出身,從事過政府部門的統(tǒng)計工作,令涂子沛與數(shù)據(jù)結(jié)下了深厚的緣分。后來到美國,他任職的公司主要為政府提供數(shù)據(jù)解決方案,又使他得以近距離感受美國社會對數(shù)據(jù)的重視。在他看來,大數(shù)據(jù)時代的特點和趨勢可概括為“循數(shù)管理”和“數(shù)據(jù)競爭”。
他同時認為,在這些正在發(fā)生和演變的趨勢中,也蘊藏著對個人、企業(yè)乃至全社會的巨大挑戰(zhàn)。而最為關(guān)鍵的是:人們應(yīng)該認識到“大數(shù)據(jù)時代所昭示的是一個更加開放的時代。”為此,他在多個場合疾呼,開放數(shù)據(jù)要成為政府以及企業(yè)義不容辭的責(zé)任。“公共數(shù)據(jù)有很大一部分是社會的基礎(chǔ)性數(shù)據(jù),缺少它,數(shù)據(jù)便無法有效整合;商業(yè)的基礎(chǔ)數(shù)據(jù)也應(yīng)該開放,如公司注冊數(shù)據(jù)、顧客行為記錄等。”他介紹說,隨著數(shù)據(jù)的不斷開放,創(chuàng)新的力量正在向大眾流動,數(shù)據(jù)也將成為大眾的一種權(quán)利,英國社會已經(jīng)明確提出“數(shù)據(jù)權(quán)”的概念。
作為中國人,涂子沛最為關(guān)心的還是中國在這個大時代當中所處的位置。他坦言道:“今天的中國是人口大國、互聯(lián)網(wǎng)大國、手機大國,卻恰恰還不是一個數(shù)據(jù)大國。收集、使用、開放數(shù)據(jù),都是我們中國人需要一一面對的挑戰(zhàn)?!?/p>
不久前,一則有關(guān)“中華民族復(fù)興已完成62%,引發(fā)民眾熱議”的消息也引起了涂子沛的關(guān)注。他認為,這項宏偉浩大的工程是可以量化和監(jiān)測的,關(guān)鍵在于決策制定和政策評估的各個環(huán)節(jié)要推行民意調(diào)查的科學(xué)方法?!懊癖姷暮逍ζ鋵嵰舱f明,大眾對如何在社會治理中推進科學(xué)的評估方法還相當陌生甚至無知。中國社會非常需要在社會治理中普及科學(xué)的評估知識和數(shù)據(jù)的應(yīng)用。”
政府統(tǒng)計部門作為海量數(shù)據(jù)的擁有者又如何應(yīng)對新時代的挑戰(zhàn)?“如果說科學(xué)的抽樣方法的運用是繼全面調(diào)查之后,使統(tǒng)計技術(shù)達到質(zhì)的提升,那么在大數(shù)據(jù)時代,處理實時和多元的數(shù)據(jù)將為統(tǒng)計帶來第三次革命,這將能有效改觀統(tǒng)計滯后性的弊病。而眼下,政府最需要做的是把基礎(chǔ)數(shù)據(jù)做好,促進數(shù)據(jù)在部門間的流動和整合?!蓖孔优婢痛酥锌系乇磉_了自己的想法。
從培養(yǎng)國民的數(shù)據(jù)精神到開放型社會建設(shè)——中國,請做好準備,迎接大數(shù)據(jù)的挑戰(zhàn)吧。