蘇志忠+劉慶敖
摘 要: 隨著網(wǎng)絡信息化時代的日益普遍,移動互聯(lián)、社交網(wǎng)絡、電子商務大大拓展了互聯(lián)網(wǎng)疆界和應用領域,我們正處在一個數(shù)據(jù)爆發(fā)性、幾何式增長的“大數(shù)據(jù)”時代,“大數(shù)據(jù)”時代已經來臨,將會對人類的數(shù)據(jù)駕馭能力提出前所未有的機遇與挑戰(zhàn)。
關鍵詞: 大數(shù)據(jù) 發(fā)展 影響
如果兩年前有人問,在IT領域什么概念最流行,可能很多人都會提到物聯(lián)網(wǎng)或云計算。但從2012以來,“大數(shù)據(jù)(Bigdata)”成為學術界、工商界和媒體爭相報道的熱詞?!按髷?shù)據(jù)”是繼續(xù)物聯(lián)網(wǎng)、云計算之后IT產業(yè)又一次顛覆性的技術變革,對國家治理決策、組織、業(yè)務流程及提供公共服務等方式都將產生巨大影響,有學者甚至將大數(shù)據(jù)時代稱為人類文明史上自工業(yè)革命以來的第二次大革命。
一、何為“大數(shù)據(jù)”
20世紀世界最偉大的技術發(fā)明之一——“互聯(lián)網(wǎng)”的誕生,標志著人們將進入全球性網(wǎng)絡時代。而隨著互聯(lián)網(wǎng)技術的不斷發(fā)展,特別隨著社會媒體和移動互聯(lián)網(wǎng)用戶的逐漸發(fā)展,物聯(lián)網(wǎng)、云計算、移動互聯(lián)、車聯(lián)網(wǎng)、手機、平板電腦、PC及遍布全球各個角落的各式各樣的傳感設備、終端的接入,使各種數(shù)據(jù)呈現(xiàn)出爆發(fā)式、幾何式的快速增長。我們可以試想一下:全球各個城市的視頻監(jiān)控每時每刻都在采集流媒體數(shù)據(jù),這是多么巨大的量?當50億手機終端、20億臺電腦終端,隨時隨地、持續(xù)不斷地都向分布在全球各地的服務器發(fā)送數(shù)據(jù),所帶來的數(shù)據(jù)持續(xù)增量又是一個什么概念?不能否認,隨著大數(shù)據(jù)廣泛應用,我們已經身處在一個海量信息和海量數(shù)據(jù)的時代,MB、GB時代已經成為過去,TB時代正在被超越,大數(shù)據(jù)時代已經來臨。
目前,對大數(shù)據(jù)尚無統(tǒng)一的定義,通常人們會認為這是一種數(shù)據(jù)量龐大、數(shù)據(jù)源形式多樣化的非結構化數(shù)據(jù)。由于大數(shù)據(jù)分析常和云計算聯(lián)系在一起,有人會把大數(shù)據(jù)等同于云計算,也有人在大數(shù)據(jù)是一種技術還是一種現(xiàn)象之間糾結。但數(shù)據(jù)本身既是一種資源,更是一種資產,大數(shù)據(jù)是有價值的,這一點在業(yè)界已經達成共識。在這里我們還必須先厘清幾個概念:一是結構化數(shù)據(jù)。結構化數(shù)據(jù)可以在關系數(shù)據(jù)庫中找到,多年來一直主導著IT的應用;二是半結構化數(shù)據(jù)。半結構化數(shù)據(jù)包括電子郵件、文字處理文件及發(fā)布在網(wǎng)絡上的新聞等,以實際內容為基礎;三是非結構化數(shù)據(jù)。非結構化數(shù)據(jù)廣泛應用于社交網(wǎng)絡平臺、物聯(lián)網(wǎng)平臺和電子商務之中。隨著社交網(wǎng)絡平臺的增量、傳感器應用等新技術不斷發(fā)展與創(chuàng)新,更有數(shù)據(jù)稱,超過80%~90%的數(shù)據(jù)屬于非結構化數(shù)據(jù)。
二、大數(shù)據(jù)帶來的改變
現(xiàn)今的信息資源已日益成為與人力資源、物質資源同等重要的社會和企業(yè)資源。目前,大數(shù)據(jù)之所以越來越受到人們的認可和追捧,主要是因為其具有非常廣闊的研究和應用前景,正悄悄改變人們的傳統(tǒng)思維,并滲透到各個行業(yè)和各職能業(yè)務領域,這也意味著大數(shù)據(jù)將是一座巨大的金礦正等待著人們去開發(fā)和挖掘。同時,大數(shù)據(jù)帶來的商業(yè)機會現(xiàn)在為越來越多具有技術前瞻性和有實力的企業(yè)所重視,在各個領域發(fā)揮著重要作用,為廣大用戶提供更加專業(yè)化和個性化的服務。
例如,在中國,鐵路作為國民經濟的大動脈,在國民經濟發(fā)展中具有重要作用。隨著中國高鐵的快速發(fā)展,“四縱四橫”鐵路客運快速通道的實現(xiàn),將會對現(xiàn)有交通運輸格局產生深遠影響。大數(shù)據(jù)在鐵路運輸方面也有直觀表現(xiàn):首先,可以通過鐵路客運信息的收集、整理、分析預測客運量,合理整合運力資源。其次,通過鐵路信息海量數(shù)據(jù)統(tǒng)計,實際反映出旅客群體自身需求,通過數(shù)據(jù)分析優(yōu)化配置并開展更為廣闊的增值業(yè)務。最后,相對于傳統(tǒng)信息處理方式,大數(shù)據(jù)將大大節(jié)省研發(fā)成本和人力資源,會對人們的不同需求做出正確判斷,它的分析將會把市場發(fā)展的不可預測性變?yōu)橐环N可能,同樣,利用“大數(shù)據(jù)”預測客運、貨運的趨勢將成為可能。
在德國,大數(shù)據(jù)技術已經被用于智能電網(wǎng)的各個終端,即現(xiàn)在所說的智能電表。同時,為了鼓勵大家積極使用太陽能,從而節(jié)約物質能源。各個家庭在安裝太陽能設備終端后,除滿足自家使用外,還可以把太陽能產生的多余電賣給電網(wǎng)企業(yè)。而智能電網(wǎng)可以每隔5~10分鐘收集一次用電使用數(shù)據(jù),這些收集的數(shù)據(jù)可以用來分析、預測各個客戶的用電習慣等,通過數(shù)據(jù)分析、預測,從而推斷出在未來幾個月的時間內,整個電網(wǎng)相對準確的用電需求。
而易趣網(wǎng)(eBay)則將結構化數(shù)據(jù)和非結構化數(shù)據(jù)結合在一起,為準確分析各用戶的購物行為,eBay定義超過2000種各類型的數(shù)據(jù),對顧客的行為進行持續(xù)跟蹤分析。比如,廣告收入上,利用該系統(tǒng),eBay能夠精確計算出每一個關鍵字為其帶來的投資回報。通過對廣告投放的優(yōu)化,eBay產品銷售的廣告成本降低了99%,頂級賣家占總銷售額的百分比卻上升到45%。
三、結語
隨著信息通信技術發(fā)展積極累至今,大數(shù)據(jù)作為新發(fā)明和新資源,正通過不斷的技術創(chuàng)新和發(fā)展,讓我們有機會更加深入走進信息社會,正在逐漸改變我們的生活方式和思維模式,其所帶來的巨大價值正被人們認可,而且在社會整體建設中的信息孤島現(xiàn)象將大幅消減,數(shù)據(jù)共享將成為可能,具體而言,在國家政策支持下,依托大數(shù)據(jù)發(fā)展,有利于提高科學決策能力,有利于管理模式的改變,有利于節(jié)約社會資源和成本,提升公共服務保障能力。