杜坤熠
(鄭州龍湖一中,河南 鄭州 450000)
大數(shù)據(jù)技術(shù)在互聯(lián)網(wǎng)中的應(yīng)用
杜坤熠
(鄭州龍湖一中,河南 鄭州 450000)
隨著新一代信息技術(shù)的融合發(fā)展,現(xiàn)在社會(huì)邁進(jìn)了大數(shù)據(jù)時(shí)代。本文從大數(shù)據(jù)的概念、應(yīng)用領(lǐng)域、來源、特征和所面臨的問題等方面對(duì)大數(shù)據(jù)技術(shù)在互聯(lián)網(wǎng)中的應(yīng)用進(jìn)行研究,以期讓科技更好地服務(wù)于人們的生活。
大數(shù)據(jù);互聯(lián)網(wǎng);應(yīng)用;特征
21世紀(jì)初,隨著新一代信息技術(shù)的融合發(fā)展,物聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)、數(shù)字家庭、社會(huì)化網(wǎng)絡(luò)等的廣泛應(yīng)用使得數(shù)據(jù)規(guī)模快速膨脹,處理和分析大數(shù)據(jù)的需求日益旺盛,興起了大數(shù)據(jù)熱潮,使得大數(shù)據(jù)領(lǐng)域獲得飛速發(fā)展。
哈佛大學(xué)社會(huì)學(xué)教授加里·金說:“這是一場(chǎng)革命,龐大的數(shù)據(jù)資源使得各個(gè)領(lǐng)域開始了量化進(jìn)程,無論學(xué)術(shù)界、商界還是政府,所有領(lǐng)域都將開始這種進(jìn)程?!睆募夹g(shù)上分析,大數(shù)據(jù)技術(shù)涉及計(jì)算機(jī)、應(yīng)用數(shù)學(xué)等幾乎所有的學(xué)科領(lǐng)域。大數(shù)據(jù)關(guān)鍵技術(shù)不僅包括數(shù)據(jù)存儲(chǔ)與分析技術(shù)等核心技術(shù),也包括數(shù)據(jù)處理、數(shù)據(jù)管理、數(shù)據(jù)呈現(xiàn)等重要技術(shù)。大數(shù)據(jù)技術(shù)是一系列技術(shù)的集合,任何單一的軟件產(chǎn)品都無法完全解決大數(shù)據(jù)問題,需要一整套全面的解決方案,需要各種應(yīng)用系統(tǒng)能夠根據(jù)需要獲取計(jì)算能力、存儲(chǔ)空間和各種軟件,并通過各種網(wǎng)絡(luò)傳遞給不同的使用者[1]。
大數(shù)據(jù)通過互聯(lián)網(wǎng)應(yīng)用在各行各業(yè)。例如,世界客流量網(wǎng)絡(luò)圖,對(duì)于不同國(guó)家、不同地區(qū),跨越大洋,連接交通線路,如此大量的數(shù)據(jù)信息可能有意想不到的利用價(jià)值;中國(guó)氣象云圖,每天氣象云圖產(chǎn)生如此多的數(shù)據(jù),怎樣合理分析和利用這些數(shù)據(jù),預(yù)測(cè)不同時(shí)段不同地區(qū)的天氣,可謂是意義重大;電子郵件網(wǎng)絡(luò)圖,假如每個(gè)人把自己收發(fā)電子郵件織成一張網(wǎng)絡(luò),這個(gè)數(shù)據(jù)量也是非常大的,可以從中分析有價(jià)值的數(shù)據(jù);又如全世界范圍內(nèi)淘寶網(wǎng)上成功交易記錄數(shù)據(jù),淘寶公司可以從中分析每年中不同時(shí)間、不同國(guó)家、不同地區(qū)的客戶喜歡購(gòu)買的商品,哪些商品在某一時(shí)間段內(nèi)比較熱銷,可以為后期售賣提供數(shù)據(jù)支持,也能夠給淘寶公司提供更有價(jià)值的數(shù)據(jù)信息[2]。
進(jìn)入21世紀(jì)以來,進(jìn)入了信息爆炸的時(shí)代,不僅是世界充斥著比以往更多的信息,而且信息增長(zhǎng)速度也在加快。例如,在互聯(lián)網(wǎng)應(yīng)用領(lǐng)域中,如移動(dòng)互聯(lián)網(wǎng)、社交網(wǎng)絡(luò)、電子商務(wù)等;在非互聯(lián)網(wǎng)應(yīng)用領(lǐng)域方面,如醫(yī)學(xué)、氣象、傳感器等,都成了大數(shù)據(jù)的源頭。其中有大家比較熟悉的網(wǎng)站,例如:①搜索引擎,如谷歌和百度都是搜索引擎的數(shù)據(jù)來源;②社交網(wǎng)絡(luò),如QQ、微信等是大數(shù)據(jù)產(chǎn)生的聚集地;③電子商務(wù),如淘寶和京東等每天能夠產(chǎn)生海量的交易數(shù)據(jù);④互聯(lián)網(wǎng)電視,如小米電視和搜狐TV等,他們把電視變成了互聯(lián)網(wǎng)終端,終端產(chǎn)生了大量的數(shù)據(jù)[3]。以上幾個(gè)方面均是大數(shù)據(jù)產(chǎn)生的重要來源。
因此,在21世紀(jì),數(shù)據(jù)信息的爆發(fā)式增長(zhǎng)和社會(huì)化趨勢(shì)是大數(shù)據(jù)應(yīng)運(yùn)而生的本質(zhì)原因。所謂爆發(fā)式的增長(zhǎng),是指實(shí)時(shí)數(shù)據(jù)、非結(jié)構(gòu)化的數(shù)據(jù)、機(jī)器數(shù)據(jù)產(chǎn)生數(shù)據(jù)的速度是人們以前所無法想象的,現(xiàn)在在原有摩爾定律的基礎(chǔ)上又產(chǎn)生出新的摩爾定律,即全球每18個(gè)月新增的信息量是計(jì)算機(jī)有史以來全部信息總量之和,且這個(gè)摩爾定律還在被不斷更新,其中的18個(gè)月還在不斷縮短。所謂社會(huì)化趨勢(shì),是指每個(gè)互聯(lián)網(wǎng)用戶的行為、用戶的關(guān)系都能夠被互聯(lián)網(wǎng)所記錄,而且每天在網(wǎng)絡(luò)中產(chǎn)生大量的碎片化信息,用戶對(duì)數(shù)據(jù)產(chǎn)生的貢獻(xiàn)也就是用戶對(duì)數(shù)據(jù)利用和消費(fèi)的地方[4]。
現(xiàn)在業(yè)界有一個(gè)相對(duì)比較統(tǒng)一的認(rèn)識(shí)和觀點(diǎn),滿足4個(gè)“V”就可以稱得上是大數(shù)據(jù):體量大(Volume)、多樣性(Variety)、價(jià)值密度低(Value)、速度快(Velocity)[5]。其中就包括大數(shù)據(jù)的廣度、深度、速度和準(zhǔn)度4個(gè)方面。首先,體量大。傳統(tǒng)的數(shù)據(jù)庫(kù)可能已經(jīng)承載不了每天幾十兆的數(shù)據(jù)。其次,多樣性。如今有音頻、視頻、圖片等傳統(tǒng)的數(shù)據(jù)庫(kù),但不能簡(jiǎn)單地存儲(chǔ),需要對(duì)其進(jìn)行格式轉(zhuǎn)化才能夠存儲(chǔ)。再者,價(jià)值密度低。對(duì)于傳統(tǒng)數(shù)據(jù),怎樣從大量數(shù)據(jù)中進(jìn)行選擇,篩選出有用的信息,減少碎片數(shù)據(jù)。最后,速度快。網(wǎng)絡(luò)中產(chǎn)生的數(shù)據(jù)需要實(shí)時(shí)生成、實(shí)時(shí)消費(fèi)使用,對(duì)于傳統(tǒng)的數(shù)據(jù)庫(kù)和網(wǎng)絡(luò)架構(gòu)可能沒有這么快的速度,不一定能夠滿足其速度需求。以上4個(gè)方面都是大數(shù)據(jù)技術(shù)應(yīng)用所要考慮的問題。因此,大數(shù)據(jù)技術(shù)的發(fā)展不僅給如今人們的生活帶來了機(jī)遇,也帶來了挑戰(zhàn)。
大數(shù)據(jù)能夠幫助人們進(jìn)行量化分析,做出正確合理的決策。例如,對(duì)于全國(guó)房屋空置率的統(tǒng)計(jì),即當(dāng)前國(guó)家的所有房屋中有多少房屋是空置的,這個(gè)數(shù)據(jù)就可以應(yīng)用大數(shù)據(jù)技術(shù)進(jìn)行簡(jiǎn)單、準(zhǔn)確的統(tǒng)計(jì)得出。另外,供電局也可以對(duì)每家每戶的電表進(jìn)行用電量統(tǒng)計(jì),來進(jìn)一步預(yù)測(cè)房屋空置率。比如,在一棟樓里或一個(gè)小區(qū)里,住著N戶人家,一些住戶家里的電表連續(xù)一個(gè)季度用電量均為0,則可以說明該房屋是空置的,最終能夠統(tǒng)計(jì)出該小區(qū)房屋的空置率,以此也可以得出全國(guó)房屋空置率,這就是對(duì)大數(shù)據(jù)技術(shù)的簡(jiǎn)單應(yīng)用。
大數(shù)據(jù)給社會(huì)發(fā)展帶來機(jī)遇的同時(shí)也帶來了挑戰(zhàn),其中最重要的挑戰(zhàn)就是數(shù)據(jù)安全隱私問題。正如2013年“斯諾登事件”,就給數(shù)據(jù)安全帶來了很大的隱患。如何去規(guī)范、去解決問題,是政府和組織機(jī)構(gòu)需要共同關(guān)注的問題。
當(dāng)前,大數(shù)據(jù)給社會(huì)發(fā)展帶來了機(jī)遇和挑戰(zhàn),只有抓住機(jī)遇,迎接挑戰(zhàn),才能讓科技更好地服務(wù)于人們的生活。
[1]何克抗.大數(shù)據(jù)面面觀[J].電化教育研究,2014(10):8-16.
[2]全嫣.大數(shù)據(jù)的影響[J].電子技術(shù)與軟件工程,2017(15):168.
[3]王麓銘.大數(shù)據(jù)在交通中的應(yīng)用[J].科技展望,2017(24):23.
[4]王綱,李月榮,賈冬艷.大數(shù)據(jù)在城市智能交通中的應(yīng)用研究[J].科技視界,2017(21):30-31.
[5]范嘉琦.關(guān)于大數(shù)據(jù)的安全現(xiàn)狀與應(yīng)對(duì)策略探討[J].信息系統(tǒng)工程,2017(10):73-75.
The Application of Big Data Technology in the Internet
Du Kunyi
(NO.1 Middle School of Zhengzhou Longhu,Zhengzhou Henan 450000)
With the integration and development of the new generation of information technology,the soci?ety has stepped into the big data time.This paper studied the application of big data technology in the in?ternet from the concept,application field,source,characteristics and problems of big data,in order to make technology better serve people's lives.
big data;internet;application;feature
TP311.13;TP393.08
A
1003-5168(2017)12-0044-02
2017-11-05
杜坤熠(2000-),男,研究方向:信息安全。