田鐵剛

（黑龍江工業(yè)學(xué)院，黑龍江 雞西 158100）

在互聯(lián)網(wǎng)、云計(jì)算之后，大數(shù)據(jù)是又一項(xiàng)備受熱議的信息技術(shù)。隨著信息技術(shù)的快速發(fā)展，大數(shù)據(jù)為人們的生活與工作帶來極大的便利。人們生活中的事物經(jīng)過數(shù)據(jù)化處理后，通過數(shù)據(jù)格式存儲(chǔ)于分析，呈現(xiàn)出更大的價(jià)值。

1 大數(shù)據(jù)的概況

1.1 大數(shù)據(jù)的概念

隨著云時(shí)代的到來，大數(shù)據(jù)備受關(guān)注，其不再只是停留于字面意義的非結(jié)構(gòu)化和半結(jié)構(gòu)化的數(shù)據(jù)，而是慢慢成為一種新的觀察世界的方法和手段。通過數(shù)據(jù)化思維與先進(jìn)處理技術(shù)，探索和分析巨大數(shù)據(jù)資源之間的關(guān)系，構(gòu)建出一個(gè)透明化的世界。

大數(shù)據(jù)是互聯(lián)網(wǎng)發(fā)展到現(xiàn)在的一種現(xiàn)象，通過云計(jì)算創(chuàng)新技術(shù)，越來越多的數(shù)據(jù)被人們輕松地收集和利用，在社會(huì)各個(gè)行業(yè)之中，大數(shù)據(jù)也發(fā)揮著重要作用，創(chuàng)造出巨大的價(jià)值。

關(guān)于大數(shù)據(jù)的特點(diǎn)，業(yè)界將其主要分為4個(gè)層面：（1）巨大的數(shù)據(jù)量。大數(shù)據(jù)已經(jīng)從TB級別快速地升到了PB級別。（2）繁多的數(shù)據(jù)類型。大數(shù)據(jù)的類型包括網(wǎng)絡(luò)日志、音頻、圖片、地理位置等。（3）價(jià)值密度低。例如在一些視頻監(jiān)控中，能夠發(fā)揮價(jià)值的視頻可能只是很短的一兩秒時(shí)間。（4）處理速度快，對時(shí)效性要求高。這些特點(diǎn)也是當(dāng)前大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的本質(zhì)不同[1]。

1.2 大數(shù)據(jù)的重要價(jià)值體現(xiàn)

并不是所有的數(shù)據(jù)都是為了長遠(yuǎn)利益而被記錄，很多數(shù)據(jù)記錄下來只是一種操作的基礎(chǔ)，如若脫離記錄，導(dǎo)致后續(xù)操作的難以開展與進(jìn)行。

1.2.2 備份和監(jiān)督價(jià)值

數(shù)據(jù)放入記錄是相對于之前的操作過程，提供了一個(gè)虛擬備份，記錄著不同方的操作過程、操作次序，甚至詳細(xì)記錄了不同環(huán)節(jié)的操作內(nèi)容。大數(shù)據(jù)的這種作用也是被人們所認(rèn)可的最初始價(jià)值。

1.2.3 糾正偏離的價(jià)值

一個(gè)系統(tǒng)在運(yùn)行中，往往出現(xiàn)不同于以往的差異性，當(dāng)代表差異的數(shù)據(jù)通過極值或者其他的方式表現(xiàn)出來，就會(huì)打破系統(tǒng)原有的平衡，內(nèi)部環(huán)節(jié)或者資源跟不上。為確保系統(tǒng)的正常運(yùn)轉(zhuǎn)，適當(dāng)采用外力十分有必要。

1.2.4 預(yù)測價(jià)值

預(yù)測價(jià)值是當(dāng)前業(yè)界對大數(shù)據(jù)最為重視的價(jià)值?；谝酝涗浀臄?shù)據(jù)信息，開展深入的研究分析，挖掘數(shù)據(jù)的規(guī)律，進(jìn)行系統(tǒng)性的優(yōu)化升級。其決定著系統(tǒng)未來的長期成長與演變能力[2]。

2 大數(shù)據(jù)技術(shù)的特點(diǎn)

2.1 開源軟件的廣泛應(yīng)用

隨著信息技術(shù)的快速發(fā)展，大數(shù)據(jù)技術(shù)被廣泛應(yīng)用在社會(huì)生活的各個(gè)方面，而每個(gè)領(lǐng)域都朝著智能化、科技化方向發(fā)展。由此，像Hadoop，Hbase，MongoDb和CounchDB等這些各具特點(diǎn)功能的開源軟件，在社會(huì)各行業(yè)中被廣泛應(yīng)用。

中國現(xiàn)代民俗學(xué)大致經(jīng)歷了從事象研究到事件研究的范式轉(zhuǎn)換，但這是遠(yuǎn)遠(yuǎn)不夠的，王霄冰從民眾群體(民)與知識(shí)體系(俗)之間的關(guān)系入手，提倡關(guān)注“民俗事件中的社會(huì)關(guān)系”，這相比“語境中的民俗”的提法而言指向更加明確。不過還應(yīng)注意的是，“熟人社會(huì)”內(nèi)部借助民俗活動(dòng)對已有社會(huì)關(guān)系的刷新或調(diào)整，與“生人社會(huì)”借助民俗活動(dòng)而達(dá)成的開放式的社會(huì)關(guān)系，雖然都屬于多主體之間的民俗關(guān)系，但其差異甚為明顯，加以區(qū)別是必要的。民俗在“熟人社會(huì)”與“生人社會(huì)”所承擔(dān)的不同角色，啟發(fā)我們應(yīng)在更廣泛的社會(huì)視野中體認(rèn)民俗。

2.2 人工智能技術(shù)的不斷引進(jìn)

大數(shù)據(jù)技術(shù)是從巨大的數(shù)據(jù)資源中獲取有價(jià)值的數(shù)據(jù)，并對其進(jìn)行分析處理。特別是在信息化爆炸的時(shí)代，人們每天接觸著各種各樣的信息，因而智能處理大數(shù)據(jù)，提高處理數(shù)據(jù)的水平能，顯得尤為重要。在大數(shù)據(jù)的管理、分析及可視化等方面，都與人有著密切的關(guān)系。由此，大數(shù)據(jù)技術(shù)不斷引進(jìn)人工智能技術(shù)，通過機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘、模式識(shí)別等人工智能技術(shù)處理大數(shù)據(jù)。

2.3 分布式處理架構(gòu)與非結(jié)構(gòu)化數(shù)據(jù)處理技術(shù)

隨著科技的不斷發(fā)展，傳統(tǒng)的數(shù)據(jù)處理難以滿足客戶的數(shù)據(jù)需求，在人們的不斷探索中，在大數(shù)據(jù)技術(shù)的處理過程中，分布式處理架構(gòu)式成為大數(shù)據(jù)處理的主要模式。此外，分布式文件系統(tǒng)、分布式編程環(huán)境等技術(shù)都得到廣泛應(yīng)用。

此外，大數(shù)據(jù)技術(shù)包含豐富的數(shù)據(jù)處理技術(shù)，與傳統(tǒng)文本信息不同的是非結(jié)構(gòu)化處理數(shù)據(jù)，指的是通過圖片、文檔及視頻等形式。隨著云計(jì)算技術(shù)的發(fā)展，在大數(shù)據(jù)處理中非結(jié)構(gòu)化數(shù)據(jù)采集技術(shù)也發(fā)展得越來越快[3-4]。

3 大數(shù)據(jù)未來發(fā)展趨勢

當(dāng)前，大數(shù)據(jù)在幫助政府實(shí)現(xiàn)市場經(jīng)濟(jì)調(diào)控、預(yù)警災(zāi)難、防范公共衛(wèi)生安全及監(jiān)督社會(huì)輿論等方面發(fā)揮著重要的作用，提升緊急及應(yīng)變能力，提升企業(yè)服務(wù)質(zhì)量等。大數(shù)據(jù)技術(shù)不僅在各個(gè)領(lǐng)域得到廣泛應(yīng)用，而且未來有著良好的發(fā)展前景[5-7]。

3.1 人工智能技術(shù)的結(jié)合

大數(shù)據(jù)分析的目的就是為了從數(shù)據(jù)資源中挖掘出有價(jià)值的信息。為更準(zhǔn)確更深層次地挖掘信息資料，而不是單純地統(tǒng)計(jì)和分析數(shù)據(jù)，所以需要不斷提高計(jì)算機(jī)的智能計(jì)算能力，以促使提高計(jì)算機(jī)系統(tǒng)分析數(shù)據(jù)的能力，從而做出準(zhǔn)確的推理及決策。實(shí)現(xiàn)這些最核心的技術(shù)能力就是人工智能。由此，人工智能研究也成為近年來學(xué)術(shù)界與企業(yè)界備受重視的課題，一方面為提升計(jì)算機(jī)硬件性能，另一方面是適應(yīng)時(shí)代需求，滿足不斷快速發(fā)展的計(jì)算機(jī)技術(shù)，更快更準(zhǔn)確地處理巨大的數(shù)據(jù)。

3.2 以數(shù)據(jù)科學(xué)為基礎(chǔ)的多學(xué)科的融合

在大數(shù)據(jù)時(shí)代，許多學(xué)科的研究表面看來存在差異，但是從數(shù)據(jù)研究的角度來看，學(xué)科之間存在共通點(diǎn)，因此，隨著數(shù)字信息時(shí)代的到來，以數(shù)據(jù)科學(xué)為基礎(chǔ)，多學(xué)科呈現(xiàn)數(shù)據(jù)一致性，因此可采用統(tǒng)一的思想進(jìn)行統(tǒng)一研究。

3.3 未來大數(shù)據(jù)技術(shù)的核心是數(shù)據(jù)分析

在數(shù)據(jù)處理中，數(shù)據(jù)分析占據(jù)著重要的作用。隨著時(shí)代的發(fā)展，其也會(huì)成為大數(shù)據(jù)技術(shù)的核心。大數(shù)據(jù)的價(jià)值表現(xiàn)為，對大規(guī)模數(shù)據(jù)資源的智能處理，從中獲取相關(guān)有價(jià)值的信息。若要逐步實(shí)現(xiàn)大數(shù)據(jù)的這個(gè)功能，就必須分析和挖掘數(shù)據(jù)。其中數(shù)據(jù)分析步驟的基礎(chǔ)就是采集、存儲(chǔ)于管理，從而經(jīng)過分析后得出結(jié)果，并應(yīng)用在相關(guān)的行業(yè)領(lǐng)域。由此，未來大數(shù)據(jù)技術(shù)的發(fā)展，數(shù)據(jù)分析也將是一個(gè)重要的發(fā)展趨勢。

3.4 實(shí)時(shí)性的數(shù)據(jù)處理方式

當(dāng)前人們生活中獲取信息速度快，對此為滿足生活需求，大數(shù)據(jù)系統(tǒng)的處理方式也應(yīng)不斷創(chuàng)新發(fā)展，傳統(tǒng)的批量化處理方式，對大數(shù)據(jù)處理存在局限性，通常適用于處理數(shù)據(jù)報(bào)告這種對頻率無需達(dá)到分鐘級別的場景，但是如若遇到要求高的場合，傳統(tǒng)的數(shù)據(jù)處理方式難以滿足需求。

同時(shí)，傳統(tǒng)的數(shù)據(jù)倉庫系統(tǒng)、鏈路挖掘等應(yīng)用，往往一小時(shí)或者天為單位計(jì)算數(shù)據(jù)處理時(shí)間。因?yàn)槲磥泶髷?shù)據(jù)發(fā)展主要強(qiáng)調(diào)時(shí)效性與實(shí)效性，所以未來數(shù)據(jù)處理也要突出這兩點(diǎn)。例如股票交易處理，數(shù)據(jù)處理時(shí)間要以分鐘，甚至用秒計(jì)算，這些行業(yè)對數(shù)據(jù)處理的要求很高。因而，未來發(fā)展中，實(shí)時(shí)性的數(shù)據(jù)處理也將成為一個(gè)發(fā)展趨勢，從而不斷促進(jìn)大數(shù)據(jù)技術(shù)的發(fā)展和創(chuàng)變。

3.5 基于云計(jì)算的數(shù)據(jù)分析平臺(tái)日益完善

未來隨著云技術(shù)的不斷發(fā)展和廣泛應(yīng)用，云計(jì)算也將為大數(shù)據(jù)技術(shù)發(fā)展提供一個(gè)廣闊的數(shù)據(jù)處理平臺(tái)和技術(shù)支持。未來在大數(shù)據(jù)技術(shù)中，分布式計(jì)算方法、存儲(chǔ)空間和計(jì)算資資源等，這些重要內(nèi)容都來源于云計(jì)算。同時(shí)，云計(jì)算豐富的IT資源成為大數(shù)據(jù)的技術(shù)支持。未來隨著云計(jì)算技術(shù)和平臺(tái)的日益完善與成熟，大數(shù)據(jù)技術(shù)也將得到快速提升與發(fā)展，處理數(shù)據(jù)的水平能力也得到顯著提高。

此外，未來大數(shù)據(jù)將與互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等技術(shù)領(lǐng)域相互交叉融合，產(chǎn)生更多融合不同行業(yè)、不同領(lǐng)域數(shù)據(jù)的綜合性應(yīng)用。

3.6 大數(shù)據(jù)安全與隱私

大數(shù)據(jù)的安全和隱私問題一直備受國內(nèi)外關(guān)注，未來這個(gè)問題依然是學(xué)術(shù)界和企業(yè)界的重點(diǎn)研究與探索的方向。大數(shù)據(jù)及相關(guān)核心資源，不僅關(guān)系到商業(yè)機(jī)密，而且甚至涉及國家主權(quán)，因此，如何保護(hù)大數(shù)據(jù)的安全及相關(guān)用戶的隱私，成為備受社會(huì)各界關(guān)注和亟待解決的社會(huì)問題。但是當(dāng)前大數(shù)據(jù)應(yīng)用所產(chǎn)生的隱私問題和體系自身存在的安全防范問題，尚未取得實(shí)質(zhì)性進(jìn)展和突破，由此，未來大數(shù)據(jù)的安全與隱私問題依然是一個(gè)重要的發(fā)展趨勢。

3.7 大數(shù)據(jù)技術(shù)課程體系建設(shè)和人才培養(yǎng)

隨著大數(shù)據(jù)技術(shù)的快速發(fā)展，為滿足相關(guān)行業(yè)對高水平大數(shù)據(jù)技術(shù)人才的需求，政府、高校及相關(guān)單位應(yīng)當(dāng)加快建立大數(shù)據(jù)技術(shù)人才教育培養(yǎng)體系，融合計(jì)算機(jī)、數(shù)學(xué)分析統(tǒng)計(jì)及人才培養(yǎng)等相關(guān)學(xué)科，培養(yǎng)滿足社會(huì)市場需求的大數(shù)據(jù)技術(shù)人才。

4 結(jié)語

綜上所述，隨著信息技術(shù)的快速發(fā)展，在人們的工作生活中，大數(shù)據(jù)技術(shù)占據(jù)著重要地位，對社會(huì)各個(gè)行業(yè)領(lǐng)域的發(fā)展發(fā)揮著重要作用。本文簡單分析大數(shù)據(jù)的概況、特點(diǎn)，指出在互聯(lián)網(wǎng)、云計(jì)算的發(fā)展推動(dòng)下，未來大數(shù)據(jù)將朝著更智能化、先進(jìn)化、廣泛化的方向發(fā)展，方便人們的生活、為科技發(fā)展提供準(zhǔn)確的數(shù)據(jù)決策，最終推動(dòng)社會(huì)經(jīng)濟(jì)的快速發(fā)展。

[參考文獻(xiàn)]

[1]郭麗娟.大數(shù)據(jù)的特點(diǎn)及未來發(fā)展趨勢[J].信息通信，2014（10）：195.

[2]郭帥.淺析大數(shù)據(jù)特點(diǎn)及發(fā)展趨勢[J].信息與電腦（理論版），2016（2）：25-26.

[3]錢志森.淺析大數(shù)據(jù)的應(yīng)用及發(fā)展前景[J].信息通信，2014（5）：168.

[4]劉瑞玲.淺談大數(shù)據(jù)應(yīng)用現(xiàn)狀及發(fā)展趨勢[J].科技展望，2017（15）：56-59.

[5]胡茹.淺談大數(shù)據(jù)應(yīng)用現(xiàn)狀及發(fā)展前景[J].科學(xué)技術(shù)創(chuàng)新，2014（32）：19.

[6]劉琳.淺談大數(shù)據(jù)技術(shù)發(fā)展趨勢[J].計(jì)算機(jī)光盤軟件與應(yīng)用，2014（24）：40-41.

[7]王臻，賀小培，張楠.大數(shù)據(jù)背景下公共信息服務(wù)供給與運(yùn)營機(jī)制的困局與對策—“智慧朝陽服務(wù)網(wǎng)”案例分析[J].電子政務(wù)，2014（2）：54-59.