耿冬旭

（北京理工大學珠海學院 廣東 519088）

0 引言

隨著計算機網絡用戶數(shù)量的增長，每天都產生上萬億 GB的數(shù)據(jù)，“大數(shù)據(jù)”時代已經到來，這是過去幾十年計算機領域沒有預見的，這對計算機信息處理技術帶來了新的挑戰(zhàn)。必須利用新的思路和理念來處理與日俱增的計算機數(shù)據(jù)。

1“大數(shù)據(jù)”時代的概述

1.1“大數(shù)據(jù)”的定義

所謂的“大數(shù)據(jù)”，顧名思義就是數(shù)據(jù)量巨大的意思，值得是信息的數(shù)據(jù)量巨大，以目前的計算機主流軟件都無法在短時間內實現(xiàn)對其進行獲取、處理、儲存、傳輸?shù)裙芾砉δ?，以便為客戶提供合理的信息技術服務。對于數(shù)據(jù)量巨大到什么程度，業(yè)內目前還沒有統(tǒng)一的標準，一般認為數(shù)據(jù)量在 10TB-1PB（1TB=1024GB，1PB=1024TB）以上。

1.2“大數(shù)據(jù)”的特點

“大數(shù)據(jù)”具有數(shù)據(jù)量大、快速化、復查、多樣化等特點。數(shù)據(jù)量大指的是“大數(shù)據(jù)”時代需要處理的計算機信息數(shù)據(jù)量特別大，而且與日俱增，以及從原來的TB數(shù)量級甚至發(fā)展到ZB的數(shù)量級（1ZB=10242PB），這些數(shù)據(jù)真可謂是海量的?？焖倩彩恰按髷?shù)據(jù)”的又一特點，現(xiàn)在網絡數(shù)據(jù)流有相當一部分是實時的、高速的，這就需要對這些數(shù)據(jù)流進行實時的、快速的、持續(xù)的處理，目前對這些數(shù)據(jù)流的進行處理的工具也在不斷的更新。復查指的是“大數(shù)據(jù)”計算機信息處理的難度非常大，信息處理技術有待于發(fā)展。多樣化指的是“大數(shù)據(jù)”時代下的數(shù)據(jù)類型十分的龐雜，數(shù)據(jù)主要包括文本、網頁、音頻、視頻、圖片等，其格式也是千變萬化，為計算機信息處理帶來了新的難度。

1.3“大數(shù)據(jù)”時代的影響

云計算技術和物聯(lián)網技術的產生給“大數(shù)據(jù)”時代的到來提供必要條件，是計算機行業(yè)又一次重大的革命性的轉變，并直接影響著廣大計算機用戶、企事業(yè)單位和政府機關的活動方式和它們之間的交流途徑。數(shù)據(jù)是“大數(shù)據(jù)”時代的最重要的核心內容，企業(yè)、消費者和網民之間的界限在“大數(shù)據(jù)”時代的到來后就顯得很模糊，沒有明確的界限，這對企業(yè)的運行、經營、管理和發(fā)展方向都產生了重要的影響，同時也帶來各種的挑戰(zhàn)和機遇。

2“大數(shù)據(jù)”時代的機遇和挑戰(zhàn)

2.1“大數(shù)據(jù)”時代的機遇

計算機網絡普及化程度高導致了“大數(shù)據(jù)”產生在各行各業(yè)中，雖然面對海量的數(shù)據(jù)的處理難度很大，但是還是可以通過新的理念和方法對其進行處理和分析，其結果具有非常重要意義的。例如：在企業(yè)的管理中進行“大數(shù)據(jù)”的信息處理可以提高企業(yè)管理的精細程度，提高職能部門的工作效率，從而減少了企業(yè)的開支，使企業(yè)更加具有競爭力；在教育領域應用“大數(shù)據(jù)”信息處理來統(tǒng)計廣大學生的興趣愛好、特長和優(yōu)缺點，就可以針對每個同學的不同情況進行因材施教，發(fā)展他們的長處；在商業(yè)競爭中應用“大數(shù)據(jù)”信息處理技術分析消費者的喜好、需求和熱門商品的賣點，可以有針對性的推出消費者需要和滿意的商品，這樣就可以提高商品的銷量，提高利潤率。目前，美國已經率先將“大數(shù)據(jù)”信息處理技術的發(fā)展上升到國家的戰(zhàn)略上，與2012年正式的啟動投資額為2儀美元的“大數(shù)據(jù)研究與發(fā)展計劃”。

2.2“大數(shù)據(jù)”時代信息處理技術的挑戰(zhàn)

“大數(shù)據(jù)”時代的到來給企業(yè)、商業(yè)、教育界以及國家戰(zhàn)略帶來重大機遇的同時，也為整個社會帶來了新的挑戰(zhàn)：

①數(shù)據(jù)量巨大的信息給數(shù)據(jù)的儲存技術、存儲空間、數(shù)據(jù)快速傳輸技術以及資源的損耗帶來了新的挑戰(zhàn)：計算機信息的數(shù)據(jù)量巨大就需要與之適應的儲存空間，同時對儲存技術也有一定的要求包括壓縮技術都有待于發(fā)展，“大數(shù)據(jù)”的信息傳輸所需要的時間也相應的長，這就需要對數(shù)據(jù)傳輸技術的發(fā)展。

②“大數(shù)據(jù)”時代對用戶、企業(yè)的隱私和計算機信息安全提出新的要求：“大數(shù)據(jù)”時代的數(shù)據(jù)流非常多，在線社交和網上購物等活動也越來越頻繁，這就給網絡黑客和詐騙分子提供了犯罪的平臺。而且只要應用“大數(shù)據(jù)”信息處理技術就很容易的對企業(yè)以及消費者的數(shù)據(jù)進行分析，這就導致企業(yè)商業(yè)機密的泄露和個人信息的暴露。這就需要加大網絡安全立法和加強對用戶和企業(yè)的信息的加密保護程度才能保證商業(yè)機密和用戶的個人信息不被不法分子獲取，同時廣大網民要提高安全意識，要對網絡上的事件和人物保持一定的警惕態(tài)度，保證自己不被詐騙。

③“大數(shù)據(jù)”時代給網絡運營商的硬件設備和對海量數(shù)據(jù)的信息處理能力帶來的挑戰(zhàn)：“大數(shù)據(jù)”的網絡傳輸速度取決于網絡運行商的硬件設備，網絡寬帶是傳輸速度瓶頸。同時對海量數(shù)據(jù)的處理能力也是一大挑戰(zhàn)。

④龐雜的數(shù)據(jù)流對有價值的數(shù)據(jù)擷取的挑戰(zhàn)：“大數(shù)據(jù)”有著價值高和密度低的特點，這就意味著真正有價值的數(shù)據(jù)往往在海量的信息中，要從中提取需要的、有價值的信息是個非常有難度工作，而且工作量也十分巨大，這就對信息處理技術提出新的要求。

3“大數(shù)據(jù)”時代的信息處理技術及其發(fā)展方向

3.1 信息擷取、加工和傳輸技術

通常進行計算機信息處理的首要工作就是進行數(shù)據(jù)的擷取，任何的信息處理手段都是建立在數(shù)據(jù)的擷取上。所謂的數(shù)據(jù)擷取就是對目標信息源進行實時的信息監(jiān)控，并將所需要的數(shù)據(jù)收集并儲存到預制的數(shù)據(jù)庫中，這樣就可以向各個軟件系統(tǒng)平臺提供信息輸入。信息處理的第二個步驟是信息的加工，就是將保存到數(shù)據(jù)庫中的數(shù)據(jù)進行分類和加工。最后將處理好的數(shù)據(jù)通過數(shù)據(jù)的傳輸技術傳送到需要該數(shù)據(jù)的用戶手中，從而實現(xiàn)了數(shù)據(jù)的傳遞。

3.2 信息的存儲技術

計算機信息存儲技術就是將通過一定手段擷取到的信息儲存到結構數(shù)據(jù)庫，當用戶在需要某些信息的時候可以通過一定的操作從數(shù)據(jù)庫中直接調出相應信息的技術手段。在“大數(shù)據(jù)”時代的數(shù)據(jù)有著數(shù)據(jù)信息巨大、信息變更速度快等特點，這就需要合理應用計算機信息存儲技術，以實現(xiàn)對大量數(shù)據(jù)的長時間、穩(wěn)定的存儲。

3.3 信息安全技術

為了適應“大數(shù)據(jù)”時代的信息安全特點，必須加快信息安全技術的發(fā)展，可以考慮從以下三個方面入手：（1）構建計算機信息安全體系。加大培養(yǎng)計算機信息安全人才是構建計算機信息安全體系的必要條件；（2）加快研發(fā)“大數(shù)據(jù)”信息安全技術產品。傳統(tǒng)的信息安全軟件等技術產品已經不能滿足“大數(shù)據(jù)”時代的數(shù)據(jù)安全特點，因此必須加快研發(fā)可靠的數(shù)據(jù)安全技術產品；（3）提高對重點數(shù)據(jù)的檢測程度。由于“大數(shù)據(jù)”的信息量非常大，對每個數(shù)據(jù)進行檢測明顯不現(xiàn)實，因此需要重點加強對重要數(shù)據(jù)的檢測。

3.4 信息處理技術的發(fā)展方向

由于計算機硬件的限制，計算機網絡存在著諸多的局限性，需要將目前的計算機網絡轉換為云計算機網絡，這是“大數(shù)據(jù)”時代計算機信息處理技術的發(fā)展趨勢。未來計算機網絡發(fā)展理念是將計算機硬件和網絡數(shù)據(jù)分開，從而實現(xiàn)將目前的云計算轉化為云計算機網絡。在未來計算機會與信息網絡形成“大數(shù)據(jù)”網絡系統(tǒng)，兩者不可分離，而計算機信息處理技術的發(fā)展不在依靠某個單一的公司研究、開發(fā)，而是通過“大數(shù)據(jù)”網絡系統(tǒng)由諸多公司聯(lián)合研究開發(fā)。

[1]馮騫.大數(shù)據(jù)時代的信息處理技術[J].信息通信，2013，08：155.

[2]何文娜.大數(shù)據(jù)時代基于物聯(lián)網和云計算的地質信息化研究[D].吉林大學，2013.

[3]張允壯，劉戟鋒.大數(shù)據(jù)時代信息安全的機遇與挑戰(zhàn)：以公開信息情報為例[J].國防科技，2013，02：6-9.