張小龍 黃傳彬 王劍俠

【摘要】? ? 大數(shù)據(jù)技術(shù)和5G通信網(wǎng)絡(luò)技術(shù)是兩個相對獨立但息息相關(guān)的模塊，是計算機和互聯(lián)網(wǎng)發(fā)展至今的先進產(chǎn)物，5G通信網(wǎng)絡(luò)技術(shù)有著更大容量、更廣連接、更高速率、更低時延的特點，配合大數(shù)據(jù)技術(shù)用來收集、存儲、處理5G通信網(wǎng)絡(luò)技術(shù)中所產(chǎn)生的海量數(shù)據(jù)，挖掘數(shù)據(jù)背后的價值，根據(jù)數(shù)據(jù)反應(yīng)進行更加合理的資源調(diào)控，可以說大數(shù)據(jù)技術(shù)使得5G通信網(wǎng)絡(luò)技術(shù)數(shù)據(jù)“產(chǎn)能”大大增強，普及和應(yīng)用更加科學(xué)，而5G通信網(wǎng)絡(luò)技術(shù)也使得大數(shù)據(jù)發(fā)揮出其更大的價值。本文首先簡單介紹大數(shù)據(jù)技術(shù)和5G通信網(wǎng)絡(luò)技術(shù)，其次圍繞大數(shù)據(jù)技術(shù)在5G通信網(wǎng)絡(luò)中的數(shù)據(jù)收集、存儲和處理等應(yīng)用模塊展開詳細(xì)的闡述，以供參考。

【關(guān)鍵詞】? ? 大數(shù)據(jù)技術(shù)? ? 5G通信網(wǎng)絡(luò)技術(shù)? ? 應(yīng)用探析

一、大數(shù)據(jù)技術(shù)介紹

1.1大數(shù)據(jù)技術(shù)

社會已經(jīng)正式進入了“大數(shù)據(jù)”時代，社會資源和現(xiàn)象都被網(wǎng)絡(luò)化和數(shù)據(jù)化改造并呈現(xiàn)，大數(shù)據(jù)技術(shù)就是對這些海量數(shù)據(jù)的收集、存儲、處理和運用，深度挖掘大數(shù)據(jù)價值，當(dāng)然，這里面難免會涉及“云計算”的概念，大數(shù)據(jù)和云計算就好比一枚硬幣的正反面，有著密不可分的關(guān)系，這里不再過多深究。

1.2大數(shù)據(jù)的“4V”特征

1.2.1 Volume（容量）

大數(shù)據(jù)的容量非常之大，已經(jīng)從TB升級到了PB（1024TB=1PB），未來必然會躍升到EB（1024PB=1EB）或ZB （1024EB=1ZB）的級別。

1.2.2 Variety（多樣）

大數(shù)據(jù)的來源是多樣的，包括結(jié)構(gòu)性數(shù)據(jù)、非結(jié)構(gòu)性數(shù)據(jù)、源數(shù)據(jù)和處理數(shù)據(jù)等，有音頻源數(shù)據(jù)，有視頻源數(shù)據(jù)，有文字源數(shù)據(jù)等，小到人們生活衣食住行，大到航天航空等都會被數(shù)據(jù)化改造。

1.2.3 Value（價值）

這里的價值指兩方面，一方面從大范圍講，大數(shù)據(jù)中蘊含有不少的價值，挖掘大數(shù)據(jù)能夠創(chuàng)造更大的價值，另一方面從單個來講，數(shù)據(jù)太過海量，單個數(shù)據(jù)的價值密度卻比較低，如何從大數(shù)據(jù)中挖掘有效、有價值數(shù)據(jù)成為主要探究方向。

1.2.4 Velocity（速度）

大數(shù)據(jù)的處理速度要求較高，需要有極強的大數(shù)據(jù)處理速度，最快響應(yīng)，最快處理，實時分析數(shù)據(jù)。

二、5G通信網(wǎng)絡(luò)技術(shù)介紹

2.1 5G通信網(wǎng)絡(luò)技術(shù)

5G通信技術(shù)是第五代移動通信技術(shù)的簡稱，具有更大容量、更高速率、更廣連接、更低時延等特點，在5G通信網(wǎng)絡(luò)技術(shù)加持下，物聯(lián)網(wǎng)將進入全面發(fā)展時期，同時5G通信技術(shù)也會為人工智能、區(qū)塊鏈、大數(shù)據(jù)等技術(shù)提供技術(shù)支持，再往大范圍說，5G通信技術(shù)將體現(xiàn)在生活的方方面面。

2.2 5G通信網(wǎng)絡(luò)技術(shù)特點

對于5G通信網(wǎng)絡(luò)技術(shù)，并不能簡單的將其看做4G通信技術(shù)的優(yōu)化，其是一次翻天覆地的革新。

2.2.1更大容量

大容量主要體現(xiàn)在物聯(lián)網(wǎng)方面，雖然以前喊出“萬物互聯(lián)”的口號，但以前的通信網(wǎng)絡(luò)技術(shù)還不足以支持物聯(lián)網(wǎng)發(fā)展，物聯(lián)網(wǎng)節(jié)點太多、功耗較強，5G通信網(wǎng)絡(luò)技術(shù)大容量、低功耗的特點，優(yōu)化物理層技術(shù)，降低了使用帶寬，降低終端發(fā)射功率，為物聯(lián)網(wǎng)提供技術(shù)支持。

2.2.2更快速率

其峰值理論傳輸速度可達每秒數(shù)十Gb，這比4G網(wǎng)絡(luò)的傳輸速度快數(shù)百倍，極強用戶體驗，為加強數(shù)據(jù)的處理速率奠定基礎(chǔ)。

2.2.3更廣連接

5G通信網(wǎng)絡(luò)技術(shù)支持多終端連接，實現(xiàn)多人協(xié)同，比如集體會議，比如上網(wǎng)課等，在更廣連接作用下，未來會有更好的發(fā)展。

2.2.4更低時延

5G通信技術(shù)的低時延可以作用實時性要求比較高的應(yīng)用如游戲，視頻，數(shù)據(jù)電話等方面，作用最強的在于遠程操控領(lǐng)域和無人自動化領(lǐng)域，比如說遠程醫(yī)療，如果網(wǎng)絡(luò)延遲較大，遠程醫(yī)療命令下達會有延時性，會影響手術(shù)效果，比如汽車自動化駕駛，如果延時性較大，會造成意外傷害，這些都將在5G通信網(wǎng)絡(luò)技術(shù)加持下得到解決。

三、大數(shù)據(jù)技術(shù)在5G通信網(wǎng)絡(luò)中的作用

首先來看5G通信網(wǎng)絡(luò)技術(shù)對大數(shù)據(jù)技術(shù)的作用，5G通信網(wǎng)絡(luò)技術(shù)是實現(xiàn)大數(shù)據(jù)技術(shù)的基礎(chǔ)，依托于5G通信網(wǎng)絡(luò)，大數(shù)據(jù)的數(shù)據(jù)收集、存儲、處理、索引、查詢算法，流數(shù)據(jù)分析算法等都會變得更快更好，也為機器學(xué)習(xí)奠定了基礎(chǔ)，可以說隨著5G通信網(wǎng)絡(luò)的應(yīng)用，對大數(shù)據(jù)技術(shù)是很好的補充和強化。

其次來看大數(shù)據(jù)對5G通信網(wǎng)絡(luò)的作用，相當(dāng)于大腦的作用，主要作用在兩個方面，一個在于數(shù)據(jù)的產(chǎn)出，隨著5G通信網(wǎng)絡(luò)的架構(gòu)，各行各業(yè)都在逐步和大數(shù)據(jù)接駁，所產(chǎn)出的大數(shù)據(jù)是海量的，大數(shù)據(jù)技術(shù)就是對這些視頻、音頻、文字等類型的海量數(shù)據(jù)進行收集，相當(dāng)于虛擬聽覺系統(tǒng)、視覺系統(tǒng)、感覺系統(tǒng)、運動系統(tǒng)，其次在于數(shù)據(jù)的應(yīng)用，隨著5G通信網(wǎng)絡(luò)技術(shù)大規(guī)模普及和應(yīng)用，大數(shù)據(jù)挖掘數(shù)據(jù)的價值，再創(chuàng)造出更大的價值，給用戶提供良好的服務(wù)、完善5G通信網(wǎng)絡(luò)架構(gòu)等。

四、大數(shù)據(jù)技術(shù)在5G通信網(wǎng)絡(luò)中的應(yīng)用

4.1大數(shù)據(jù)的收集和篩選

數(shù)據(jù)的收集指的是ETL理念：將數(shù)據(jù)從來源端經(jīng)過抽取（extract）、轉(zhuǎn)換（transform）、加載（load）至目的端，對5G通信網(wǎng)絡(luò)中所產(chǎn)生的各類型數(shù)據(jù)，收集數(shù)據(jù)的主要工具有各類傳感器，如音頻采集器、視頻采集器等，同時以一個關(guān)系型數(shù)據(jù)庫來保存，例如MySQL ，Oracle ，Postgres等，而數(shù)據(jù)的提取工具則包括ETL工具或Sqoop等。顧名思義，對數(shù)據(jù)源的數(shù)據(jù)進行收集，并根據(jù)覆蓋的范圍、設(shè)置問題、選項的描述、背景設(shè)置等進行簡單的過濾和篩選，將繁復(fù)的數(shù)據(jù)初步歸納整理，明確數(shù)據(jù)的結(jié)構(gòu)以及其他特點。

4.2大數(shù)據(jù)的存儲

數(shù)據(jù)存儲一般會存儲在云端數(shù)據(jù)庫中，比如阿里云、AWS（亞馬遜）、AZURE（微軟）、DINDINCLOUD（丁丁云）、KTC、GOOGLE CLOUD（谷歌云）等，一些框架結(jié)構(gòu)如同Hadoop也具有簡單的存儲功能，根據(jù)不同的數(shù)據(jù)類型構(gòu)建不同類型的數(shù)據(jù)庫，包括關(guān)系型數(shù)據(jù)庫、非關(guān)系數(shù)據(jù)庫、圖數(shù)據(jù)庫和內(nèi)存數(shù)據(jù)庫等，方便對大數(shù)據(jù)的轉(zhuǎn)移、存儲和計算，在數(shù)據(jù)的存儲中也具有進行簡單的分類功能。

4.3大數(shù)據(jù)的計算

數(shù)據(jù)的計算涉及到云計算概念，云計算和大數(shù)據(jù)是緊密相關(guān)的兩種技術(shù)，各家高端互聯(lián)網(wǎng)企業(yè)都在致力于開發(fā)自己的大數(shù)據(jù)和云計算系統(tǒng)，是集合分布式計算、效用計算、負(fù)載均衡、并行計算、網(wǎng)絡(luò)存儲、熱備份冗雜和虛擬化等多種計算機技術(shù)在內(nèi)的混合技術(shù)，用來對收集并存儲的海量數(shù)據(jù)進行計算處理，歸納分類并分析，深度發(fā)掘大數(shù)據(jù)中價值，進而創(chuàng)造出更大的價值。除了優(yōu)秀互聯(lián)網(wǎng)大廠的云計算外，一些開源框架如Hadoop、Mapreduce、Tensorflow（深度學(xué)習(xí)框架）、Spark、Pentaho BI等也可承擔(dān)大數(shù)據(jù)計算處理的作用，其中Hadoop開源框架是非常優(yōu)秀、非常實用的開源框架，被全球幾大IT公司用作其云計算環(huán)境中的重要基礎(chǔ)軟件。

4.4大數(shù)據(jù)的可視化呈現(xiàn)

通過對數(shù)據(jù)一系列的收集、存儲和計算，可以對數(shù)據(jù)進行基于圖表或模型的可量化分析和可視化處理，篩選出有效信息，并進行直觀而具體的分類，使得數(shù)據(jù)真正具有“可視化”的特點，能夠更好的被相關(guān)工作者利用，相關(guān)工作者觀看、使用、調(diào)度起來都會非常方便，優(yōu)秀的大數(shù)據(jù)處理系統(tǒng)能夠在短短數(shù)秒時間內(nèi)處理數(shù)以萬計的數(shù)據(jù)。

4.5大數(shù)據(jù)的應(yīng)用

在挖掘出數(shù)據(jù)中的價值之后，對數(shù)據(jù)的應(yīng)用也至關(guān)重要，讓大數(shù)據(jù)以圖表或模型等形式反映出來，對多維數(shù)據(jù)進行了分類、加工、處理，分析師再結(jié)合目標(biāo)人群的需求，從而利用5G通信網(wǎng)絡(luò)進行有針對性的服務(wù)，切實提高5G通信網(wǎng)絡(luò)的服務(wù)質(zhì)量和信息數(shù)據(jù)增值價值。同時，大數(shù)據(jù)的應(yīng)用，基于用戶的行為特征來說，很難對應(yīng)數(shù)據(jù)和序列，通過智能運營，也會反作用于5G通信網(wǎng)絡(luò)的架構(gòu)，使得5G通信網(wǎng)絡(luò)符合用戶的行為習(xí)慣和喜好特點。

4.6大數(shù)據(jù)的安全

隨著“大數(shù)據(jù)”的日益發(fā)展，大數(shù)據(jù)的安全性又成為人們熱議的話題，人們的日常行為被數(shù)據(jù)化改造并收據(jù)利用，那么是否存在泄漏問題呢？如果用戶的興趣、行為、情感等被泄露，那么還是否愿意自身數(shù)據(jù)被收集呢？答案自然是否定的，因此大數(shù)據(jù)技術(shù)中還有至關(guān)重要的模塊就是大數(shù)據(jù)的安全保護，國家在2019年5月13日發(fā)布等保2.0，可以以此來分析對大數(shù)據(jù)的安全保護，需要明確通信網(wǎng)絡(luò)、區(qū)域邊界、計算環(huán)境等，對大數(shù)據(jù)的安全保護有技術(shù)要求和管理要求兩方面的考慮。

五、結(jié)束語

綜上所述，身處大數(shù)據(jù)時代和5G通信網(wǎng)絡(luò)時代，大數(shù)據(jù)和5G通信網(wǎng)絡(luò)是相輔相成的兩個存在，5G通信網(wǎng)絡(luò)給大數(shù)據(jù)提供基礎(chǔ)的技術(shù)基礎(chǔ)，而大數(shù)據(jù)也讓5G通信網(wǎng)絡(luò)數(shù)據(jù)產(chǎn)出更有效用，數(shù)據(jù)應(yīng)用更有價值，上述分析了大數(shù)據(jù)在5G通信網(wǎng)絡(luò)中應(yīng)用的數(shù)據(jù)采集、存儲、計算、可視化、應(yīng)用、安全管理六個方面，希望能有參考之用。

參? 考? 文? 獻

[1]楊洪平.大數(shù)據(jù)技術(shù)在5G通信網(wǎng)絡(luò)中的應(yīng)用研究[J].江西通信科技， 2020，No.152（04）：14-16+19.

[2]姚永波，張振杰.大數(shù)據(jù)技術(shù)在5G通信網(wǎng)絡(luò)中的應(yīng)用[J].裝備維修技術(shù)， 2020，No.176（02）：71-71.

[3]周國亮.淺析大數(shù)據(jù)技術(shù)在5G通信網(wǎng)絡(luò)中的可行性應(yīng)用[J].科技視界，2019，000（032）：115-116，120.