【摘要】? ? 移動(dòng)通信網(wǎng)絡(luò)技術(shù)日新月異,為社會(huì)生活和經(jīng)濟(jì)發(fā)展做出了獨(dú)特貢獻(xiàn)。對(duì)移動(dòng)通信網(wǎng)絡(luò)中大數(shù)據(jù)處理的關(guān)鍵技術(shù)進(jìn)行深入研究,有助于提高大數(shù)據(jù)處理的質(zhì)量和效率,進(jìn)一步提升移動(dòng)通信網(wǎng)絡(luò)應(yīng)用效果和價(jià)值。本文從移動(dòng)通信網(wǎng)絡(luò)大數(shù)據(jù)發(fā)展的實(shí)際出發(fā),對(duì)大數(shù)據(jù)處理中存在的不足進(jìn)行分析,結(jié)合大數(shù)據(jù)處理的關(guān)鍵技術(shù)優(yōu)勢(shì),提出了優(yōu)化改進(jìn)的對(duì)策和建議。
【關(guān)鍵詞】? ? 移動(dòng)通信網(wǎng)絡(luò)? ? 大數(shù)據(jù)處理? ? 關(guān)鍵技術(shù)
引言:
進(jìn)入新世紀(jì)以來,國(guó)內(nèi)移動(dòng)通信網(wǎng)絡(luò)在信息技術(shù)、互聯(lián)網(wǎng)技術(shù)等先進(jìn)技術(shù)成果支撐下,迎來了高速發(fā)展的新階段。目前,國(guó)內(nèi)大部分城市邁入5G時(shí)代,移動(dòng)通信網(wǎng)絡(luò)用戶數(shù)量已經(jīng)位居世界首位,網(wǎng)絡(luò)規(guī)模迅速擴(kuò)張,網(wǎng)絡(luò)容量需求也空前增大,這對(duì)移動(dòng)通信網(wǎng)絡(luò)的運(yùn)行質(zhì)量和效率帶來新挑戰(zhàn),必須要不斷優(yōu)化移動(dòng)通信網(wǎng)絡(luò)的大數(shù)據(jù)處理技術(shù)水平,才能滿足社會(huì)發(fā)展需要和人們對(duì)移動(dòng)網(wǎng)絡(luò)使用需求。本文從當(dāng)今移動(dòng)通信網(wǎng)絡(luò)中大數(shù)據(jù)發(fā)展的實(shí)際出發(fā),對(duì)大數(shù)據(jù)處理中存在的不足進(jìn)行分析,結(jié)合大數(shù)據(jù)處理的關(guān)鍵技術(shù)優(yōu)勢(shì),提出了優(yōu)化改進(jìn)大數(shù)據(jù)處理技術(shù)效能的對(duì)策和建議。
一、大數(shù)據(jù)處理技術(shù)
1.1大數(shù)據(jù)發(fā)展概述
大數(shù)據(jù)相比傳統(tǒng)數(shù)據(jù)而言,是在網(wǎng)絡(luò)快速發(fā)展背景下誕生的新概念。大數(shù)據(jù)的產(chǎn)生和傳統(tǒng)數(shù)據(jù)相比有著很大不同,主要是數(shù)據(jù)庫(kù)作為數(shù)據(jù)管理方式后,人類數(shù)據(jù)產(chǎn)生不再受到時(shí)間、地點(diǎn)的局限,產(chǎn)生方式發(fā)生重大變化,從而產(chǎn)生了大數(shù)據(jù)。大數(shù)據(jù)的發(fā)展歷經(jīng)三個(gè)階段。
第一是被動(dòng)產(chǎn)生階段。數(shù)據(jù)庫(kù)技術(shù)的誕生,讓人類對(duì)數(shù)據(jù)的價(jià)值有了更深認(rèn)識(shí),帶動(dòng)著數(shù)據(jù)數(shù)量實(shí)現(xiàn)第一次飛躍。在這個(gè)階段,政府、企業(yè)的應(yīng)用數(shù)據(jù),如超市營(yíng)銷數(shù)據(jù)、銀行服務(wù)、教育數(shù)據(jù)、股市交易數(shù)據(jù)等是數(shù)據(jù)庫(kù)主要組成部分,這些數(shù)據(jù)屬于被動(dòng)產(chǎn)生數(shù)據(jù),是因?yàn)橐恍┙?jīng)濟(jì)運(yùn)營(yíng)活動(dòng)而產(chǎn)生的數(shù)據(jù)。
第二是主動(dòng)產(chǎn)生階段?;ヂ?lián)網(wǎng)的出現(xiàn)和普及,是推動(dòng)大數(shù)據(jù)的數(shù)量實(shí)現(xiàn)第二次飛躍的主要原因。在此階段的互聯(lián)網(wǎng)上,用戶在網(wǎng)絡(luò)上利用WEB,微博、博客、QQ等進(jìn)行數(shù)據(jù)內(nèi)容的原創(chuàng),這些數(shù)據(jù)都是用戶自愿自發(fā)生產(chǎn)的數(shù)據(jù)。在互聯(lián)網(wǎng)普及率提高、網(wǎng)絡(luò)提高,移動(dòng)智能設(shè)備走進(jìn)千家萬(wàn)戶之后,網(wǎng)絡(luò)上人們可以自由發(fā)布意見、建議等各類數(shù)據(jù)信息,從此開始網(wǎng)絡(luò)數(shù)據(jù)進(jìn)入到主動(dòng)產(chǎn)生的階段。
第三階段是自動(dòng)產(chǎn)生階段。進(jìn)入網(wǎng)絡(luò)化數(shù)字時(shí)代后,人類社會(huì)數(shù)據(jù)量的第三次飛躍,讓大數(shù)據(jù)自動(dòng)產(chǎn)生并規(guī)模成幾何倍增長(zhǎng)。在移動(dòng)通信網(wǎng)絡(luò)技術(shù)發(fā)展和物聯(lián)網(wǎng)加速推進(jìn)背景下,人工智能感知系統(tǒng)進(jìn)入到社會(huì)生活,大量傳感器成為采集世界上每個(gè)角落不同對(duì)象的數(shù)據(jù)來源。數(shù)據(jù)自動(dòng)產(chǎn)生帶來大數(shù)據(jù)從量變發(fā)生質(zhì)變,人類社會(huì)進(jìn)入到大數(shù)據(jù)數(shù)字化時(shí)代。
1.2大數(shù)據(jù)優(yōu)勢(shì)特點(diǎn)
大數(shù)據(jù)不僅是指數(shù)據(jù)的數(shù)量規(guī)模,也指數(shù)據(jù)的傳播速度、數(shù)據(jù)類型、數(shù)據(jù)密度、數(shù)據(jù)價(jià)值等數(shù)據(jù)內(nèi)涵方面的內(nèi)容和傳統(tǒng)數(shù)據(jù)相比發(fā)生了巨大變化。在互聯(lián)網(wǎng)信息技術(shù)支撐下,數(shù)據(jù)的產(chǎn)生不再受到時(shí)間、空間和地點(diǎn)限制,數(shù)據(jù)管理全面進(jìn)入數(shù)據(jù)庫(kù)時(shí)代,大數(shù)據(jù)的重要價(jià)值也越來越為重視和認(rèn)可。大數(shù)據(jù)的價(jià)值鏈主要體現(xiàn)在四個(gè)階段:一是數(shù)據(jù)產(chǎn)生階段。大數(shù)據(jù)的產(chǎn)生來自于互聯(lián)網(wǎng)用戶層、設(shè)備層和運(yùn)維層自動(dòng)生成的市場(chǎng)、管理和維護(hù)方面的數(shù)據(jù)信息。用戶層的用戶利用移動(dòng)網(wǎng)絡(luò)在線上進(jìn)行網(wǎng)絡(luò)信息查詢、信息發(fā)布、信息瀏覽和網(wǎng)絡(luò)設(shè)計(jì)行為等,把現(xiàn)實(shí)生活中很多信息應(yīng)用搬到網(wǎng)絡(luò)上,也在網(wǎng)絡(luò)留下了大量使用數(shù)據(jù)。這些數(shù)據(jù)經(jīng)過數(shù)據(jù)挖掘技術(shù)能實(shí)現(xiàn)對(duì)現(xiàn)實(shí)用戶所有上網(wǎng)痕跡的查詢記錄。二是數(shù)據(jù)獲取階段。網(wǎng)絡(luò)每時(shí)每刻都在產(chǎn)生海量數(shù)據(jù),這些數(shù)據(jù)的類型多,呈現(xiàn)零散性和不相關(guān)性,導(dǎo)致網(wǎng)絡(luò)數(shù)據(jù)獲取成本不斷增加,對(duì)大數(shù)據(jù)分析變得很困難。移動(dòng)通信企業(yè)為獲得具有價(jià)值的數(shù)據(jù),將數(shù)據(jù)通過采集、預(yù)處理和傳輸?shù)确椒ㄟM(jìn)行價(jià)值挖掘。利用DPI數(shù)據(jù)采集器進(jìn)行數(shù)據(jù)采集后;采用預(yù)處理技術(shù)分析數(shù)據(jù)質(zhì)量和密度,為后續(xù)數(shù)據(jù)分析提供資料;再利用IP骨干網(wǎng)將大數(shù)據(jù)傳輸保存到數(shù)據(jù)中心,對(duì)大數(shù)據(jù)進(jìn)行統(tǒng)一深入的規(guī)劃處理。三是數(shù)據(jù)儲(chǔ)備階段。我國(guó)對(duì)大數(shù)據(jù)的儲(chǔ)備能力還難以和大數(shù)據(jù)快速發(fā)展的需要相匹配,移動(dòng)通信企業(yè)雖然進(jìn)行數(shù)據(jù)儲(chǔ)備,但數(shù)據(jù)儲(chǔ)備周期比較短,能有效處理的用戶數(shù)據(jù)信息量有限,數(shù)據(jù)存儲(chǔ)方式還存在一些不合理不完善之處,數(shù)據(jù)存儲(chǔ)達(dá)不到使用需要。四是數(shù)據(jù)分析階段。該階段是通過對(duì)數(shù)據(jù)的可視化研究,采用整體規(guī)范的一體化措施,深入挖掘移動(dòng)通信網(wǎng)絡(luò)大數(shù)據(jù)價(jià)值。數(shù)據(jù)分析是體現(xiàn)數(shù)據(jù)價(jià)值最重要階段,是目前國(guó)內(nèi)信息化建設(shè)最為關(guān)注的內(nèi)容。
二、移動(dòng)通信網(wǎng)絡(luò)應(yīng)用大數(shù)據(jù)處理技術(shù)現(xiàn)狀分析
國(guó)內(nèi)移動(dòng)通信網(wǎng)絡(luò)在進(jìn)入新世紀(jì)以來,經(jīng)歷了從2G到5G的快速發(fā)展。目前已經(jīng)形成交換網(wǎng)絡(luò)和無線網(wǎng)絡(luò)為主的移動(dòng)通信網(wǎng)絡(luò)。無線移動(dòng)通信系統(tǒng)主要是由交換網(wǎng)絡(luò)、基站、操作中心和移動(dòng)智能設(shè)備等子系統(tǒng)組成,具有比交換網(wǎng)絡(luò)更加復(fù)雜的傳播環(huán)境,也讓網(wǎng)絡(luò)優(yōu)化更加困難,大數(shù)據(jù)處理技術(shù)的應(yīng)用存在很多新挑戰(zhàn)。
2.1移動(dòng)通信網(wǎng)絡(luò)需要處理的數(shù)據(jù)量太過龐大
國(guó)內(nèi)移動(dòng)通信網(wǎng)絡(luò)從1G發(fā)展到5G所經(jīng)歷的時(shí)間并不長(zhǎng)。上個(gè)世紀(jì)第一代無線通信系統(tǒng)的誕生在上世紀(jì)80年代,至今只經(jīng)過了30年的發(fā)展歷史。隨著互聯(lián)網(wǎng)讓人們獲取信息更加便捷,人們從電腦等設(shè)備上獲取信息發(fā)展到利用移動(dòng)智能設(shè)備如手機(jī)、平板電腦上獲取信息也快速成為現(xiàn)實(shí)。在移動(dòng)通信網(wǎng)絡(luò)技術(shù)從語(yǔ)音技術(shù)到大數(shù)據(jù),從模擬信號(hào)到數(shù)字信號(hào),從網(wǎng)絡(luò)寬帶到網(wǎng)絡(luò)超寬帶;移動(dòng)通信設(shè)備也越來越迷你,越來越智能?,F(xiàn)代社會(huì)中,人們的生活方式已經(jīng)離不開移動(dòng)通信網(wǎng)絡(luò),打電話發(fā)消息只是基礎(chǔ)功能,上網(wǎng)、看視頻、開直播已經(jīng)深入到生活工作方法面面。中國(guó)抓住了移動(dòng)通信網(wǎng)絡(luò)的發(fā)展契機(jī),實(shí)現(xiàn)了從網(wǎng)絡(luò)系統(tǒng)到移動(dòng)終端的全面突破,在世界網(wǎng)絡(luò)通信行業(yè)占據(jù)了領(lǐng)先地位。移動(dòng)通信網(wǎng)絡(luò)的快速發(fā)展和全面普及,讓網(wǎng)絡(luò)覆蓋率進(jìn)一步提高,用戶數(shù)量和上網(wǎng)時(shí)間增加迅速。龐大的用戶群體產(chǎn)生的數(shù)據(jù)量也非常龐大,這導(dǎo)致移動(dòng)通信網(wǎng)絡(luò)的數(shù)據(jù)分析、數(shù)據(jù)處理等都遇到了開展不順暢等新問題和新挑戰(zhàn)。
2.2移動(dòng)通信網(wǎng)絡(luò)需要持續(xù)投入的大量建設(shè)資金
移動(dòng)通信網(wǎng)絡(luò)建設(shè)是一項(xiàng)耗費(fèi)人力財(cái)力物力驚人的工作。移動(dòng)通信網(wǎng)絡(luò)覆蓋能力的提升是典型的“一分錢一分貨”,來不得半點(diǎn)馬虎。在每一次網(wǎng)絡(luò)的升級(jí)優(yōu)化中,都需要新建大量新的基站,以實(shí)現(xiàn)網(wǎng)絡(luò)的深度覆蓋,滿足社會(huì)不同場(chǎng)景下的通信需求。國(guó)家將移動(dòng)通信網(wǎng)絡(luò)建設(shè)納入到國(guó)家基礎(chǔ)建設(shè)項(xiàng)目領(lǐng)域,給予了大量的支持,國(guó)內(nèi)的移動(dòng)業(yè)務(wù)運(yùn)營(yíng)商也在光纖覆蓋家庭住戶、光纖提速降費(fèi)等方面進(jìn)行了大量的探索實(shí)踐。在方便人們使用網(wǎng)絡(luò)的同時(shí),也面臨著不同區(qū)域移動(dòng)通信網(wǎng)絡(luò)數(shù)據(jù)性質(zhì)不同,改造難度大、周期長(zhǎng),需要大量的經(jīng)濟(jì)投入。在建立移動(dòng)通信數(shù)據(jù)整合平臺(tái)上,需要高昂的資金才能解決數(shù)據(jù)接入、數(shù)據(jù)覆蓋、數(shù)據(jù)挖掘和數(shù)據(jù)分析等方面的難題,可以說資金的長(zhǎng)期巨大投入已經(jīng)成為移動(dòng)通訊網(wǎng)絡(luò)優(yōu)化的難點(diǎn)之一。
2.3大數(shù)據(jù)云端安全問題
大數(shù)據(jù)規(guī)模幾何倍的增長(zhǎng),所帶來的大數(shù)據(jù)網(wǎng)絡(luò)安全問題也更加突出。在移動(dòng)通信網(wǎng)絡(luò)優(yōu)化中,大數(shù)據(jù)的云端存儲(chǔ)帶來的安全隱患、安全風(fēng)險(xiǎn)比較突出。利用先進(jìn)的云存儲(chǔ)技術(shù),能通過把大數(shù)據(jù)存儲(chǔ)在第三方托管的虛擬服務(wù)器上來滿足不斷增加的用戶對(duì)數(shù)據(jù)存儲(chǔ)的需要。目前數(shù)據(jù)存儲(chǔ)企業(yè)建立大型的數(shù)據(jù)中心,移動(dòng)通信企業(yè)通過購(gòu)買或者是租賃存儲(chǔ)服務(wù)器來進(jìn)行數(shù)據(jù)存儲(chǔ)的托管。雖然線上在線存儲(chǔ)的模式,方便了用戶自行使用和查詢存儲(chǔ)資源文件,但是移動(dòng)通信數(shù)據(jù)資源往往被分散在不同的服務(wù)器主機(jī),雖然是同一個(gè)數(shù)據(jù)平臺(tái),簡(jiǎn)化了數(shù)據(jù)收集采集過程,讓數(shù)據(jù)分析和收集效率提高,但是龐大數(shù)據(jù)的傳輸會(huì)造成數(shù)據(jù)損壞、丟失等問題,造成了大數(shù)據(jù)云端的不安全、不穩(wěn)定問題。
三、移動(dòng)通信網(wǎng)絡(luò)應(yīng)用大數(shù)據(jù)處理的關(guān)鍵技術(shù)
3.1大數(shù)據(jù)清洗提取技術(shù)
移動(dòng)通信網(wǎng)絡(luò)在數(shù)據(jù)采集中,受到數(shù)據(jù)采集設(shè)備、采集環(huán)境等多種因素影響,加上現(xiàn)在數(shù)據(jù)采集大部分處于無人監(jiān)控自動(dòng)采集狀態(tài),往往會(huì)存現(xiàn)采集數(shù)據(jù)出現(xiàn)偏差,和移動(dòng)通信網(wǎng)絡(luò)實(shí)際應(yīng)用情況不一致等情況,導(dǎo)致原始數(shù)據(jù)的質(zhì)量下降。針對(duì)這種問題,就需要利用大數(shù)據(jù)清洗和提取技術(shù),對(duì)移動(dòng)通信網(wǎng)絡(luò)自動(dòng)采集的數(shù)據(jù)進(jìn)行清洗處理,刪除原始數(shù)據(jù)中存在的冗余和錯(cuò)誤數(shù)據(jù),從而提高數(shù)據(jù)后期利用率,提高大數(shù)據(jù)分析處理效果。大數(shù)據(jù)清洗提取技術(shù)目前受到數(shù)據(jù)處理的效率影響,并不能實(shí)現(xiàn)對(duì)所有原始數(shù)據(jù)的清洗提取。因此移動(dòng)通信企業(yè)要加強(qiáng)對(duì)清洗提取技術(shù)的應(yīng)用研究,提高清洗提取數(shù)據(jù)的可靠性、有效性和處理效率,促進(jìn)大數(shù)據(jù)清洗處理技術(shù)水平的提升。
3.2大數(shù)據(jù)集成技術(shù)
移動(dòng)通信網(wǎng)絡(luò)大數(shù)據(jù)來自于不同的數(shù)據(jù)終端,數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)組成各有差異,在對(duì)大數(shù)據(jù)進(jìn)行清洗、處理和提取、融合的過程中,需要利用大數(shù)據(jù)集成技術(shù),才能實(shí)現(xiàn)對(duì)大數(shù)據(jù)的高質(zhì)高效處理,目前大數(shù)據(jù)集成技術(shù)的效率不是很理想,這主要是不同數(shù)據(jù)終端存在的數(shù)據(jù)沖突、數(shù)據(jù)關(guān)聯(lián)等技術(shù)問題的處理效果不是很好。要加強(qiáng)對(duì)大數(shù)據(jù)集中處理中數(shù)據(jù)的提取和融合的研究,及時(shí)解決存在的數(shù)據(jù)沖突問題,才能促進(jìn)大數(shù)據(jù)集成技術(shù)發(fā)揮應(yīng)有的作用。
3.3大數(shù)據(jù)挖掘技術(shù)
在前期對(duì)大數(shù)據(jù)進(jìn)行有效采集和集成處理之后,就可以進(jìn)行大數(shù)據(jù)挖掘和分析,這是找到大數(shù)據(jù)隱藏的應(yīng)用價(jià)值的關(guān)鍵技術(shù)。移動(dòng)通信網(wǎng)絡(luò)大數(shù)據(jù)挖掘分析中,要針對(duì)數(shù)據(jù)類型、挖掘方向等進(jìn)行專項(xiàng)挖掘應(yīng)用,讓大數(shù)據(jù)挖掘應(yīng)用有效發(fā)揮出針對(duì)性的數(shù)據(jù)分析研究作用。要加強(qiáng)數(shù)據(jù)挖掘效率研究,讓移動(dòng)通信網(wǎng)絡(luò)數(shù)據(jù)發(fā)揮良好的應(yīng)有價(jià)值,為移動(dòng)通信網(wǎng)絡(luò)的發(fā)展提供科學(xué)的參考價(jià)值。
3.4大數(shù)據(jù)可視化分析技術(shù)
該技術(shù)是利用大數(shù)據(jù)本身和數(shù)據(jù)挖掘結(jié)果,采用可視化的展示方式來體現(xiàn)價(jià)值??梢暬治黾夹g(shù)采用人機(jī)交互模式,促進(jìn)大數(shù)據(jù)及其數(shù)據(jù)挖掘成果得到價(jià)值最大化的應(yīng)用。可視化技術(shù)讓生澀的數(shù)據(jù)技術(shù)成果轉(zhuǎn)化為直觀、易于接受的可視化效果,有助于數(shù)據(jù)分析結(jié)果得到更為廣泛和有效的應(yīng)用。
3.5大數(shù)據(jù)云計(jì)算技術(shù)
該技術(shù)是信息含量大、對(duì)大數(shù)據(jù)處理具有關(guān)鍵價(jià)值的優(yōu)勢(shì)技術(shù)。通過利用網(wǎng)絡(luò)云端的數(shù)據(jù)處理程序,利用多部服務(wù)器組成的系統(tǒng)進(jìn)行數(shù)據(jù)分析,有效提高了數(shù)據(jù)分析的效率。云計(jì)算早期是分布式計(jì)算,網(wǎng)格計(jì)算,在幾秒鐘就能實(shí)現(xiàn)對(duì)萬(wàn)計(jì)以上數(shù)據(jù)的分析處理,是非常強(qiáng)大的網(wǎng)絡(luò)處理服務(wù)。目前云計(jì)算已經(jīng)拓展為云端資源的無線拓展,是促進(jìn)大數(shù)據(jù)處理效率躍遷的重要技術(shù)。
四、結(jié)束語(yǔ)
為適應(yīng)移動(dòng)通信網(wǎng)絡(luò)數(shù)據(jù)爆炸式的增長(zhǎng),有效挖掘數(shù)據(jù)洪流的價(jià)值,本文分析了大數(shù)據(jù)清洗提取技術(shù)、數(shù)據(jù)挖掘技術(shù)、可視化分析技術(shù)、云計(jì)算技術(shù)等數(shù)據(jù)處理關(guān)鍵技術(shù)優(yōu)勢(shì),以促進(jìn)移動(dòng)通信網(wǎng)絡(luò)數(shù)據(jù)研究的不斷發(fā)展進(jìn)步。
參? 考? 文? 獻(xiàn)
[1]周洪峰.移動(dòng)通信網(wǎng)絡(luò)中大數(shù)據(jù)處理的關(guān)鍵技術(shù)分析[J].中國(guó)新通信,2020,22(04):9-10.
[2]胡秋秋. 移動(dòng)通信網(wǎng)絡(luò)運(yùn)行數(shù)據(jù)處理與分析[D].西安電子科技大學(xué),2019.
[3]羅由.大數(shù)據(jù)在移動(dòng)通信網(wǎng)絡(luò)優(yōu)化中的應(yīng)用[J].科學(xué)技術(shù)創(chuàng)新,2018(01):76-77.
[4]王璐.探究移動(dòng)通信網(wǎng)絡(luò)中大數(shù)據(jù)處理的關(guān)鍵[J].通訊世界,2017(24):94-95.
曹萌萌(1981),女 ,滿族,遼寧沈陽(yáng),碩士,講師。