中興通訊 | 包
大數(shù)據(jù),大變化,大未來
——大數(shù)據(jù)支撐驅(qū)動(dòng)電信運(yùn)營商轉(zhuǎn)型發(fā)展
根據(jù)IDC對中國大數(shù)據(jù)市場的分析,2012年~2016年大數(shù)據(jù)市場的復(fù)合增長率達(dá)51.4%,市場規(guī)模將增長7倍,中國已經(jīng)處于大數(shù)據(jù)時(shí)代的起步階段。
“大數(shù)據(jù)”目前尚未有統(tǒng)一的定義,但總體上可以歸結(jié)為一種新的方式或能力,這種方式或能力來源于對海量數(shù)據(jù)的收集分析并從分析中獲得巨大價(jià)值,它將極大的改變我們社會(huì)生活和思維模式。
對于大數(shù)據(jù)IT界歸納了4個(gè)V(Volume,Variety,Velocity和Value)的特征,已經(jīng)基本得到大家的一致認(rèn)同。具體到電信行業(yè)大數(shù)據(jù)的四個(gè)V又表現(xiàn)為什么呢,總結(jié)下來可以概括如下。
Volume數(shù)據(jù)規(guī)模巨大:電信行業(yè)僅日常運(yùn)營產(chǎn)生的各類話單數(shù)據(jù)(xDR)和信令數(shù)據(jù)規(guī)模已相當(dāng)可觀,如果再加入網(wǎng)絡(luò)流量的數(shù)據(jù)采集,數(shù)據(jù)規(guī)模將呈爆炸式增長。一個(gè)大型城市的每分鐘產(chǎn)生超過8萬條位置更新信息,一天通過網(wǎng)絡(luò)承載的數(shù)據(jù)流量可高達(dá)100TB。
Variety數(shù)據(jù)類型豐富:除了傳統(tǒng)的來自電信運(yùn)營系統(tǒng)如BOSS系統(tǒng)(CRM、RSM等)和VAS系統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)外,互聯(lián)網(wǎng)業(yè)務(wù)的發(fā)展帶來了諸如文本、圖片、視頻、位置信息等大量非結(jié)構(gòu)化的數(shù)據(jù)。
Velocity高速實(shí)時(shí)的數(shù)據(jù):即時(shí)話費(fèi)查詢、流量監(jiān)管等新功能的應(yīng)用隨之產(chǎn)生了大量的高速動(dòng)態(tài)數(shù)據(jù)流,對數(shù)據(jù)流的實(shí)時(shí)分析與處理要求不斷增加,數(shù)據(jù)處理的越及時(shí),產(chǎn)生的價(jià)值越大。
Value數(shù)據(jù)價(jià)值大密度低:網(wǎng)絡(luò)中對媒體流和信令檢測探針的應(yīng)用形成了源源不斷的數(shù)據(jù),但與從信息中能挖掘出的知識(shí)量相比,數(shù)據(jù)的價(jià)值利用密度很低,需要?jiǎng)?chuàng)新的技術(shù)和思維來提升從數(shù)據(jù)中挖掘知識(shí)的效率。
Gartner預(yù)測到2020年大約75%的企業(yè)都將大數(shù)據(jù)分析融入其日常經(jīng)營決策中,未來大數(shù)據(jù)分析將成為企業(yè)經(jīng)營的一項(xiàng)基本能力。
根據(jù)Sysbase的統(tǒng)計(jì)分析,電信行業(yè)通過在運(yùn)營中應(yīng)用大數(shù)據(jù),人均產(chǎn)值提升了17%,而在行業(yè)價(jià)值貢獻(xiàn)方面更是排在了所有行業(yè)的首位。在電信行業(yè)收入增幅日趨放緩的今天,這樣的產(chǎn)值增幅無疑是鼓舞人心的。
通過構(gòu)建行業(yè)大數(shù)據(jù)分析系統(tǒng)讓運(yùn)營商具備了大數(shù)據(jù)分析處理的技能,但這只是在大數(shù)據(jù)時(shí)代獲得成功的基礎(chǔ);運(yùn)營商還需要從企業(yè)戰(zhàn)略和經(jīng)營思維層面改變,發(fā)現(xiàn)新的機(jī)遇和模式并付諸實(shí)施,才能真正將自己所掌握的大數(shù)據(jù)資產(chǎn)和大數(shù)據(jù)技能轉(zhuǎn)變?yōu)槠髽I(yè)價(jià)值。
電信行業(yè)一直以來都是非常關(guān)注數(shù)據(jù)的收集和統(tǒng)計(jì)分析,運(yùn)營商BSS、OSS、DSS、CRM和RA等系統(tǒng)都大量部署應(yīng)用了關(guān)系數(shù)據(jù)庫(RDB)或數(shù)據(jù)倉庫(DW),多采用Oracle、DB2、Sybase和MySQL等數(shù)據(jù)庫管理系統(tǒng)。這類數(shù)據(jù)庫處理的多是電信業(yè)務(wù)運(yùn)營過程數(shù)據(jù)、資源信息、話單記錄等結(jié)構(gòu)化的數(shù)據(jù)類型,隨著互聯(lián)網(wǎng)數(shù)據(jù)業(yè)務(wù)的發(fā)展,運(yùn)營商需要收集處理更多的業(yè)務(wù)應(yīng)用類數(shù)據(jù),由此帶來了數(shù)據(jù)量、數(shù)據(jù)類型和分析能力的巨大變化。原有的業(yè)務(wù)運(yùn)營系統(tǒng)所產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)量大約只占所擁有數(shù)據(jù)量的2成,超過80%的新數(shù)據(jù)來自互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等新業(yè)務(wù)應(yīng)用,并且以視頻流量、文本、網(wǎng)絡(luò)點(diǎn)擊行為等各類非結(jié)構(gòu)化的形式存在。面對數(shù)據(jù)對象的新變化,傳統(tǒng)的電信運(yùn)營數(shù)據(jù)庫系統(tǒng)在處理能力和處理效率上都無法滿足要求,轉(zhuǎn)變勢在必行。
從DB(Database)轉(zhuǎn)向BD(Big Data)是一個(gè)大的技術(shù)演進(jìn),而不僅僅是需要處理的數(shù)據(jù)規(guī)模的擴(kuò)大。電信行業(yè)因?yàn)榛ヂ?lián)網(wǎng)應(yīng)用的普及和管道智能化演進(jìn)帶來了大量非結(jié)構(gòu)化數(shù)據(jù)的分析處理以及高速流量數(shù)據(jù)的實(shí)時(shí)處理問題,對于這些數(shù)據(jù)處理的效率又要求達(dá)到電信級運(yùn)營的要求。因此對電信運(yùn)營商而言一個(gè)合適的大數(shù)據(jù)系統(tǒng)至少應(yīng)該具備以下三種能力:分布式處理能力,非結(jié)構(gòu)化數(shù)據(jù)分析能力和流式數(shù)據(jù)實(shí)時(shí)處理能力。以MapReduce技術(shù)為核心的Hadoop開源平臺(tái)已成為非結(jié)構(gòu)化大數(shù)據(jù)處理的事實(shí)標(biāo)準(zhǔn),其適合非結(jié)構(gòu)化數(shù)據(jù),大規(guī)模并行處理的特點(diǎn)可以滿足電信行業(yè)的需要。而在流式大數(shù)據(jù)實(shí)時(shí)處理方面則可以考慮應(yīng)用較為成熟的CEP(Complex Event Processing)技術(shù),這一技術(shù)針對電信網(wǎng)絡(luò)大量的信令、消息、特征媒體流等流數(shù)據(jù)具備良好的實(shí)時(shí)分析處理能力。中興通訊的大數(shù)據(jù)平臺(tái)解決方案充分利用主流的大數(shù)據(jù)處理技術(shù),并結(jié)合電信行業(yè)數(shù)據(jù)處理的特點(diǎn),提供融合傳統(tǒng)數(shù)據(jù)倉庫和大數(shù)據(jù)的專用平臺(tái),可靈活適配各種數(shù)據(jù)規(guī)模、多種業(yè)務(wù)應(yīng)用的場景。系統(tǒng)提供自研的CEP技術(shù)可滿足電信大流量數(shù)據(jù)的實(shí)時(shí)處理需要,采用Hadoop開源技術(shù)滿足對電信業(yè)務(wù)平臺(tái)上非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)的批量處理需要,基于NoSQL的HBase大數(shù)據(jù)存儲(chǔ)架構(gòu)可滿足從GB到TB各種級別的數(shù)據(jù)存儲(chǔ)和快速I/O需要。
電信行業(yè)的數(shù)據(jù)主要包括客戶信息數(shù)據(jù)(如客戶入網(wǎng)資料、套餐情況)、業(yè)務(wù)過程數(shù)據(jù)(如通話記錄、客戶服務(wù)記錄等)和網(wǎng)絡(luò)運(yùn)行數(shù)據(jù)(網(wǎng)絡(luò)性能、客戶終端使用情況等)幾部分,傳統(tǒng)上這些數(shù)據(jù)分布在不同數(shù)據(jù)庫中并且較獨(dú)立的進(jìn)行統(tǒng)計(jì)分析以服務(wù)于不同的運(yùn)營部門,數(shù)據(jù)分析在很大程度上僅僅作為部門運(yùn)營報(bào)表輸出和績效考核功能應(yīng)用而存在,這顯然低估了數(shù)據(jù)的價(jià)值。在大數(shù)據(jù)時(shí)代數(shù)據(jù)的價(jià)值來源于數(shù)據(jù)的全面性、數(shù)據(jù)的共享和數(shù)據(jù)的二次利用。運(yùn)營商應(yīng)該將不同部門、不同數(shù)據(jù)庫收集存儲(chǔ)的數(shù)據(jù)進(jìn)行共享,重新挖掘歷史數(shù)據(jù)而不是輕易刪除,圍繞客戶進(jìn)行整合分析,這才是大數(shù)據(jù)下的思維方式。當(dāng)我們將數(shù)據(jù)進(jìn)行組合、再利用,形成新的大數(shù)據(jù)集,大數(shù)據(jù)的真正價(jià)值才能顯現(xiàn)。
舉一個(gè)電信行業(yè)通過部門間數(shù)據(jù)共享組合發(fā)現(xiàn)新商業(yè)價(jià)值的例子:很多移動(dòng)運(yùn)營商網(wǎng)絡(luò)維護(hù)部門出于改善網(wǎng)絡(luò)運(yùn)行質(zhì)量和提升客戶體驗(yàn)的考慮一直在進(jìn)行網(wǎng)絡(luò)和終端的分析優(yōu)化活動(dòng),期間收集了大量的終端應(yīng)用數(shù)據(jù),這些數(shù)據(jù)以往僅僅為網(wǎng)絡(luò)優(yōu)化目的而利用,網(wǎng)優(yōu)活動(dòng)結(jié)束后就廢棄了;其實(shí)這些數(shù)據(jù)通過再分析可以提供更多的用途,比如基于對全網(wǎng)絡(luò)不同型號手機(jī)終端的實(shí)際使用數(shù)據(jù)分析,運(yùn)營商可以向手機(jī)制造商提供更為真實(shí)的手機(jī)使用情況咨詢,在確保不侵犯競爭廠家的隱私的情況下運(yùn)營商可以向手機(jī)制造商提供更為真實(shí)的手機(jī)實(shí)際使用率信息,這些對于手機(jī)制造商而言都是無價(jià)之寶,比以往依賴仿真測試和銷售數(shù)據(jù)分析獲得的情況更加真實(shí),可以有效指導(dǎo)他們的經(jīng)營決策,而運(yùn)營商通過對數(shù)據(jù)的二次分析提供信息咨詢可獲得額外的商業(yè)收益。
再以運(yùn)營商運(yùn)維部門常見的告警派單活動(dòng)為例,大量的設(shè)備歷史告警數(shù)據(jù)通常作為部門運(yùn)維質(zhì)量考核的統(tǒng)計(jì)數(shù)據(jù)并且定期被清理覆蓋。但事實(shí)上通過設(shè)備海量歷史告警數(shù)據(jù)與客戶投訴的關(guān)聯(lián)分析,運(yùn)維部門可以有效地預(yù)測一條新發(fā)生的告警的準(zhǔn)確性和引發(fā)的客戶投訴的緊迫性,更好地配合客服部門的服務(wù)響應(yīng),也能優(yōu)化部門內(nèi)現(xiàn)場故障處理派單的活動(dòng),通過對海量歷史數(shù)據(jù)的挖掘分析即保證了客戶服務(wù)的滿意度,也同時(shí)提高了客服與運(yùn)維兩個(gè)關(guān)聯(lián)部門的工作效率。
上述兩個(gè)案例僅僅是運(yùn)營商基于大數(shù)據(jù)思維創(chuàng)造新價(jià)值、提升運(yùn)營效率的小應(yīng)用,大數(shù)據(jù)是一個(gè)神奇的金礦,它的潛在價(jià)值猶如漂浮在海洋中的冰山,很大部分還隱藏在水面之下,等待我們不斷去挖掘。
大數(shù)據(jù)將在4個(gè)領(lǐng)域?yàn)殡娦胚\(yùn)營商的轉(zhuǎn)型帶來新機(jī)遇
作為信息管道的經(jīng)營者,電信運(yùn)營商天然具備數(shù)據(jù)的收集能力。相比互聯(lián)網(wǎng)公司獲取的是用戶在虛擬網(wǎng)絡(luò)中的數(shù)據(jù),提供用戶入網(wǎng)接入服務(wù)的電信運(yùn)營商擁有用戶的真實(shí)社會(huì)型數(shù)據(jù)信息,而管道的智能化又讓運(yùn)營商擁有獲取用戶在互聯(lián)網(wǎng)虛擬社會(huì)數(shù)據(jù)的能力,運(yùn)營商基于管道平臺(tái)同時(shí)擁有了現(xiàn)實(shí)社會(huì)和虛擬社會(huì)兩套數(shù)據(jù),通過用戶屬性的關(guān)聯(lián)實(shí)現(xiàn)數(shù)據(jù)的無縫銜接,這是運(yùn)營商特有的數(shù)據(jù)優(yōu)勢,在大數(shù)據(jù)時(shí)代這是一個(gè)重要的核心資產(chǎn)。
但是擁有大數(shù)據(jù)資產(chǎn)并沒有給運(yùn)營商帶來直接的收入和利潤,原因就在于運(yùn)營商普遍缺乏從數(shù)據(jù)中挖掘價(jià)值的技術(shù)和發(fā)現(xiàn)新價(jià)值的智慧理念,而大量的互聯(lián)網(wǎng)公司和中小科技公司卻已經(jīng)行動(dòng)起來,利用電信開放的數(shù)據(jù)資源獲得收益。
國內(nèi)領(lǐng)先的互聯(lián)網(wǎng)公司如百度、騰訊、淘寶等都已經(jīng)利用大數(shù)據(jù)來提升自身的產(chǎn)品和服務(wù),并且不斷向傳統(tǒng)的通信領(lǐng)域滲透,面對競爭電信運(yùn)營商必須要積極跟進(jìn),利用大數(shù)據(jù)的資產(chǎn)優(yōu)勢,發(fā)展大數(shù)據(jù)技能,開拓大數(shù)據(jù)思維,實(shí)現(xiàn)客戶的深入洞察和業(yè)務(wù)決策的創(chuàng)新,驅(qū)動(dòng)企業(yè)向圍繞客戶信息服務(wù)為中心的戰(zhàn)略轉(zhuǎn)型。具體來說,大數(shù)據(jù)將在4個(gè)領(lǐng)域?yàn)殡娦胚\(yùn)營商的轉(zhuǎn)型帶來新機(jī)遇。(如圖所示)
建設(shè)智能管道和業(yè)務(wù)聚合平臺(tái),開展流量經(jīng)營是電信運(yùn)營商轉(zhuǎn)型發(fā)展的基本措施之一,借助大數(shù)據(jù)分析運(yùn)營商可以實(shí)現(xiàn)對管道中大流量數(shù)據(jù)在線實(shí)時(shí)分析;對用戶使用互聯(lián)網(wǎng)業(yè)務(wù)行為動(dòng)作進(jìn)行批量分析;對管道中各類業(yè)務(wù)應(yīng)用過程數(shù)據(jù)進(jìn)行實(shí)時(shí)分析。通過大數(shù)據(jù)分析運(yùn)營商可以及時(shí)把握網(wǎng)絡(luò)流量狀態(tài),預(yù)測流量變化趨勢,改善流量分布,實(shí)現(xiàn)流量規(guī)模和流量層次上的精細(xì)化運(yùn)營,真正讓流量創(chuàng)造價(jià)值。
大數(shù)據(jù)融入企業(yè)經(jīng)營管理和決策流程將帶來更高效、更精準(zhǔn)的運(yùn)營改變,來自運(yùn)營商內(nèi)部各個(gè)部門的生產(chǎn)數(shù)據(jù)與外部的應(yīng)用數(shù)據(jù)整合、交互,使得決策的數(shù)據(jù)基礎(chǔ)更為精準(zhǔn),數(shù)據(jù)指向的目標(biāo)更加統(tǒng)一于客戶和收入,大數(shù)據(jù)提供的相關(guān)性分析能幫助運(yùn)營商更快、更準(zhǔn)確的捕捉市場變化,加快決策的效率;基于相關(guān)關(guān)系分析基礎(chǔ)上的預(yù)測則可以更好的指導(dǎo)我們的日常運(yùn)營操作,優(yōu)化資源配置,降低運(yùn)營成本。
通過對客戶現(xiàn)實(shí)社會(huì)數(shù)據(jù)和互聯(lián)網(wǎng)使用行為數(shù)據(jù)的收集聚合分析,電信運(yùn)營商可以更精準(zhǔn)的刻畫每個(gè)消費(fèi)個(gè)體的偏好、習(xí)慣和社交網(wǎng)絡(luò),識(shí)別價(jià)值客戶,預(yù)測客戶行為,以此為基礎(chǔ)運(yùn)營商可以開展針對性的組合營銷,或者為合作伙伴提供更準(zhǔn)確的業(yè)務(wù)開發(fā)指引,以個(gè)性化、精準(zhǔn)型的業(yè)務(wù)內(nèi)容不斷增強(qiáng)客戶黏性。
在行業(yè)信息服務(wù)領(lǐng)域電信運(yùn)營商通常只提供通信管道和設(shè)備托管服務(wù),相比之下IT廠商一直占據(jù)主導(dǎo)地位。大數(shù)據(jù)技術(shù)給運(yùn)營商爭奪IT廠商主導(dǎo)的行業(yè)信息服務(wù)市場提供了巨大的機(jī)會(huì)。運(yùn)營商利用龐大的用戶屬性數(shù)據(jù)、精確的用戶位置信息數(shù)據(jù)、真實(shí)的社會(huì)網(wǎng)絡(luò)數(shù)據(jù),可以為行業(yè)客戶提供高效、準(zhǔn)確的信息服務(wù)。面對智慧城市、遠(yuǎn)程醫(yī)療、網(wǎng)絡(luò)教育等新興的信息服務(wù)需求,運(yùn)營商通過大數(shù)據(jù)價(jià)值挖掘可以拓展新型的信息服務(wù)模式獲得持續(xù)的收入增長。
大數(shù)據(jù)中蘊(yùn)含的價(jià)值和動(dòng)力將推動(dòng)產(chǎn)業(yè)升級和商業(yè)創(chuàng)新,電信運(yùn)營商應(yīng)該把握這一時(shí)機(jī),借大數(shù)據(jù)發(fā)展之勢推進(jìn)自身的戰(zhàn)略轉(zhuǎn)型。通過整合管理自己的大數(shù)據(jù)資產(chǎn),增強(qiáng)大數(shù)據(jù)分析技能,拓展大數(shù)據(jù)價(jià)值利用思維和創(chuàng)新商業(yè)模式,在發(fā)展中的大數(shù)據(jù)時(shí)代將有一個(gè)值得期待的未來。