杜森

【摘 要】在全球互聯(lián)網(wǎng)蓬勃發(fā)展的今天，運(yùn)營商面臨著前所未有的嚴(yán)峻挑戰(zhàn)。互聯(lián)網(wǎng)內(nèi)容大量在固網(wǎng)網(wǎng)內(nèi)形成事實(shí)上的壟斷，網(wǎng)間互訪通道受到競爭對手控制，嚴(yán)重影響移動(dòng)互聯(lián)網(wǎng)用戶訪問體驗(yàn)。通過流量分析與監(jiān)控、內(nèi)容加速系統(tǒng)、第三方出口和內(nèi)容源直接引入等多種手段，用戶上網(wǎng)速度得到迅速提升，有效改善了移動(dòng)寬帶的業(yè)務(wù)形象，有利于進(jìn)一步推動(dòng)寬帶業(yè)務(wù)的大發(fā)展。本文分析了如何構(gòu)建多手段協(xié)同的互聯(lián)網(wǎng)流量綜合管控體系問題。

【關(guān)鍵詞】多手段協(xié)同；互聯(lián)網(wǎng)流量；綜合管控體系

1.多手段協(xié)同的互聯(lián)網(wǎng)流量綜合管控體系構(gòu)建

通過流量分析與監(jiān)控、內(nèi)容加速系統(tǒng)、第三方出口和內(nèi)容源直接引入等多種手段，用戶上網(wǎng)速度得到迅速提升，有效改善了移動(dòng)寬帶的業(yè)務(wù)形象，有利于進(jìn)一步推動(dòng)寬帶業(yè)務(wù)的大發(fā)展。

1.1流量分析與控制

在未對出口流量進(jìn)行分析與控制之前，出口P2P流量占比達(dá)70%，08年底流量監(jiān)控平臺(tái)上線，對省網(wǎng)40G出口流量進(jìn)行分析和控制，目前將峰值P2P流量壓縮了15%。

通過流控與緩存的配合，達(dá)到既降低出口流量減少結(jié)算又不降低甚至提升用戶使用感知的目的。

1.2內(nèi)容加速系統(tǒng)

通過構(gòu)建內(nèi)容加速系統(tǒng)，改變傳統(tǒng)網(wǎng)站重鏡像模式，在網(wǎng)內(nèi)客戶訪問過程中進(jìn)行解析轉(zhuǎn)換，在接到服務(wù)請求后通過主動(dòng)的內(nèi)容請求和緩存實(shí)現(xiàn)加速服務(wù)。利用其CDN平臺(tái)對近千個(gè)門戶類網(wǎng)站內(nèi)容加速，覆蓋省內(nèi)約40多萬寬帶用戶，平均訪問速度提高2-3倍，峰值流量達(dá)到3.1Gbps。

1.3第三方出口

通過第三方出口，將CDN的回源及部分高價(jià)值業(yè)務(wù)進(jìn)行專門疏導(dǎo)，通過緩存與第三方出口的配合，有效規(guī)避競爭對手的監(jiān)測與封堵，充分發(fā)揮第三方出口的網(wǎng)絡(luò)優(yōu)勢，提升緩存的效果。

1.4內(nèi)容引入

通過流量分析與監(jiān)控，深入分析現(xiàn)網(wǎng)用戶行為，篩選出TOP100，成立專門團(tuán)隊(duì)，完成了66家核心內(nèi)容引入，并與最大的獨(dú)立IDC世紀(jì)互聯(lián)合作，近期批量引入其網(wǎng)內(nèi)近3000家網(wǎng)站，可有效提升網(wǎng)站訪問量，提高用戶滿意度。

2.主要?jiǎng)?chuàng)新點(diǎn)

2.1流控與緩存協(xié)同互動(dòng)，綜合管控出口流量

2.1.1技術(shù)原理

流量控制主要通過旁路分光方式對所有出口流量進(jìn)行監(jiān)控分析，對于不同協(xié)議（http、P2P等）的流量進(jìn)行不同處理，一般可通過發(fā)送干擾包方式進(jìn)行帶寬控制。

流量控制可有效降低出口流量，減少結(jié)算費(fèi)用，但對用戶使用感知影響較大，緩存主要通過對流量的分析、識(shí)別，對不同協(xié)議的流量根據(jù)用戶訪問的頻度對內(nèi)容資源進(jìn)行緩存，減少相同內(nèi)容多次出網(wǎng)訪問，同時(shí)可明顯提升用戶感知。

通過兩者的協(xié)同互動(dòng)，可在有效控制出口流量的同時(shí)提升用戶的使用感知。

2.1.2實(shí)施方案

通過流量監(jiān)控平臺(tái)（華為SIG）將出口P2P峰值流量壓縮15%。

P2P流控策略主要對P2P下載類應(yīng)用進(jìn)行實(shí)施，暫不對P2P視頻類業(yè)務(wù)進(jìn)行部署，避免引起批量投訴。

流控對用戶使用感知的影響通過緩存平臺(tái)進(jìn)行彌補(bǔ)。

迅雷專用緩存主要針對迅雷下載應(yīng)用，由迅雷公司進(jìn)行全國性統(tǒng)一調(diào)度，一般命中率在40%左右。

通用型緩存主要針對主流的迅雷下載、BT、電驢等應(yīng)用（三類應(yīng)用占P2P下載類流量的90%以上），根據(jù)用戶訪問頻度設(shè)定緩存策略，命中率較高，一般超過80%。

2.2基于用戶行為深度分析的內(nèi)容資源聯(lián)動(dòng)更新

通過對緩存平臺(tái)數(shù)據(jù)的深度分析，可有效了解目前用戶下載、視頻的熱點(diǎn)，根據(jù)此熱點(diǎn)數(shù)據(jù)，將其提交給本地下載類、影視類資源網(wǎng)站，作為其進(jìn)行內(nèi)容更新的重要參考數(shù)據(jù)。

這種聯(lián)動(dòng)因?yàn)槭且袁F(xiàn)網(wǎng)用戶的實(shí)際行為為基礎(chǔ)的，因此可有效激活本地資源類網(wǎng)站的訪問量，同時(shí)也可顯著減少用戶的實(shí)際下載量，減輕緩存平臺(tái)的壓力。

2.3緩存環(huán)境下內(nèi)網(wǎng)P2P用戶模式的重組還原

P2P應(yīng)用與網(wǎng)絡(luò)無關(guān)，易造成運(yùn)營商出口擁塞，其完全為離散的分布式架構(gòu)，流量難以管理。

通用型緩存通過截獲P2P用戶請求，將其引導(dǎo)到緩存，相當(dāng)于將應(yīng)用模式從分布式轉(zhuǎn)換成了C/S模式。

這樣的轉(zhuǎn)化可有效降低出口流量，控制網(wǎng)內(nèi)用戶的流量，但也會(huì)給緩存帶來較大的壓力，隨著用戶的增長，緩存的負(fù)載會(huì)逐步加大，會(huì)逐漸成為瓶頸。

通過緩存平臺(tái)優(yōu)先返回本區(qū)域peer用戶地址，引導(dǎo)用戶之間自行的數(shù)據(jù)交換，一方面可控制出網(wǎng)的流量，同時(shí)可在本區(qū)域內(nèi)還原P2P技術(shù)的優(yōu)勢，提升用戶感知，減輕緩存平臺(tái)壓力。

2.4 Web網(wǎng)站資源緩存模糊匹配

目前大型網(wǎng)站為了支撐大規(guī)模用戶的訪問，一般資源存儲(chǔ)采用全分布式架構(gòu)，硬件上會(huì)進(jìn)行分組，在每個(gè)組內(nèi)再進(jìn)行負(fù)載均衡。

這樣的架構(gòu)對于緩存來說存在一定的難度，因?yàn)橄嗤膬?nèi)容用戶每次訪問的絕對地址是隨機(jī)變化的，如果根據(jù)地址進(jìn)行緩存內(nèi)容匹配的話，命中率相當(dāng)?shù)汀?/p>

為有效解決該問題，將目前緩存內(nèi)容匹配升級(jí)成模糊匹配，重點(diǎn)按文件名進(jìn)行匹配而忽略前面的隨機(jī)地址，這種方式將顯著提高命中率，從而可有效提高視頻類網(wǎng)站的訪問質(zhì)量和感知。

2.5基于第三方出口的緩存加速及中轉(zhuǎn)代理

目前解決互聯(lián)互通瓶頸最有效的方式是租用第三方出口，進(jìn)行本地化疏通。但容易遭受競爭對手的封堵，質(zhì)量無法保障。

將第三方出口配合緩存使用是一種全新的應(yīng)用模式，一方面其可以有效規(guī)避對方的監(jiān)測，同時(shí)可充分發(fā)揮第三方出口的網(wǎng)絡(luò)優(yōu)勢。

由于緩存采用優(yōu)質(zhì)的第三方出口，而普通用戶還是通過互聯(lián)互通出口進(jìn)行數(shù)據(jù)訪問，因此在訪問緩存沒有命中的文件時(shí)，緩存下載的速度將優(yōu)于用戶下載速度，緩存可邊下載邊向用戶吐出已下載的數(shù)據(jù)流量，以達(dá)到降低出口流量、加速用戶下載的目的。

除此之外，采用代理中轉(zhuǎn)（不緩存）方式對于提高視頻類應(yīng)用的使用感知也有明顯的效果。

2.6基于智能DNS解析的網(wǎng)間雙向互訪CDN加速

2.6.1技術(shù)原理

目前解決www網(wǎng)站訪問速度問題的最有效方式即是采用CDN技術(shù)進(jìn)行訪問加速，在傳統(tǒng)的CDN網(wǎng)站加速的前提下，我公司發(fā)了CPOS業(yè)務(wù)、CPIS業(yè)務(wù)。CPOS業(yè)務(wù)主要是將移動(dòng)的互聯(lián)網(wǎng)業(yè)務(wù)推到其他運(yùn)營商，同時(shí)可以降低自身訪問壓力，減少維護(hù)成本；CPIS業(yè)務(wù)主要面向?qū)拵в脩?，將互?lián)網(wǎng)上的內(nèi)容緩存到移動(dòng)網(wǎng)內(nèi)，提高用戶的訪問速度，進(jìn)而提升移動(dòng)寬帶產(chǎn)品的競爭力。

2.6.2實(shí)施方案

目前已經(jīng)有十幾個(gè)網(wǎng)站使用了CPOS業(yè)務(wù)。很好的解決了其他運(yùn)營商訪問這些網(wǎng)站存在的跨網(wǎng)問題。目前已經(jīng)有近40萬個(gè)寬帶用戶使用了CPIS業(yè)務(wù)。每日接收用戶的請求為300萬次，日最大帶寬為3.1G。

3.應(yīng)用效果

（1）加速熱點(diǎn)網(wǎng)站近千個(gè)；覆蓋省內(nèi)約40多萬寬帶用戶，平均訪問速度提高2-3倍，峰值流量達(dá)到3.1Gbps；異網(wǎng)接入網(wǎng)民訪問門戶網(wǎng)站、家長網(wǎng)校、公司OA平均提速3-4倍；http下載/視頻、P2P下載（含迅雷）/視頻的速度提高3-10倍。

（2）有利于在提升用戶上網(wǎng)速度的基礎(chǔ)上，同時(shí)降低網(wǎng)間結(jié)算費(fèi)用，自2008年底開始陸續(xù)部署流控、專用緩存、通用緩存、第三方出口及IDC內(nèi)容資源引入后，2009年3月起出口入流量開始穩(wěn)定在一個(gè)較合理的水平，分?jǐn)傎M(fèi)用較年初大大降低。

（3）目前已有較成熟的產(chǎn)品與方案，形成了一套綜合管控體系推廣。

（4）也可以將已經(jīng)構(gòu)建的互聯(lián)網(wǎng)體系作為基礎(chǔ)，通過進(jìn)一步提升能力，提供服務(wù)，滿足附近的互聯(lián)網(wǎng)請求，具體手段可以通過智能DNS及CMNET網(wǎng)絡(luò)互連實(shí)現(xiàn)。