馬潤(rùn)民，李盈

（中國(guó)移動(dòng)通信集團(tuán)青海有限公司，西寧 810008）

垃圾短信治理技術(shù)應(yīng)用

馬潤(rùn)民，李盈

（中國(guó)移動(dòng)通信集團(tuán)青海有限公司，西寧 810008）

垃圾短信目前依然是困擾用戶(hù)和運(yùn)營(yíng)商的一大問(wèn)題。本文根據(jù)運(yùn)營(yíng)商治理垃圾短信的現(xiàn)狀，采用了基于用戶(hù)行為特征的垃圾短信治理策略管理的技術(shù)和開(kāi)啟行業(yè)應(yīng)用短信網(wǎng)關(guān)前轉(zhuǎn)消息主叫號(hào)段鑒權(quán)的方法，有效提高垃圾短信的攔截效率，降低誤攔率，取得了良好的社會(huì)效益。

垃圾短信；用戶(hù)行為特征；主叫號(hào)段鑒權(quán)

對(duì)于垃圾短信治理各行各業(yè)提出了許多治理垃圾短信的方法，如基于特征詞的垃圾短信分類(lèi)模型，5MAP手機(jī)廣告平臺(tái)等，但截至目前依然是困擾用戶(hù)和運(yùn)營(yíng)商的一大難題。近年來(lái)，運(yùn)營(yíng)商以業(yè)務(wù)安全管控為基礎(chǔ)，技術(shù)反制為手段，通過(guò)全面分析垃圾短信投訴樣本，及時(shí)獲取垃圾短信的熱點(diǎn)內(nèi)容，并隨之動(dòng)態(tài)優(yōu)化調(diào)整關(guān)鍵字策略，加強(qiáng)策略監(jiān)控?cái)r截力度，有效降低了每萬(wàn)用戶(hù)垃圾短信量及客戶(hù)投訴量。但是靠人為識(shí)別垃圾短信關(guān)鍵字并進(jìn)行策略?xún)?yōu)化遠(yuǎn)不能企及垃圾短信爆發(fā)的速度，再加上策略集優(yōu)化工作量大，垃圾短信的治理過(guò)程中不免存在策略簡(jiǎn)單粗放，短信誤攔等現(xiàn)象，使得已取得的成效無(wú)法鞏固。因此，中國(guó)移動(dòng)在現(xiàn)有垃圾短信治理經(jīng)驗(yàn)上，引進(jìn)先進(jìn)技術(shù)，采用科學(xué)管理，進(jìn)一步推動(dòng)垃圾短信的治理效果。

1 白名單+科學(xué)封堵

為改變策略簡(jiǎn)單粗放的現(xiàn)象，運(yùn)營(yíng)商在深入研究垃圾短信行為特征的基礎(chǔ)上采用了基于客戶(hù)綜合特征分析的垃圾短信治理策略，建立起白名單和科學(xué)封堵模型相結(jié)合的垃圾短信治理模式，從科學(xué)封堵運(yùn)營(yíng)數(shù)據(jù)的統(tǒng)計(jì)分析、效果評(píng)估方面入手，及時(shí)更新策略，努力提高策略分層管理有效性，深化策略科學(xué)封堵管理常態(tài)化，形成一整套基于客戶(hù)特征分析的垃圾短信治理長(zhǎng)效機(jī)制，實(shí)現(xiàn)精細(xì)化、行為級(jí)、高效性的垃圾短信治理。

1.1 實(shí)現(xiàn)原理及過(guò)程

首先通過(guò)經(jīng)營(yíng)分析系統(tǒng)，構(gòu)建用戶(hù)短信發(fā)送行為的識(shí)別模型，接著根據(jù)模型運(yùn)行的結(jié)果得到相應(yīng)的白名單及危險(xiǎn)名單，進(jìn)一步分解為一級(jí)白名單、二級(jí)白名單、低危用戶(hù)名單和高危用戶(hù)名單數(shù)據(jù)，然后根據(jù)名單制定策略并部署到垃圾短信監(jiān)控系統(tǒng)中，最后根據(jù)現(xiàn)網(wǎng)中的應(yīng)用效果及相關(guān)的反饋數(shù)據(jù)實(shí)現(xiàn)模型優(yōu)化提升，并對(duì)市場(chǎng)源頭治理形成相關(guān)建議。

1．1．1 白名單分層分級(jí)

模型構(gòu)建后，主要是根據(jù)用戶(hù)行為建立各級(jí)白名單和危險(xiǎn)用戶(hù)名單組，通過(guò)經(jīng)分系統(tǒng)對(duì)用戶(hù)屬性、通信行為等數(shù)據(jù)進(jìn)行分析，綜合發(fā)送垃圾短信的風(fēng)險(xiǎn)程度、信譽(yù)等級(jí)等因素來(lái)細(xì)分客戶(hù)群體，得到分類(lèi)后的白名單、危險(xiǎn)用戶(hù)名單，同時(shí)結(jié)合人工參與再對(duì)名單進(jìn)行分析，并從白名單中抽取一級(jí)白名單和二級(jí)白名單、從危險(xiǎn)用戶(hù)名單中抽取高危用戶(hù)名單和低危用戶(hù)名單，最后對(duì)各類(lèi)名單進(jìn)行增刪調(diào)整形成最終輸出。

表1 用戶(hù)組別特征表

1．1．2 號(hào)段/號(hào)碼組安全系數(shù)配置

建立白名單分層分級(jí)的目的是對(duì)于不同級(jí)別的白名單采用不同安全系數(shù)實(shí)現(xiàn)不同級(jí)別的管控，垃圾短信攔截平臺(tái)采用同一套策略，對(duì)于不同分組設(shè)置有針對(duì)性的監(jiān)控和攔截規(guī)則。一個(gè)用戶(hù)只能屬于一個(gè)帶安全系數(shù)的用戶(hù)組，安全系數(shù)越高，說(shuō)明該用戶(hù)發(fā)送垃圾短信的可能性越小，監(jiān)控策略配置越寬松。

各用戶(hù)組上線后，對(duì)應(yīng)安全系統(tǒng)按照如表2進(jìn)行配置。

表2 用戶(hù)組安全系數(shù)配置表

1．1．3 各級(jí)白名單導(dǎo)入

運(yùn)營(yíng)商垃圾短信系統(tǒng)中導(dǎo)入經(jīng)分的用戶(hù)組數(shù)據(jù)共計(jì)341 846個(gè)，其中一級(jí)和二級(jí)白名單數(shù)據(jù)按照一定的百分比輸出數(shù)據(jù)，低危和高危用戶(hù)為固定的40000和10000，普通號(hào)碼組（如86134，86189等）以號(hào)段的方式加入。完成各號(hào)段/號(hào)碼組建立和相應(yīng)安全系統(tǒng)配置以后，上文建立的各級(jí)白名單即可導(dǎo)入到對(duì)應(yīng)的號(hào)段/號(hào)碼組中去，同時(shí)將號(hào)碼導(dǎo)入已經(jīng)建立好的具有安全系數(shù)的號(hào)碼組中。

1．1．4 優(yōu)化策略結(jié)構(gòu)

結(jié)合每一級(jí)別客戶(hù)的行為特點(diǎn)，在垃圾短信監(jiān)控系統(tǒng)中制定有針對(duì)性的精細(xì)化組合策略，將各級(jí)白名單導(dǎo)入對(duì)應(yīng)的號(hào)段/號(hào)碼組以后，如低危風(fēng)險(xiǎn)用戶(hù)導(dǎo)入“低風(fēng)險(xiǎn)”號(hào)碼組，將高風(fēng)險(xiǎn)用戶(hù)導(dǎo)入“高風(fēng)險(xiǎn)”號(hào)碼組等，還要啟用特殊的流量、關(guān)鍵字規(guī)則以達(dá)到“嚴(yán)打”和“降低誤攔”的區(qū)分對(duì)待的目的。低風(fēng)險(xiǎn)用戶(hù)除了啟用較普通用戶(hù)嚴(yán)格兩倍的純流量監(jiān)控策略，還啟用了目的號(hào)碼離散策略；高風(fēng)險(xiǎn)用戶(hù)同樣啟用了較普通用戶(hù)嚴(yán)格兩倍的純流量監(jiān)控策略，還啟用了較普通用戶(hù)嚴(yán)格兩倍的省外號(hào)段命中率策略。在關(guān)鍵字方面，對(duì)于低危用戶(hù)設(shè)置了更為嚴(yán)格的房產(chǎn)和金融類(lèi)關(guān)鍵字策略，同時(shí)根據(jù)垃圾短信平臺(tái)中的審核情況、用戶(hù)投訴等數(shù)據(jù)進(jìn)行動(dòng)態(tài)調(diào)整，驗(yàn)證調(diào)整客戶(hù)模型，評(píng)估優(yōu)化定制策略的有效性，實(shí)現(xiàn)策略運(yùn)營(yíng)的閉環(huán)管理，即可形成一套基于客戶(hù)特征分析的垃圾短信治理組合策略集。

1.2 效果分析

運(yùn)營(yíng)商啟用白名單+科學(xué)封堵模型后，通過(guò)五級(jí)號(hào)碼區(qū)分流量和關(guān)鍵字策略，在攔截高風(fēng)險(xiǎn)用戶(hù)方面各項(xiàng)指標(biāo)較以往均有明顯提升。同時(shí)在降低人工審核量、降低誤攔截量、降低投訴量、提升垃圾短信命中率和保護(hù)高價(jià)值客戶(hù)等方面起到積極的改善效果。

（1）人工審核量降低：一級(jí)白名單加入系統(tǒng)以后，放松安全系數(shù)，大大降低審核量。

（2）誤攔率降低：規(guī)避因誤攔截引發(fā)的高端客戶(hù)投訴風(fēng)險(xiǎn)，一/二級(jí)白名單中違規(guī)用戶(hù)占比降低。

（3）命中率提高：收緊高風(fēng)險(xiǎn)用戶(hù)的安全系數(shù)，垃圾短信攔截命中率提升7倍。

（4）每萬(wàn)用戶(hù)垃圾短信量降低：2016年8月運(yùn)營(yíng)商每萬(wàn)用戶(hù)垃圾短信量較2015下降62.57%。

（5）投訴量降低：2016年9月運(yùn)營(yíng)商垃圾短信被舉報(bào)量同比下降83.72%。

（6）高價(jià)值客戶(hù)保護(hù)：白名單號(hào)碼多為高星級(jí)用戶(hù)及黨政機(jī)軍高端客戶(hù)，白名單使用體現(xiàn)客戶(hù)品牌價(jià)值，提高了客戶(hù)滿意度。

2 行業(yè)網(wǎng)關(guān)全網(wǎng)賬號(hào)主叫鑒權(quán)技術(shù)

隨著即時(shí)通訊工具（如QQ、微信等）的發(fā)展，點(diǎn)對(duì)點(diǎn)的短信量（即用戶(hù)之間發(fā)送短信）今年來(lái)呈逐年降低趨勢(shì)；但是因?yàn)檎笥脩?hù)對(duì)于短信批量通知、信息及時(shí)傳遞、業(yè)務(wù)營(yíng)銷(xiāo)等需求越來(lái)越旺盛，行業(yè)類(lèi)短信反呈逐年遞增趨勢(shì)。

2016年8月短信業(yè)務(wù)量較去年同期下降了27.69%，較前年同期下降了34.03%，2016年9月短信業(yè)務(wù)量較去年同期下降了26.64%，較前年同期下降了29.03%。

行業(yè)短信的需求增長(zhǎng)極為迅猛，2016年8月行業(yè)網(wǎng)關(guān)下行短信業(yè)務(wù)量較去年同期增長(zhǎng)了40.16%，較前年同期增長(zhǎng)了123.77%，2016年9月行業(yè)網(wǎng)關(guān)下行短信業(yè)務(wù)量較去年同期增長(zhǎng)了68.82%，較前年同期增長(zhǎng)了99.97%。

在點(diǎn)對(duì)點(diǎn)短信業(yè)務(wù)日趨下降的同時(shí)，行業(yè)類(lèi)短信成了短信業(yè)務(wù)量的新的增長(zhǎng)點(diǎn)，而行業(yè)類(lèi)短信的大量飛速增長(zhǎng)，也帶來(lái)了大量的商業(yè)性垃圾短信。商家的營(yíng)銷(xiāo)推送、日常業(yè)務(wù)推送都會(huì)給用戶(hù)帶來(lái)困擾。鑒于這種情況，相關(guān)部門(mén)也出臺(tái)了相應(yīng)的規(guī)范對(duì)行業(yè)類(lèi)短信進(jìn)行管控，例如企業(yè)簽名前置，避免企業(yè)逃避企業(yè)簽名；用戶(hù)可以使用0000進(jìn)行自主查詢(xún)退訂行業(yè)類(lèi)業(yè)務(wù)。

2.1 消息簽名問(wèn)題

現(xiàn)有規(guī)范要求：EC/SI在提交MT消息時(shí)，需自己對(duì)短信進(jìn)行拆分，假設(shè)拆分后的短信共N（N≥1）條，即Pk_total＝N，前N-1條短信不會(huì)被加簽名，第N條（即最后一條， Pk_number＝N）短信會(huì)被加上簽名。

因此當(dāng)EC故意不發(fā)送最后一條消息，可逃避企業(yè)簽名。

或者EC/SI提交短信時(shí)，故意將Msg_Fmt字段選擇為非CMPP協(xié)議明確規(guī)定的5種信息格式時(shí)，導(dǎo)致非CMPP協(xié)議規(guī)定的信息格式的短信在終端上能正確顯示，且未加簽名， 從而達(dá)到逃避行業(yè)應(yīng)用網(wǎng)關(guān)簽名的目的等。

2.2 0000/0000無(wú)法有效退訂問(wèn)題

行業(yè)應(yīng)用網(wǎng)關(guān)的黑白名單由BOSS 同步而來(lái)，當(dāng)個(gè)人用戶(hù)上行“0000/00000”退訂集團(tuán)業(yè)務(wù)后，行業(yè)網(wǎng)關(guān)對(duì)用戶(hù)主動(dòng)退訂業(yè)務(wù)進(jìn)行特殊標(biāo)記，同時(shí)反向同步至BOSS，避免集團(tuán)客戶(hù)再次將該手機(jī)號(hào)碼從BOSS側(cè)加入白名單/退出黑名單。

以上兩種方法都可以有效規(guī)范企業(yè)的行為，可一定程度上避免EC濫用短信通道導(dǎo)致用戶(hù)大量接收的現(xiàn)象。同時(shí)，還有一種通過(guò)行網(wǎng)關(guān)跨省發(fā)送垃圾的現(xiàn)象也有可能造成嚴(yán)重的后果。

2016年元旦，運(yùn)營(yíng)商EC端口被黑客攻擊，獲取了賬號(hào)、密碼權(quán)限，偽裝成正常的EC登錄行業(yè)短信網(wǎng)關(guān)，又偽裝成全網(wǎng)EC，給外省用戶(hù)發(fā)送了超過(guò)百萬(wàn)級(jí)數(shù)量的垃圾短信，其中A省因?yàn)槔绦牌脚_(tái)未能及時(shí)攔截，導(dǎo)致大量用戶(hù)接收到垃圾短信，造成了非常負(fù)面的影響。鑒于此次安全事件，在深入研究全網(wǎng)短信下發(fā)的基礎(chǔ)上，與相關(guān)部門(mén)商定后開(kāi)啟了行業(yè)網(wǎng)關(guān)主叫號(hào)段鑒權(quán)功能，避免省端用戶(hù)遭受到同樣原因?qū)е碌睦绦攀录?/p>

3 全網(wǎng)行業(yè)短信下發(fā)原理

全網(wǎng)EC/SP首先接入本地所在行業(yè)短信網(wǎng)關(guān)（一般為省級(jí)行業(yè)網(wǎng)關(guān)），將需要下發(fā)的短信內(nèi)容，接收號(hào)碼等按照CMPP協(xié)議提交到行業(yè)短信網(wǎng)關(guān)，行業(yè)網(wǎng)關(guān)根據(jù)接收號(hào)碼進(jìn)行分揀，如果是本省用戶(hù)就直接提交短信中心下發(fā)，如果是外省用戶(hù)，就通過(guò)本省行業(yè)網(wǎng)關(guān)與外省行業(yè)網(wǎng)關(guān)之間的鏈路將短信轉(zhuǎn)發(fā)，外省行業(yè)網(wǎng)關(guān)收到后再提交到該省的短信中心進(jìn)行下發(fā)。

圖1 行業(yè)網(wǎng)關(guān)業(yè)務(wù)流程圖

因?yàn)樾袠I(yè)網(wǎng)關(guān)對(duì)于前轉(zhuǎn)短消息（其他省轉(zhuǎn)到本省的消息）是基于被叫號(hào)碼轉(zhuǎn)發(fā)的，如果被叫是本省用戶(hù)則直接透?jìng)鞯蕉绦胖行?，而短信中心為了?jié)省號(hào)段資源，多為大號(hào)段匹配，所以本省某EC并不是全網(wǎng)業(yè)務(wù)，也能給全網(wǎng)用戶(hù)下發(fā)短信，如果此時(shí)垃圾短信平臺(tái)攔截不力，就會(huì)造成大量用戶(hù)投訴。具體流程如圖1所示。

4 主叫鑒權(quán)實(shí)現(xiàn)原理

對(duì)于此次案例中，如果A省能及時(shí)識(shí)別某EC并非全網(wǎng)業(yè)務(wù)，就能將垃圾短信屏蔽于網(wǎng)關(guān)之外。本著這種思路，行業(yè)網(wǎng)關(guān)開(kāi)啟了對(duì)前轉(zhuǎn)消息的主叫鑒權(quán)功能。

開(kāi)啟主叫鑒權(quán)功能以后，同時(shí)將各省對(duì)應(yīng)的全網(wǎng)EC錄入的號(hào)段鑒權(quán)表中，當(dāng)外省某EC給本省用戶(hù)發(fā)送短信時(shí)，就會(huì)在號(hào)段鑒權(quán)表進(jìn)行匹配，拒絕未申報(bào)的EC的消息進(jìn)入，進(jìn)而拒絕該EC給本省用戶(hù)下發(fā)垃圾短信。同時(shí)在制作全網(wǎng)局?jǐn)?shù)據(jù)時(shí)對(duì)主叫鑒權(quán)號(hào)段進(jìn)行更新，保證正常EC全網(wǎng)業(yè)務(wù)的順利下發(fā)。

5 結(jié)束語(yǔ)

垃圾短信的治理是一項(xiàng)長(zhǎng)期而又艱巨的任務(wù)，本文從白名單+科學(xué)封堵和行業(yè)網(wǎng)關(guān)前轉(zhuǎn)消息主叫鑒權(quán)分析了運(yùn)營(yíng)商可以采取的垃圾短信治理手段，并取得了良好的效果。但是隨著技術(shù)的不斷發(fā)展，大數(shù)據(jù)時(shí)代和云計(jì)算時(shí)代的來(lái)臨，云計(jì)算結(jié)束在治理垃圾短信問(wèn)題上突顯出相當(dāng)大的優(yōu)勢(shì)。同時(shí)，市場(chǎng)側(cè)的管理和用戶(hù)側(cè)反垃圾短信的意識(shí)提高，也是協(xié)同治理好垃圾短信的重要因素。

[1]張永軍， 劉金嶺． 基于特征詞的垃圾短信分類(lèi)器模型[J]． 計(jì)算機(jī)應(yīng)用， 2013，33(5)：1334-1337．

[2]秦曉飛， 張敏． 用市場(chǎng)化手段治理垃圾短信頑疾[J]． 業(yè)務(wù)與支撐系統(tǒng)， 2013(18)：89-92．

[3]孫大鵬． 云計(jì)算技術(shù)在垃圾短信過(guò)濾中的應(yīng)用與實(shí)現(xiàn)[J]． 信息網(wǎng)絡(luò)安全， 2015(7)：13-19．

Application of technology in spam short messages controlling

MA Run-min, LI Ying
(China Mobile Group Qinghai Co., Ltd., Xi'ning 810008, China)

The problem of spam short messages is still bothering mobile users and communication operators. According to the effect of controlling spam messages, this paper presented two methods of spam messages filtering, which based on characteristics of users and calling code authentication in IAGW forwarding messages, improved the effi ciency of spam messages controlling, reduced the rate of false alarm and made a good demonstration to social.

spam short messages; characteristics of users; calling code authentication

TN918

A

1008-5599（2016）12-0047-04

2016-11-24