班雪飛 倪峰 周瑋 馬占婕 孫忠?guī)r

DOI：10.19850/j.cnki.2096-4706.2024.01.020

收稿日期：2023-05-24

摘? 要：伴隨三網(wǎng)融合的深入開展以及智慧物聯(lián)網(wǎng)技術(shù)的發(fā)展，家庭寬帶加互聯(lián)網(wǎng)電視已成為新的智慧家庭入口。為了解決互聯(lián)網(wǎng)電視業(yè)務(wù)質(zhì)量監(jiān)測手段在時序上的先天滯后無法先于用戶發(fā)現(xiàn)隱患故障的問題，通過引入神經(jīng)網(wǎng)絡(luò)LSTM算法實現(xiàn)數(shù)據(jù)注智業(yè)務(wù)運維能力，聚焦EPG業(yè)務(wù)服務(wù)質(zhì)量，從業(yè)務(wù)歷史波動識別異常并做出預(yù)測預(yù)警，實現(xiàn)EPG業(yè)務(wù)質(zhì)差隱患識別和預(yù)測，隱患發(fā)現(xiàn)時長縮短至0.5小時，隱患識別及時率和準(zhǔn)確率均在90%以上。

關(guān)鍵詞：互聯(lián)網(wǎng)電視；EPG業(yè)務(wù)質(zhì)量；LSTM算法；隱患預(yù)測

中圖分類號：TP391? 文獻(xiàn)標(biāo)識碼：A? 文章編號：2096-4706（2024）01-0099-05

Application Research on Prediction of Hidden Dangers in Internet Television EPG Business Based on LSTM Neural Network Algorithm

BAN Xuefei， NI Feng， ZHOU Wei， MA Zhanjie， SUN Zhongyan

（China Mobile Inner Mongolia Co.， Ltd.， Hohhot? 010010， China）

Abstract： With the deepening of the integration of the triple play and the development of smart Internet of Things technology， home broadband and internet television have become a new entry point for smart homes. In order to solve the problem of congenital lag in the timing of internet television business quality monitoring methods that cannot detect hidden faults before users， a LSTM neural network algorithm is introduced to achieve data injection intelligence business operation and maintenance capabilities. It focuses on the quality of EPG business services， identifies anomalies from business historical fluctuations and making predictive early warnings， and achieves the identification and prediction of EPG business quality hidden dangers. The length of hidden dangers discovery time is reduced to 0.5 hours， and the timely and accurate rates of hidden danger identification are above 90%.

Keywords： internet TV; EPG business quality; LSTM algorithm; prediction of hidden dangers

0? 引? 言

2021年全國互聯(lián)網(wǎng)電視（OTT）用戶10.83億，交互式網(wǎng)絡(luò)電視（IPTV）用戶超3億[1]，互聯(lián)網(wǎng)電視用戶規(guī)模已進(jìn)入存量經(jīng)營的穩(wěn)健階段，已從流量經(jīng)營轉(zhuǎn)變?yōu)橘|(zhì)量經(jīng)營，需要不斷提升用戶業(yè)務(wù)感知，達(dá)成提升留存促進(jìn)活躍的目的。

電子節(jié)目單（Electronic Program Guide， EPG）是用戶訪問互聯(lián)網(wǎng)電視的入口，EPG業(yè)務(wù)質(zhì)量優(yōu)劣對用戶業(yè)務(wù)感知起到非常關(guān)鍵的作用，質(zhì)量經(jīng)營需要重點關(guān)注EPG業(yè)務(wù)質(zhì)量監(jiān)測。

目前運營商已建立了較為完善的監(jiān)控體系，采集了海量的EPG體驗數(shù)據(jù)，形成多維度的監(jiān)控指標(biāo)，但監(jiān)控指標(biāo)繁多，人工運維無法及時發(fā)現(xiàn)異常，也難以確定異常原因[2]。伴隨著業(yè)務(wù)形態(tài)的持續(xù)發(fā)展，運維部門需要考慮和研究如何實現(xiàn)自動化、智能化快速準(zhǔn)確地識別EPG隱患，避免出現(xiàn)大面積故障問題。

1? 現(xiàn)狀和解決思路

1.1? 現(xiàn)狀

互聯(lián)網(wǎng)電視特殊的業(yè)務(wù)模式導(dǎo)致在對EPG內(nèi)容源的服務(wù)質(zhì)量監(jiān)控上有明顯的滯后性。EPG相關(guān)業(yè)務(wù)需要頻繁更新和調(diào)整以適應(yīng)業(yè)務(wù)和市場發(fā)展需求，比如EPG版本更新、熱門視頻資源更新、EPG模塊更新等，業(yè)務(wù)調(diào)整過程中產(chǎn)生的潛在隱患問題造成的影響往往隨著活躍用戶量增加后才顯現(xiàn)出來，同時當(dāng)前對EPG業(yè)務(wù)的監(jiān)測手段主要依靠日志分析，伴隨數(shù)據(jù)處理的延遲使得在EPG業(yè)務(wù)保障的時效性較差，對隱患故障的檢測和發(fā)現(xiàn)嚴(yán)重滯后，無法及時或先于用戶發(fā)現(xiàn)隱患故障。

1.2? 解決思路

圍繞EPG業(yè)務(wù)的質(zhì)差識別和故障分析手段，雖然有數(shù)據(jù)處理平臺提供海量數(shù)據(jù)處理和閾值告警，可以基于固定規(guī)則產(chǎn)生告警但經(jīng)過人為調(diào)試的故障告警信息并不是很準(zhǔn)確，只有固定的“數(shù)”缺乏動態(tài)的“智”。隨著人工智能的興起，深度學(xué)習(xí)和神經(jīng)網(wǎng)絡(luò)等人工智能技術(shù)在智能預(yù)測與決策領(lǐng)域得到廣泛發(fā)展[3]。

在神經(jīng)網(wǎng)絡(luò)算法選擇方面，本次研究選用長短期記憶網(wǎng)絡(luò)（Long Short-Term Memory， LSTM）算法，文獻(xiàn)[4]提供了多種典型時間序列模型的實驗對比并驗證了LSTM預(yù)測模型在故障時間序列分析中具有很強的適用性和更高的準(zhǔn)確性[4]。

輸入以EPG門戶訪問過程中產(chǎn)生的可以表征EPG業(yè)務(wù)質(zhì)量波動的數(shù)據(jù)，進(jìn)行算法訓(xùn)練，預(yù)測EPG業(yè)務(wù)關(guān)鍵指標(biāo)未來N個周期結(jié)果。同時基于關(guān)鍵指標(biāo)最近歷史7個周期的加權(quán)平均值，將預(yù)測結(jié)果與加權(quán)平均值進(jìn)行偏差對比，根據(jù)預(yù)測值和設(shè)定閾值偏差情況輸出互聯(lián)網(wǎng)電視EPG業(yè)務(wù)是否發(fā)生質(zhì)差隱患的預(yù)測結(jié)果，實現(xiàn)EPG質(zhì)差隱患預(yù)警并聯(lián)動業(yè)務(wù)主管部門進(jìn)行問題排查與修復(fù)，減少大面積故障的發(fā)生，形成感知-分析-決策-執(zhí)行的閉環(huán)模式，助力互聯(lián)網(wǎng)電視業(yè)務(wù)自保障、自監(jiān)控、自修復(fù)和自優(yōu)化能力建設(shè)。

2? 手段實現(xiàn)與驗證

以采集機頂盒用戶使用過程以及體驗信息為原始數(shù)據(jù)，利用大數(shù)據(jù)處理手段對EPG業(yè)務(wù)維度關(guān)鍵指標(biāo)提煉與匯總，以匯總后的EPG業(yè)務(wù)維度關(guān)鍵指標(biāo)作為輸入，輸出EPG業(yè)務(wù)質(zhì)量預(yù)測結(jié)果。關(guān)鍵處理流程經(jīng)歷數(shù)據(jù)采集與指標(biāo)提煉、搭建環(huán)境引入LSTM算法模型、預(yù)測值與期望偏差管理、預(yù)測結(jié)論輸出與預(yù)警四個環(huán)節(jié)。如圖1所示。

2.1? 數(shù)據(jù)采集與指標(biāo)提煉

對機頂盒軟探針上報各類數(shù)據(jù)的清洗入庫，提取EPG業(yè)務(wù)服務(wù)器IP維度關(guān)鍵指標(biāo)如EPG響應(yīng)成功率、EPG響應(yīng)時延，按照5分鐘/10分鐘/15分鐘等不同粒度的N周期（N≥7）數(shù)據(jù)進(jìn)行模型訓(xùn)練數(shù)據(jù)輸出。

2.2? 實驗環(huán)境與LSTM算法模型

實驗環(huán)境：服務(wù)器采用云主機，CPU20核心，內(nèi)存32 GB，存儲空間1 TB。操作系統(tǒng)為Ubuntu 16.04 LTS，開發(fā)環(huán)境部署Python 3.6，使用Keras 2.2.0搭建神經(jīng)網(wǎng)絡(luò)及使用TensorFlow 1.10.0后端張量運算軟件包。

算法模型：采用LSTM算法模型，它是一種時間遞歸神經(jīng)網(wǎng)絡(luò)（RNN），它可以學(xué)習(xí)時間序列中的長短期信息，尋找其變化模式，在一些時序信號預(yù)測方面獲得較好的效果。它的主要結(jié)構(gòu)包含一組記憶單元和三種門結(jié)構(gòu)（輸入門、遺忘門、輸出門），用于控制歷史信息的使用[5]。

LSTM神經(jīng)網(wǎng)絡(luò)的邏輯結(jié)構(gòu)如圖2所示。

ft表示遺忘門的輸出，遺忘門決定上一步傳遞過來的信息中有哪些信息需要進(jìn)行丟棄。

輸入門由兩部分組成：第一部分使用了sigmoid激活函數(shù)，輸出為it；第二部分使用了tanh激活函數(shù)，輸出為 。

輸入門和遺忘門的輸出相結(jié)合，構(gòu)成了LSTM的長期狀態(tài)信息Ct輸出門則決定了當(dāng)前神經(jīng)元的輸出ot和將要傳遞給下一步的短期隱藏狀態(tài)信息ht，輸出結(jié)果則利用上一時刻的短期狀態(tài)、長期狀態(tài)值和當(dāng)前輸入值的保留部分得到[6]。主要實現(xiàn)步驟及關(guān)鍵式[7]如下：

1）遺忘門決定需要從輸入的記憶單元中丟棄哪些信息，算式如下：

（1）

2）第二步是要決定將哪些信息存儲在記憶單元中，算式如下：

（2）

（3）

3）第三步更新記憶單元，將記憶單元Ct-1更新為Ct，算式如下：

（4）

4）最后基于當(dāng)前記憶單元決定輸出，算式如下：

（5）

（6）

2.3? 數(shù)據(jù)歸一化處理

讀取連續(xù)多個10分鐘粒度周期互聯(lián)網(wǎng)電視EPG業(yè)務(wù)維度包含兩類關(guān)鍵指標(biāo)的數(shù)據(jù)并進(jìn)行數(shù)據(jù)歸一化處理，減小輸入的特征數(shù)據(jù)間數(shù)量級差別較大導(dǎo)致的模型預(yù)測誤差，提升模型精度[8]。EPG內(nèi)容源指標(biāo)特征采用的離差標(biāo)準(zhǔn)化（Min-Max Normalization），對原始各個特征值作線性變換，歸一化后數(shù)據(jù)的取值范圍在[0，1]之間。轉(zhuǎn)換函數(shù)如下：

（7）

其中，max表示一段樣本特征數(shù)的最大值，min表示該段樣本特征數(shù)據(jù)的最小值，x表示本段樣本的當(dāng)前值，xn表示經(jīng)過歸一化后的特征數(shù)據(jù)。

對前述樣例數(shù)據(jù)歸一化后，根據(jù)歸一化后的排序，在[0，1]區(qū)間上基本符合正態(tài)分布。如圖3所示。

圖3? 某段樣例數(shù)據(jù)歸一化處理結(jié)果

選擇雙向LSTM神經(jīng)網(wǎng)絡(luò)模型（Bidirectional， LSTM），構(gòu)建神經(jīng)網(wǎng)絡(luò)層，配置輸入層維度（input_shape）、選擇sigmoid作為激活函數(shù)、設(shè)定輸出層維度等；設(shè)定學(xué)習(xí)率（Lr）進(jìn)行編譯，損失函數(shù)采用均方差損失函數(shù)（Mean Square Error），使用梯度下降算法，通過求解導(dǎo)數(shù)找出目標(biāo)函數(shù)值在多維度解空間內(nèi)能夠產(chǎn)生最大變化的方向，并向該方向以一定的步長靠攏，達(dá)成目標(biāo)函數(shù)下降或上升的目的，遞歸性地獲取最小偏差模型[9]；設(shè)定樣本分組數(shù)、訓(xùn)練次數(shù)、屏顯模式等，輸出并完成預(yù)測數(shù)據(jù)處理。關(guān)鍵參數(shù)設(shè)置如表1所示。

2.4? 預(yù)測值與動態(tài)期望偏差管理

經(jīng)過LSTM算法計算的預(yù)測值，首先進(jìn)行數(shù)據(jù)校正，使其及滿足過程約束又與測量值的偏差平方和最小以供使用[10]。利用3σ準(zhǔn)則進(jìn)行約束，確保預(yù)測結(jié)果的偏差符合正態(tài)分布。以EPG請求成功率指標(biāo)為例，基于連續(xù)3月歷史數(shù)據(jù)統(tǒng)計均值為98.3，標(biāo)準(zhǔn)差為±0.8，基于3σ準(zhǔn)則，預(yù)測值的上下限落在95.9～100.7之間時，表示預(yù)測數(shù)據(jù)可用。若偶有預(yù)測值偏離3σ準(zhǔn)則，則重新進(jìn)行預(yù)測，若預(yù)測值連續(xù)7次均偏離3σ準(zhǔn)則，則需要調(diào)整LSTM算法參數(shù)，重新建模進(jìn)行預(yù)測。

動態(tài)期望值采用最近連續(xù)7個周期實際發(fā)生的指標(biāo)的加權(quán)平均數(shù)（）來表示，如式（8）所示：

（8）

其中，x1為最新周期的指標(biāo)值，x7為距最新周期之前的第7個周期的指標(biāo)值；w為對應(yīng)周期指標(biāo)的權(quán)重，w1的權(quán)重為40%，w2的權(quán)重為20%；w3的權(quán)重為15%，w4的權(quán)重為10%，w5、w6、w7的權(quán)重均為5%。即最近兩個周期的指標(biāo)對動態(tài)期望值影響最大。

若預(yù)測的EPG業(yè)務(wù)服務(wù)器IP維度各關(guān)鍵指標(biāo)與動態(tài)期望值的偏差為正向偏差（即預(yù)測指標(biāo)值優(yōu)于動態(tài)期望值），則不產(chǎn)生預(yù)警信息；若預(yù)測的EPG業(yè)務(wù)服務(wù)器IP維度關(guān)鍵指標(biāo)的任一指標(biāo)值與動態(tài)期望值負(fù)向偏差≥3%或連續(xù)三個周期均為負(fù)向偏差且偏差值之和≥3%，則產(chǎn)生業(yè)務(wù)源存在質(zhì)差隱患預(yù)警信息。

預(yù)測值與動態(tài)期望偏差預(yù)警模型如圖4所示，指標(biāo)預(yù)測預(yù)警觸發(fā)記錄如圖5所示。

2.5? 預(yù)測結(jié)果分析

根據(jù)訓(xùn)練驗證集0.2設(shè)定，利用20%數(shù)據(jù)用于驗證，準(zhǔn)確度平均指標(biāo)選用MSE函數(shù)，根據(jù)指標(biāo)驗證情況，預(yù)測EPG請求成功率指標(biāo)MSE均方誤差為0.788 7，EPG請求成功率指標(biāo)預(yù)測值和實際值偏差較?。活A(yù)測EPG響應(yīng)時延指標(biāo)MSE均方誤差為10.740 2，由于時延類指標(biāo)受網(wǎng)絡(luò)波動影響較大，因此EPG響應(yīng)時延指標(biāo)預(yù)測值和實際值偏差屬于正常。MSE評估情況如表2所示。

2.6? 場景部署實現(xiàn)

采用微服務(wù)的API方式部署，使用Docker容器化方式進(jìn)行版本發(fā)布，客戶端調(diào)用本地數(shù)據(jù)處理平臺完成批量預(yù)處理，將計算結(jié)果實時抽取至業(yè)務(wù)邏輯層進(jìn)行邏輯計算并生成預(yù)測和判斷結(jié)果，最后由功能實現(xiàn)層通過HTTP接口將預(yù)測和判斷結(jié)果返回并呈現(xiàn)。

3? 方案成效

本研究通過引入LSTM深度學(xué)習(xí)算法，對EPG業(yè)務(wù)關(guān)鍵KPI指標(biāo)進(jìn)行預(yù)測，并引入動態(tài)期望偏差對預(yù)測結(jié)果進(jìn)行預(yù)警管理，提升預(yù)測結(jié)果可靠性。

在工具和手段提升方面，改變監(jiān)控手段由“被動”監(jiān)測變“主動”預(yù)測，先于用戶發(fā)現(xiàn)EPG業(yè)務(wù)隱患的問題。由單純依賴人工識別和判斷隱患故障變?yōu)榛谡鎸嵱脩魯?shù)據(jù)的AI預(yù)測為主、人工識別為輔的智能化提升。

在效率提升方面，當(dāng)EPG業(yè)務(wù)存在隱患時，基于現(xiàn)網(wǎng)真實數(shù)據(jù)的反映，可在3個數(shù)據(jù)上報周期內(nèi)基于指標(biāo)的變化做出相應(yīng)的預(yù)測，隱患發(fā)現(xiàn)時長由1～6小時縮短至0.5小時，隱患識別及時率和準(zhǔn)確率均在90%以上。

互聯(lián)網(wǎng)電視EPG業(yè)務(wù)隱患落地效果對比如表3所示。

4? 結(jié)? 論

本研究主要聚焦互聯(lián)網(wǎng)電視EPG業(yè)務(wù)隱患預(yù)測場景，參考自動駕駛網(wǎng)絡(luò)理念，引入AI算法實現(xiàn)對傳統(tǒng)互聯(lián)網(wǎng)電視業(yè)務(wù)運維能力注智，對現(xiàn)有的監(jiān)控保障手段進(jìn)行升級。通過對關(guān)鍵指標(biāo)的智能化處理實現(xiàn)對互聯(lián)網(wǎng)電視業(yè)務(wù)源故障的預(yù)測和干預(yù)，完善了互聯(lián)網(wǎng)電視用戶業(yè)務(wù)感知管理手段，較好地支撐了業(yè)務(wù)運維數(shù)智化轉(zhuǎn)型建設(shè)。

參考文獻(xiàn)：

[1] 國家廣播電視總局規(guī)劃財務(wù)司.2021年全國廣播電視行業(yè)統(tǒng)計公報 [EB/OL].（2022-04-25）.https：//www.nrta.gov.cn/art/2022/4/25/art_113_60195.html.

[2] 譚曉敏，方艾，金鐸，等.IPTV用戶體驗異常的自動化檢測 [J].電信科學(xué)，2019，35（7）：159-164.

[3] 余樂安.基于人工智能的預(yù)測與決策優(yōu)化理論和方法研究 [J].管理科學(xué)，2022，35（1）：60-66.

[4] 王鑫，吳際，劉超，等.基于LSTM循環(huán)神經(jīng)網(wǎng)絡(luò)的故障時間序列預(yù)測 [J].北京航空航天大學(xué)學(xué)報，2018，44（4）：772-784.

[5] 黃林，王電鋼，劉蕭，等.基于LSTM的網(wǎng)絡(luò)流量預(yù)測方法 [J].計算機應(yīng)用研究，2020，37（S1）：264-265+272.

[6] 任藝柯.基于改進(jìn)的LSTM網(wǎng)絡(luò)的交通流預(yù)測 [D].大連：大連理工大學(xué)，2019.

[7] 楊星鑫，呂澤均.基于LSTM的無人機軌跡識別技術(shù)研究 [J].現(xiàn)代計算機，2020（5）：18-22+25.

[8] 龐悅，趙威，張雅楠，等.基于深度學(xué)習(xí)的LSTM的交通流量預(yù)測 [J].單片機與嵌入式系統(tǒng)應(yīng)用，2019，19（3）：72-75.

[9] 程肖冰，曹麗婷，李蘇建.基于混合優(yōu)化神經(jīng)網(wǎng)絡(luò)的零售銷量預(yù)測 [J].統(tǒng)計與決策，2022，38（6）：185-188.

[10] 李九龍，周凌柯.基于“3σ法則”的顯著誤差檢測 [J].計算機與現(xiàn)代化，2012（1）：10-13.

作者簡介：班雪飛（1978—），女，漢族，內(nèi)蒙古烏蘭

察布人，工程師，碩士，研究方向：互聯(lián)網(wǎng)和傳輸新技術(shù)；倪峰（1993—），男，滿族，內(nèi)蒙古赤峰人，工程師，碩士，研究方向：大數(shù)據(jù)和人工智能新技術(shù)；周瑋（1984—），男，漢族，內(nèi)蒙古呼和浩特人，高級工程師，碩士，研究方向：移動通信系統(tǒng)領(lǐng)域OSS系統(tǒng)規(guī)劃、建設(shè)和項目管理；馬占婕（1983—），女，漢族，內(nèi)蒙古巴彥淖爾人，高級工程師，本科，研究方向：互聯(lián)網(wǎng)、資源管理、人工智能；孫忠?guī)r（1980—），女，蒙古族，遼寧大連人，高級工程師，碩士，研究方向：移動通信領(lǐng)域項目方案規(guī)劃、建設(shè)和管理。