羅時(shí)俊 新奧特(北京)視頻技術(shù)有限公司
我今天演講的主題是風(fēng)行云人工智能助力廣電視頻生產(chǎn)和運(yùn)營升級(jí)。演講的內(nèi)容分為三個(gè)部分,第一個(gè)部分是行業(yè)發(fā)展的現(xiàn)狀和發(fā)展的趨勢(shì)。第二個(gè)部分介紹新奧特視頻技術(shù)有限公司的風(fēng)行云如何為有線內(nèi)容生產(chǎn)運(yùn)營提供服務(wù)。最后是風(fēng)行云在人工智能發(fā)展時(shí)代新的應(yīng)用場景。
圖1展現(xiàn)的是國內(nèi)電視媒體2014年到2017年融合媒體建設(shè)的概況,除了省級(jí)電視臺(tái)媒體在進(jìn)行融合媒體的建設(shè)外,國內(nèi)一些有代表性的省有線網(wǎng)亦已開始融合媒體的建設(shè)。例如,廣東省有線網(wǎng)在2016年開始做5年規(guī)劃,計(jì)劃在2022年將他們的DVD平臺(tái)全部關(guān)閉,過渡到IP全內(nèi)容提供運(yùn)營商。我們也參與了廣西區(qū)網(wǎng)融合媒體的規(guī)劃和設(shè)計(jì),包括廣西區(qū)有線網(wǎng)和廣西區(qū)電視臺(tái)、廣西區(qū)廣播電臺(tái)、出版社的融合媒體內(nèi)容生產(chǎn)和加工項(xiàng)目。
融合媒體建設(shè)的目標(biāo)是要支撐媒體融合的發(fā)展,既要解決現(xiàn)有問題又要兼顧未來發(fā)展,既要提升傳統(tǒng)業(yè)務(wù)又要支撐新媒體業(yè)務(wù),形成支撐傳統(tǒng)媒體與新興媒體深度融合的技術(shù)體系。具體來說應(yīng)滿足以下要求:
(1)能聚合多來源、多格式、海量內(nèi)容的內(nèi)外部資源,智能化管控,整合營銷;
(2)提供視音頻制作、文字/圖片制作、網(wǎng)頁制作等多種工具,讓內(nèi)容的生產(chǎn)發(fā)布更加高效;
(3)面向多種終端,開展互動(dòng)等多種業(yè)務(wù),實(shí)現(xiàn)各種媒體的市場與產(chǎn)業(yè)融合;
(4)對(duì)用戶在多個(gè)平臺(tái)產(chǎn)生的大數(shù)據(jù)進(jìn)行挖掘分析,建立以用戶為中心的運(yùn)營服務(wù)體系,從而掌握包括內(nèi)容、平臺(tái)、用戶在內(nèi)傳媒產(chǎn)業(yè)生態(tài)鏈上的各個(gè)環(huán)節(jié)。
國務(wù)院印發(fā)的《新一代人工智能發(fā)展規(guī)劃》(以下簡稱《規(guī)劃》),提出了面向2030年我國新一代人工智能發(fā)展的指導(dǎo)思想、戰(zhàn)略目標(biāo)、重點(diǎn)任務(wù)和保障措施,部署構(gòu)筑我國人工智能發(fā)展的先發(fā)優(yōu)勢(shì),加快建設(shè)創(chuàng)新型國家和世界科技強(qiáng)國。
在中國廣電媒體融合轉(zhuǎn)型中,國內(nèi)廣電權(quán)威專家杜百川提出了媒體融合競爭策略的四個(gè)優(yōu)先:內(nèi)容優(yōu)先、移動(dòng)優(yōu)先、云優(yōu)先及AI優(yōu)先,其中,AI優(yōu)先是內(nèi)容、移動(dòng)和云優(yōu)先的靈魂,只有三個(gè)優(yōu)先都加上AI,廣電才能夠取得最后的優(yōu)勢(shì)。
圖2是新奧特風(fēng)行云的總體業(yè)務(wù)模型。
圖1 國內(nèi)電視媒體融合媒體建設(shè)概況
圖2 新奧特風(fēng)行云總體業(yè)務(wù)模型
作為一個(gè)省有線網(wǎng),要面對(duì)省里的總平臺(tái)還有市里的分平臺(tái),還會(huì)面臨跨網(wǎng)的合作,所以說云平臺(tái)管理模式、資源管理模式,包括用戶模式和流程都會(huì)使用多租戶的模式,可以通過租戶的形式來實(shí)現(xiàn)省內(nèi)總平臺(tái)和分平臺(tái)的協(xié)同工作。新奧特風(fēng)行云服務(wù)平臺(tái)可滿足融合媒體生產(chǎn)的需求。
結(jié)合新奧特多年在國內(nèi)有線網(wǎng)絡(luò)公司內(nèi)容生產(chǎn)和分發(fā)的經(jīng)驗(yàn),我們認(rèn)為下一步有線網(wǎng)絡(luò)融合平臺(tái)的建設(shè),應(yīng)該從下面幾個(gè)緯度來進(jìn)行內(nèi)容管理與生產(chǎn)方式的改進(jìn)。一是進(jìn)行云端化、服務(wù)化改造;二是進(jìn)行分布式高效率改造;三是進(jìn)行移動(dòng)便捷性改造,實(shí)現(xiàn)節(jié)目內(nèi)容及時(shí)上線;四是多租戶改造。為了提高生產(chǎn)效率,還需引進(jìn)媒體智能服務(wù),用機(jī)器自動(dòng)完成一些簡單重復(fù)的工作。
圖3 通過租戶的形式來實(shí)現(xiàn)各平臺(tái)的協(xié)同工作
圖4 內(nèi)容管理與生產(chǎn)方式的改進(jìn)
新奧特風(fēng)行云平臺(tái)具有多平臺(tái)多協(xié)議分發(fā)的能力。圖5顯示了在一個(gè)省網(wǎng)總平臺(tái)里,通過融合平臺(tái)和內(nèi)容平臺(tái)的建設(shè),臺(tái)內(nèi)全媒體生產(chǎn)的內(nèi)容可以和地市臺(tái)、地市網(wǎng)絡(luò)公司以及跨省網(wǎng)絡(luò)公司進(jìn)行內(nèi)容快速交易,包括對(duì)整個(gè)數(shù)據(jù)進(jìn)行沉淀,最后使省臺(tái)融合媒體中心可作為數(shù)據(jù)中心允許CP接入,也可以成為CP或者SP給其他用戶提供服務(wù)。
圖5 多平臺(tái)、多協(xié)議分發(fā)
目前我們?cè)谟芯€網(wǎng)絡(luò)公司建設(shè)的融合平臺(tái)已經(jīng)對(duì)接了近百家CP/SP,隨著國家有線網(wǎng)絡(luò)平臺(tái)建設(shè)的進(jìn)展,我們對(duì)接CP的用戶,包括國內(nèi)一些具有代表性的SP會(huì)越來越多。目前我們有12家省級(jí)運(yùn)營商合作伙伴,2017年我們僅用了兩個(gè)月的時(shí)間,就完成了國家有線網(wǎng)絡(luò)內(nèi)容平臺(tái)的建設(shè),可實(shí)現(xiàn)內(nèi)容注入、審核和面向全國的分發(fā)。
我們?nèi)ツ杲o阿里體育做了一整套的解決方案。阿里體育作為阿里投資的一個(gè)體育服務(wù)商,有國內(nèi)外近百個(gè)版權(quán)方提供的內(nèi)容。阿里體育起初是在上海本地系統(tǒng)對(duì)互聯(lián)網(wǎng)傳輸來的信號(hào)進(jìn)行節(jié)目收錄、快速拆條、視頻精彩內(nèi)容剪輯,然后放到優(yōu)酷平臺(tái)上。去年大型運(yùn)動(dòng)會(huì)舉行,整個(gè)生產(chǎn)建設(shè)平臺(tái)容量以及使用效率都不能滿足阿里體育的要求,所以阿里體育要求我們?cè)诎⒗镌茦?gòu)建平臺(tái),進(jìn)行節(jié)目收錄、節(jié)目拆條、節(jié)目精編和節(jié)目的分發(fā)。我們根據(jù)它的要求,在阿里云上構(gòu)建了一整套服務(wù)平臺(tái),支持在奧運(yùn)會(huì)期間以及今后業(yè)務(wù)的快速發(fā)展。該系統(tǒng)有以下幾個(gè)特點(diǎn):
(1)利用阿里云提供公有云服務(wù),在阿里云上構(gòu)建了風(fēng)行云內(nèi)容生產(chǎn)和發(fā)布平臺(tái),解決了內(nèi)容快速生產(chǎn)和發(fā)布的需求;
(2)原來建設(shè)的上海本地系統(tǒng)可以線上線下并行工作互為備份,可應(yīng)對(duì)快速增長的運(yùn)營節(jié)奏;
(3)降低了運(yùn)營成本;全面提高了用戶體驗(yàn)度。
圖6 阿里體育云平臺(tái)解決方案
下面介紹人工智能在新奧特風(fēng)行云產(chǎn)品中的應(yīng)用場景。
第一個(gè)應(yīng)用場景,查重去重。有線運(yùn)營商只要做內(nèi)容生產(chǎn)加工的處理,就會(huì)有內(nèi)容部門,有幾十人甚至有上百人進(jìn)行內(nèi)容的加工處理,包括節(jié)目拆條、廣告過濾、鑒黃鑒暴,以及對(duì)廣告特定人物的審核;在我們的整個(gè)內(nèi)容平臺(tái)里對(duì)接了上百家CP/SP,里面很多內(nèi)容大部分是重復(fù)的,如果這些內(nèi)容靠人工篩選,不可能單純看名字查找,放在播放平臺(tái)上會(huì)有大量同質(zhì)化的情況。我們可以由機(jī)器進(jìn)行智能化分析,所有入庫的內(nèi)容形成DNA,對(duì)DNA序列進(jìn)行對(duì)比,可有效達(dá)到查重去重的目的。
第二個(gè)應(yīng)用場景,智能編目。在互聯(lián)網(wǎng)上爬取補(bǔ)齊,并不能從根本上解決編目的快速性。新奧特新的AI服務(wù)可以應(yīng)對(duì)不同的查詢方式,可對(duì)整個(gè)節(jié)目內(nèi)容進(jìn)行OCR自動(dòng)提取,視頻在播放過程中,比如《新聞聯(lián)播》播放過程中,我們可以把它的標(biāo)題、唱詞字幕全部提取出來,形成文本,放在編目項(xiàng)目里面;還可自動(dòng)對(duì)關(guān)鍵幀特征提取、標(biāo)簽提取、語音識(shí)別、人臉識(shí)別。運(yùn)用語言識(shí)別技術(shù),視頻語音的編目就不再需要人工挑選。運(yùn)用人臉識(shí)別技術(shù),可自動(dòng)對(duì)政治人物、特殊人物和敏感人物進(jìn)行圖像識(shí)別。
第三個(gè)應(yīng)用場景,智能搜索。
圖7 查重去重應(yīng)用場景
圖8 智能編目應(yīng)用場景
(1)基于關(guān)鍵詞的內(nèi)容查找,改變傳統(tǒng)先編目后檢索的工作模式。例如:輸入“張三”,則不僅可以搜出編目信息里含有“張三”的內(nèi)容,還能通過人臉識(shí)別搜出所有“張三”人臉的視頻,通過語音識(shí)別搜出所有口播中提到“張三” 兩個(gè)字的音頻及視頻。
(2)相似視頻查找。根據(jù)視頻特征,查找內(nèi)容相似的節(jié)目視頻。
(3)基于圖片的信息查詢。例如:一張風(fēng)景圖,不知其地點(diǎn),則可上傳該圖片,立刻搜索出該圖片的相關(guān)介紹或新聞、相似圖片、以及出現(xiàn)過類似圖片的視頻。也可以關(guān)鍵幀為起點(diǎn),搜索包含該圖片的視頻節(jié)目。
第四個(gè)應(yīng)用場景,自動(dòng)拆條服務(wù)。自動(dòng)拆條服務(wù)可以做到邊收錄、邊拆條、邊分析。對(duì)特征值進(jìn)行比對(duì)后,把特征值效率寄存到播放器里,讓人工快速進(jìn)行復(fù)審,通過現(xiàn)場比對(duì),可以提高10倍左右速度的效率。
最后介紹一下新奧特的內(nèi)容審核產(chǎn)品。新奧特內(nèi)容審核系統(tǒng)架構(gòu)見圖9,包括技術(shù)指標(biāo)分析、片頭片尾分析、敏感人物檢測(cè)、敏感詞分析、廣告分析、人臉識(shí)別、語音識(shí)別和黃反檢測(cè)。我們的敏感人物檢測(cè)技術(shù)可以對(duì)整個(gè)畫幅的1/20進(jìn)行檢測(cè),比如桌面上擺一張照片,有這個(gè)人的鏡頭也可以檢測(cè)出來,進(jìn)行標(biāo)記后遞交給相應(yīng)的復(fù)核人員。
此外,作為節(jié)目制作的強(qiáng)化支撐,新奧特的輕量級(jí)視頻編輯工具具有以下特點(diǎn):(1)基于BS的幀精確非編體驗(yàn),10倍編輯效率,30倍速合成拼接;(2)支持字模編輯、遮臺(tái)標(biāo)、加特技;(3)純CPU計(jì)算,支持公有云;(4)超高性能,多節(jié)點(diǎn)并發(fā)實(shí)時(shí)編輯;(5)支持IOS/Android手機(jī)快速編輯。
圖9 自動(dòng)拆條服務(wù)應(yīng)用場景
圖10 新奧特內(nèi)容審核系統(tǒng)架構(gòu)