胡琳

摘要：人工智能技術(shù)的發(fā)展推動(dòng)了AI手語技術(shù)的更新迭代，并在我國新聞報(bào)道中得到了一定的運(yùn)用。目前中國有2700萬聽障人士，他們與外界溝通的難度極大。為了解決這些特殊群體的實(shí)際問題，在媒體融合發(fā)展的實(shí)踐中，我國開始注重對(duì)現(xiàn)有AI手語播報(bào)進(jìn)行優(yōu)化改進(jìn)。目前，AI手語技術(shù)主要在新聞、氣象、科教、綜藝等節(jié)目中廣泛應(yīng)用。本文主要從媒體融合視角，分析AI手語在新聞報(bào)道中的發(fā)展現(xiàn)狀，并從技術(shù)賦能、數(shù)據(jù)庫建設(shè)、多媒介交流等多維度分析其突破路徑。

關(guān)鍵詞：媒體融合 AI手語 新聞報(bào)道 人工智能

2020年11月，國家廣電總局頒布《廣播電視技術(shù)迭代實(shí)施方案（2020-2022年）》，提出要推進(jìn)內(nèi)容生產(chǎn)便捷化和智慧化，其中包括“編制智能機(jī)器人AI播報(bào)、機(jī)器人手語技術(shù)方案，逐步推動(dòng)虛擬主播、動(dòng)畫手語等技術(shù)在新聞、綜藝、氣象、科教等節(jié)目中的應(yīng)用等”。AI手語播報(bào)是依托于人工智能技術(shù)，以虛擬人主播為主體呈現(xiàn)在各類終端的一種新型技術(shù)。虛擬人主播具有形象逼真、肢體語言連貫自然、學(xué)習(xí)能力效率超強(qiáng)等特點(diǎn)。AI手語使主流社會(huì)信息在聽覺障礙群體中得到更廣泛的傳播，為構(gòu)建無障礙的媒介環(huán)境發(fā)揮重要作用。

在媒體融合的背景下，可視化媒介資源、多元化媒介窗口、迭代化傳媒技術(shù)以及戰(zhàn)略性的IP打造等成為AI手語技術(shù)與新聞報(bào)道結(jié)合的關(guān)鍵錨點(diǎn)，而媒體融合、深度報(bào)道技術(shù)以及信息無障礙環(huán)境則成為二者結(jié)合的關(guān)鍵突破方向。對(duì)此，筆者結(jié)合長沙市廣播電視臺(tái)在AI手語新聞播報(bào)方面的實(shí)踐，對(duì)媒體融合大背景下AI手語技術(shù)與新聞播報(bào)相結(jié)合的發(fā)展與突破進(jìn)行深入剖析，以期為今后人工智能技術(shù)更好地應(yīng)用于媒體之中提供借鑒。

一、AI手語技術(shù)在新聞報(bào)道中的應(yīng)用現(xiàn)狀

我國有2700萬聽障人士，手語是聽障人士之間溝通交流、獲取信息的主要語言。但受到手語主持人數(shù)量的限制，目前許多電視節(jié)目和新聞直播中都缺少手語主播。為了讓聽障群體也能夠快捷、準(zhǔn)確、全面地獲取新聞資訊，各地廣電媒體紛紛開設(shè)手語欄目，或是將AI手語技術(shù)應(yīng)用到日常節(jié)目之中。AI手語技術(shù)使主流社會(huì)信息在聽障人群中得到更廣泛地普及，為構(gòu)建無障礙城市做出了重要貢獻(xiàn)。

1.手語主播的類型劃分。在新聞報(bào)道節(jié)目中，手語主播主要有3種類型，即健全人、聽障人和虛擬人。第一類是健全人。目前，由健全人來進(jìn)行新聞報(bào)道直播是最普遍的，一般都是專門的手語老師或者殘疾人協(xié)會(huì)的工作人員。作為健全人，他們?cè)谂c新聞采編人員溝通方面具有較大的優(yōu)越性，但是由于不是聽力障礙者，不能設(shè)身處地理解聽障人群的需求，因此在聽障群體中沒有得到很好的認(rèn)可。北京師范大學(xué)2012年針對(duì)接近一萬名聽障人士開展的跨地區(qū)調(diào)查顯示，健全人打的手語只有8%的聽障人能夠全部看懂，56%的聽障人能看懂部分，29%的聽障人基本看不懂。第二類是聽障人。一些電視臺(tái)聘請(qǐng)了部分文化素養(yǎng)較高的聽障人來充當(dāng)手語主持人，這些人對(duì)聽障人士的信息環(huán)境比一般人要了解得多，更符合聽障人士的實(shí)際。但是，在對(duì)復(fù)雜文稿的理解上也存在很多不足之處。第三類是借助于人工智能技術(shù)研發(fā)而成的AI手語主播。近年來，具有數(shù)據(jù)化、標(biāo)準(zhǔn)化等特點(diǎn)的AI手語技術(shù)已日趨完善。2020年6月，長沙廣電將自主研發(fā)的人工智能手語電視播報(bào)系統(tǒng)應(yīng)用于《長沙新聞》欄目中，打造手語信息化的新聞場景應(yīng)用，實(shí)現(xiàn)了AI手語技術(shù)與時(shí)政電視新聞的結(jié)合，致力于構(gòu)建無障礙傳播的媒介環(huán)境。目前該系統(tǒng)已安全平穩(wěn)運(yùn)行近三年的時(shí)間，播出時(shí)長超過20000分鐘。

2.AI手語新聞播報(bào)的主要呈現(xiàn)方式。目前，國內(nèi)AI手語播報(bào)有3種呈現(xiàn)方式，并衍生出了各種形式的手語節(jié)目。第一類是以新聞主播為主視窗，AI手語主播為輔視窗，主視窗在畫面中的比例超過80%，而輔視窗則安排于主視窗畫面前的左下角或右下角，形成“畫中畫”的視覺效果。這種也是目前最常用的一種呈現(xiàn)方式。第二類是以AI手語主播為主視窗，新聞主持人為輔視窗，手語主播占據(jù)了屏幕的主要畫幅。這類呈現(xiàn)方式主要面向聽障人群，更多的是在殘疾人教學(xué)中使用，并未在大眾媒體中進(jìn)行普及。第三類是AI手語主播與主持人的畫幅相同，兩部分播放框處于并列關(guān)系，而這種呈現(xiàn)方式相比于第一類、第二類，在國內(nèi)的應(yīng)用更少，僅出現(xiàn)在少數(shù)廣播電視臺(tái)。如北京冬奧會(huì)期間，為了推介AI虛擬人手語主播，央視主持人朱廣權(quán)和AI手語主播進(jìn)行線上語速PK，就是采用的畫幅相同的呈現(xiàn)方式。

二、媒體融合視角下AI手語技術(shù)在新聞報(bào)道中應(yīng)用的關(guān)鍵點(diǎn)

在媒體融合時(shí)代，AI手語技術(shù)在新聞報(bào)道中得到廣泛應(yīng)用。尤其是通過可視化的媒介資源、多元化的媒介窗口、迭代化的媒體技術(shù)、戰(zhàn)略性的IP運(yùn)營，讓AI手語更有助于聽障人士了解政策資訊，實(shí)現(xiàn)傳播效果的最大化和最優(yōu)化。

1.可視化的媒介資源?？梢暬且婚T新興的交叉學(xué)科，通過可視化的表達(dá)與交互傳感技術(shù)，使得用戶能夠親眼看到、親自探索以至深入理解深層次的抽象化的大量信息。人工智能在新聞播報(bào)中的“破圈”，就是以信息可視化技術(shù)的發(fā)展迭代為基礎(chǔ)的。信息可視化創(chuàng)建了以直觀易懂的形式表達(dá)抽象信息的手段和方法，結(jié)合語音識(shí)別、計(jì)算機(jī)翻譯等人工智能技術(shù)，構(gòu)建起一套復(fù)雜而精準(zhǔn)的手語翻譯引擎，將文字、音頻、視頻等成功翻譯為手語，再通過專門為手語優(yōu)化而研發(fā)的自然動(dòng)作引擎，進(jìn)行虛擬形象的驅(qū)動(dòng)。這些技術(shù)使AI手語主播具備了高識(shí)別度的手語表達(dá)能力和精準(zhǔn)流暢的手語呈現(xiàn)效果。

2.多元化的媒介窗口。在新聞報(bào)道中，聽障群體受語言交流的局限，容易對(duì)信息資訊的理解產(chǎn)生歧義或誤區(qū)。伴隨著“互聯(lián)網(wǎng)+新聞報(bào)道”的推廣和人工智能的應(yīng)用，各個(gè)媒體的技術(shù)硬件得到了升級(jí)，新聞報(bào)道的配套軟件也越來越人性化。利用這些新型技術(shù)，將新聞報(bào)道以圖片、動(dòng)畫、視頻的形式展現(xiàn)在聽障群體面前，并輔以AI手語主播、字幕等多種形式，將抽象思維以一種直觀易懂的方式向他們傳達(dá)出來。此外，AI手語主播還應(yīng)用在手機(jī)小屏上，采用大小屏聯(lián)動(dòng)的方式，突破新聞播報(bào)的時(shí)空限制，確保聽障用戶能夠隨時(shí)隨地收看。

早在2020年，長沙廣電就利用人工智能技術(shù)，實(shí)現(xiàn)了一個(gè)AI手語主播與一個(gè)專業(yè)播音員同屏呈現(xiàn)進(jìn)行新聞直播，將新聞報(bào)道技術(shù)與聽障群體認(rèn)知規(guī)律相結(jié)合，研發(fā)了“三視融合”新聞報(bào)道形式，構(gòu)建了“三窗同屏”新聞報(bào)道模式，進(jìn)行了“三視融合+三窗同屏”的混合新聞報(bào)道改革，突破聽障群體對(duì)于新聞報(bào)道的解讀障礙，有效促進(jìn)信息的平等傳播。

“三視融合”是依據(jù)殘障觀眾依賴于視覺獲得資訊的認(rèn)識(shí)模式，運(yùn)用新聞直播軟件、影像制作軟件，把政策信息、時(shí)事熱點(diǎn)、民生民情等報(bào)道內(nèi)容制作成“視頻+AI手語+字幕”的新聞報(bào)道（如圖1），通過即時(shí)通訊媒體、AI手語在線播報(bào)及直播平臺(tái)等媒介，以打破聽障群體對(duì)新聞報(bào)道的聽覺障礙，減少聽障群體的信息閱讀困難，提高聽障群體觀看新聞報(bào)道的興趣，實(shí)現(xiàn)“處處皆新聞”。

“三窗同屏”是在聽障受眾觀看常規(guī)新聞報(bào)道或在線直播的時(shí)候，利用信息技術(shù)、人工智能和智能裝置，將播報(bào)內(nèi)容窗口、互動(dòng)窗口、語音轉(zhuǎn)換文字窗口同步到智能播報(bào)畫面上，從而實(shí)現(xiàn)“播報(bào)內(nèi)容窗口+AI手語互動(dòng)窗口+語音文本轉(zhuǎn)化”的視覺效果（如圖2）。聽障受眾只需在一個(gè)屏幕上就能看到所需的新聞資訊?！叭巴痢奔夹g(shù)既可以作為新聞報(bào)道的呈現(xiàn)模式，還可以作為遠(yuǎn)程教學(xué)的實(shí)況轉(zhuǎn)播。

3.迭代化的媒體技術(shù)。AI手語技術(shù)應(yīng)用于視頻傳播，其核心問題在于確保傳播的安全和穩(wěn)定，實(shí)現(xiàn)技術(shù)先進(jìn)性、理論科學(xué)性和實(shí)踐性的統(tǒng)一。尤其是在技術(shù)要求上，要符合廣電總局有關(guān)廣播電視節(jié)目播出的產(chǎn)業(yè)標(biāo)準(zhǔn)，這樣才能跟得上媒介技術(shù)的不斷發(fā)展。

升級(jí)迭代AI手語技術(shù)，具體包括網(wǎng)絡(luò)直播中虛擬主持人形象的優(yōu)化、新聞素材的充實(shí)、手語翻譯的更新、手語播放的更新等，技術(shù)的升級(jí)才能給殘疾人用戶帶來更好的觀賞體驗(yàn)。長沙廣電的AI手語欄目經(jīng)過了三輪技術(shù)升級(jí)，被長沙市耳聾學(xué)會(huì)會(huì)長和聽力障礙者代表紛紛點(diǎn)贊，認(rèn)為現(xiàn)在的AI手語主播已經(jīng)日趨成熟，表達(dá)準(zhǔn)確，動(dòng)作流暢，有助于聽力障礙者更好地了解新聞信息和社會(huì)發(fā)展。截至2023年3月底，已有337家機(jī)構(gòu)安裝了人工智能的視頻直播系統(tǒng)，覆蓋30個(gè)省級(jí)行政區(qū)（國家級(jí)1家、省級(jí)臺(tái)10家、省會(huì)臺(tái)17家、市級(jí)臺(tái)95家、縣級(jí)臺(tái)211家、公司3家）。AI手語廣泛應(yīng)用于如“兩會(huì)”報(bào)道等時(shí)政新聞報(bào)道中，得到殘障人士的廣泛好評(píng)。雖然只是一個(gè)小小的熒屏，但它為聽障人士開啟了一扇了解政策資訊的窗口，方便聽障人士了解政務(wù)信息，也讓政府的聲音第一時(shí)間傳達(dá)到基層百姓。

4.戰(zhàn)略性的IP運(yùn)營。除了先進(jìn)的技術(shù)優(yōu)勢、精準(zhǔn)的用戶群體和精美的形象設(shè)計(jì)外，打造一名AI手語主播還需要有推廣運(yùn)營的戰(zhàn)略思維。把握好投放的時(shí)機(jī)，密切關(guān)注新聞熱點(diǎn)，整合媒介資源，運(yùn)用新媒體的傳播手段以及IP運(yùn)營的思維，幫助其進(jìn)行宣傳推廣，形成具有記憶點(diǎn)的品牌IP。

以北京冬奧會(huì)AI手語主持人為例，AI手語主持人在2021年11月正式上線，這位形象親切自然，動(dòng)作精確、實(shí)時(shí)轉(zhuǎn)譯的主播不僅僅是手語主持工具人，更擁有自己的性格特點(diǎn)、興趣愛好。通過各種關(guān)于北京冬奧會(huì)AI手語主持人上線的新聞報(bào)道、短視頻、海報(bào)、文案的宣發(fā)，一篇又一篇的人工智能應(yīng)用技術(shù)文章的發(fā)布提高了公眾對(duì)于人工智能手語主持人的認(rèn)知程度，有助于IP形象深入人心，進(jìn)一步提升傳播效果。

三、媒體融合視角下AI手語在新聞報(bào)道中的突破

2020年9月，習(xí)近平總書記到湖南考察調(diào)研，在參觀馬欄山影視文化創(chuàng)意園區(qū)過程中察看了長沙廣電研發(fā)推出的AI手語技術(shù)電視播報(bào)系統(tǒng)，并對(duì)其在電視臺(tái)新聞直播轉(zhuǎn)播中的使用給予了充分的認(rèn)可。為貫徹落實(shí)習(xí)近平總書記指示精神，長沙廣電積極推進(jìn)“文化+科技”的戰(zhàn)略，在AI手語播報(bào)上做出有益的嘗試與應(yīng)用。

1.技術(shù)賦能是保障。目前長沙廣電主要是采用基于視頻信號(hào)處理的人工智能手語新聞播報(bào)系統(tǒng)。該系統(tǒng)能夠?qū)﹄娨暜嬅孢M(jìn)行精確的總結(jié)，并通過人工智能對(duì)電視畫面中的手勢語言進(jìn)行運(yùn)算，最終生成一個(gè)由虛擬主播所呈現(xiàn)的手勢語言，經(jīng)過與視頻合成，最終形成聽障人士也能無障礙接收信息的節(jié)目。經(jīng)過多次迭代，目前技術(shù)已經(jīng)比較成熟，將為全國各級(jí)廣播電視臺(tái)充分發(fā)揮手語人工智能、虛擬主持人等技術(shù)在電視欄目中的推廣和應(yīng)用，為各廣電臺(tái)落實(shí)《廣播電視技術(shù)迭代實(shí)施方案（2020-2022年）》的有關(guān)要求提供借鑒，并為破解媒體融合發(fā)展中的技術(shù)“瓶頸”打下堅(jiān)實(shí)的理論依據(jù)。

而下一步，要想實(shí)現(xiàn) AI手語在新聞報(bào)道中應(yīng)用的突破，還需要對(duì)技術(shù)研發(fā)進(jìn)行更多的強(qiáng)化，尤其是對(duì)人工智能手語電視播報(bào)系統(tǒng)進(jìn)行升級(jí)、軟硬件配套研發(fā)、應(yīng)用場景開發(fā)、項(xiàng)目孵化等，積極對(duì)接上下游企業(yè)，打造新型產(chǎn)業(yè)鏈。

2.數(shù)據(jù)庫建設(shè)是關(guān)鍵。AI手語播報(bào)系統(tǒng)建設(shè)是基于人工神經(jīng)網(wǎng)絡(luò)的智能演算方法，而持續(xù)地對(duì)各大媒體進(jìn)行詞庫收集、不斷完善其數(shù)據(jù)庫的建設(shè)、打上更多的數(shù)據(jù)標(biāo)簽，提升人工智能系統(tǒng)的學(xué)習(xí)能力，是系統(tǒng)更新迭代的關(guān)鍵所在。因此，一方面需要由當(dāng)?shù)貜V電部門主動(dòng)向上級(jí)部門爭取政策支持和資金支持，從上至下推廣，不斷完善AI常用手語大數(shù)據(jù)庫，除了《國家通用手語詞典》外，還要采集多種場景下的靜態(tài)手勢、動(dòng)態(tài)手勢、唇語等各種數(shù)據(jù)；另一方面，可以邀請(qǐng)有關(guān)部門領(lǐng)導(dǎo)和業(yè)內(nèi)權(quán)威專家組成專家小組，把AI手語列入國家標(biāo)準(zhǔn)，推動(dòng)AI在聽障群體中的普及，從而收集更多聽障人士提供的一手?jǐn)?shù)據(jù)。

3.無障礙環(huán)境建設(shè)是目標(biāo)。AI手語播報(bào)項(xiàng)目的推進(jìn)，將為2700萬聽障群體提供一座連接外部世界的橋梁，是我國實(shí)現(xiàn)“無障礙化”戰(zhàn)略的重大舉措。隨著項(xiàng)目的發(fā)展成熟，將會(huì)產(chǎn)生一套全新的、具有自主知識(shí)產(chǎn)權(quán)的、滿足國內(nèi)廣電行業(yè)需求的AI手語技術(shù)新聞播報(bào)系統(tǒng)。同時(shí)，打造出一位具有自身性格特點(diǎn)的虛擬主播，成為聽障人士的“代言人”。與媒體產(chǎn)業(yè)和媒體渠道進(jìn)行整合后，還將努力構(gòu)建一個(gè)聽障人士共享的集手語教學(xué)、文化培訓(xùn)和交友互動(dòng)為一體的多功能互聯(lián)網(wǎng)平臺(tái)，為營造全社會(huì)的無障礙環(huán)境努力。

AI手語播報(bào)技術(shù)對(duì)推動(dòng)我國殘疾人工作實(shí)現(xiàn)高質(zhì)量發(fā)展具有重大意義。該技術(shù)將人工智能技術(shù)與新聞行業(yè)相結(jié)合，還有待于在實(shí)踐中進(jìn)一步優(yōu)化、深化、普及并最終形成產(chǎn)業(yè)，其應(yīng)用范圍也可以從現(xiàn)有的新聞?lì)I(lǐng)域拓展到政務(wù)服務(wù)、公共交通、養(yǎng)老陪伴等多個(gè)板塊，在媒體融合不斷深化的大趨勢之下，實(shí)現(xiàn)AI手語在公共傳播領(lǐng)域中的全方位應(yīng)用與突破。

作者系長沙廣播電視集團(tuán)經(jīng)營管理部主任

參考文獻(xiàn)

[1]秦秀宇.媒介融合背景下電視輿論引導(dǎo)面臨的挑戰(zhàn)及對(duì)策[J].中國廣播電視學(xué)刊，2022（12）.

[2]郭曉磊.機(jī)器人搖臂及AI手語播報(bào)系統(tǒng)在新聞演播室中的應(yīng)用[J].廣播與電視技術(shù)，2022（11）.

[3]張怡，王琳.尋源與開流：新時(shí)代傳媒業(yè)融合之守正創(chuàng)新發(fā)展策略研究[J].新聞愛好者，2022（10）.

[4]喻國明，傅海鑫.AI手語主播的技術(shù)可供性：代償性機(jī)制下認(rèn)知重構(gòu)的發(fā)展版圖——以聽覺感知重構(gòu)為例探知未來媒體的聚合式發(fā)展邏輯[J].教育傳媒研究，2022（04）.

[5]文琳.AI技術(shù)在電視新聞手語播報(bào)中的應(yīng)用淺析[J].聲屏世界，2021（12）.

【編輯：陳琦】