胡琳

摘要：人工智能技術(shù)的發(fā)展推動了AI手語技術(shù)的更新迭代，并在我國新聞報道中得到了一定的運用。目前中國有2700萬聽障人士，他們與外界溝通的難度極大。為了解決這些特殊群體的實際問題，在媒體融合發(fā)展的實踐中，我國開始注重對現(xiàn)有AI手語播報進行優(yōu)化改進。目前，AI手語技術(shù)主要在新聞、氣象、科教、綜藝等節(jié)目中廣泛應(yīng)用。本文主要從媒體融合視角，分析AI手語在新聞報道中的發(fā)展現(xiàn)狀，并從技術(shù)賦能、數(shù)據(jù)庫建設(shè)、多媒介交流等多維度分析其突破路徑。

關(guān)鍵詞：媒體融合 AI手語 新聞報道 人工智能

2020年11月，國家廣電總局頒布《廣播電視技術(shù)迭代實施方案（2020-2022年）》，提出要推進內(nèi)容生產(chǎn)便捷化和智慧化，其中包括“編制智能機器人AI播報、機器人手語技術(shù)方案，逐步推動虛擬主播、動畫手語等技術(shù)在新聞、綜藝、氣象、科教等節(jié)目中的應(yīng)用等”。AI手語播報是依托于人工智能技術(shù)，以虛擬人主播為主體呈現(xiàn)在各類終端的一種新型技術(shù)。虛擬人主播具有形象逼真、肢體語言連貫自然、學習能力效率超強等特點。AI手語使主流社會信息在聽覺障礙群體中得到更廣泛的傳播，為構(gòu)建無障礙的媒介環(huán)境發(fā)揮重要作用。

在媒體融合的背景下，可視化媒介資源、多元化媒介窗口、迭代化傳媒技術(shù)以及戰(zhàn)略性的IP打造等成為AI手語技術(shù)與新聞報道結(jié)合的關(guān)鍵錨點，而媒體融合、深度報道技術(shù)以及信息無障礙環(huán)境則成為二者結(jié)合的關(guān)鍵突破方向。對此，筆者結(jié)合長沙市廣播電視臺在AI手語新聞播報方面的實踐，對媒體融合大背景下AI手語技術(shù)與新聞播報相結(jié)合的發(fā)展與突破進行深入剖析，以期為今后人工智能技術(shù)更好地應(yīng)用于媒體之中提供借鑒。

一、AI手語技術(shù)在新聞報道中的應(yīng)用現(xiàn)狀

我國有2700萬聽障人士，手語是聽障人士之間溝通交流、獲取信息的主要語言。但受到手語主持人數(shù)量的限制，目前許多電視節(jié)目和新聞直播中都缺少手語主播。為了讓聽障群體也能夠快捷、準確、全面地獲取新聞資訊，各地廣電媒體紛紛開設(shè)手語欄目，或是將AI手語技術(shù)應(yīng)用到日常節(jié)目之中。AI手語技術(shù)使主流社會信息在聽障人群中得到更廣泛地普及，為構(gòu)建無障礙城市做出了重要貢獻。

1.手語主播的類型劃分。在新聞報道節(jié)目中，手語主播主要有3種類型，即健全人、聽障人和虛擬人。第一類是健全人。目前，由健全人來進行新聞報道直播是最普遍的，一般都是專門的手語老師或者殘疾人協(xié)會的工作人員。作為健全人，他們在與新聞采編人員溝通方面具有較大的優(yōu)越性，但是由于不是聽力障礙者，不能設(shè)身處地理解聽障人群的需求，因此在聽障群體中沒有得到很好的認可。北京師范大學2012年針對接近一萬名聽障人士開展的跨地區(qū)調(diào)查顯示，健全人打的手語只有8%的聽障人能夠全部看懂，56%的聽障人能看懂部分，29%的聽障人基本看不懂。第二類是聽障人。一些電視臺聘請了部分文化素養(yǎng)較高的聽障人來充當手語主持人，這些人對聽障人士的信息環(huán)境比一般人要了解得多，更符合聽障人士的實際。但是，在對復雜文稿的理解上也存在很多不足之處。第三類是借助于人工智能技術(shù)研發(fā)而成的AI手語主播。近年來，具有數(shù)據(jù)化、標準化等特點的AI手語技術(shù)已日趨完善。2020年6月，長沙廣電將自主研發(fā)的人工智能手語電視播報系統(tǒng)應(yīng)用于《長沙新聞》欄目中，打造手語信息化的新聞場景應(yīng)用，實現(xiàn)了AI手語技術(shù)與時政電視新聞的結(jié)合，致力于構(gòu)建無障礙傳播的媒介環(huán)境。目前該系統(tǒng)已安全平穩(wěn)運行近三年的時間，播出時長超過20000分鐘。

2.AI手語新聞播報的主要呈現(xiàn)方式。目前，國內(nèi)AI手語播報有3種呈現(xiàn)方式，并衍生出了各種形式的手語節(jié)目。第一類是以新聞主播為主視窗，AI手語主播為輔視窗，主視窗在畫面中的比例超過80%，而輔視窗則安排于主視窗畫面前的左下角或右下角，形成“畫中畫”的視覺效果。這種也是目前最常用的一種呈現(xiàn)方式。第二類是以AI手語主播為主視窗，新聞主持人為輔視窗，手語主播占據(jù)了屏幕的主要畫幅。這類呈現(xiàn)方式主要面向聽障人群，更多的是在殘疾人教學中使用，并未在大眾媒體中進行普及。第三類是AI手語主播與主持人的畫幅相同，兩部分播放框處于并列關(guān)系，而這種呈現(xiàn)方式相比于第一類、第二類，在國內(nèi)的應(yīng)用更少，僅出現(xiàn)在少數(shù)廣播電視臺。如北京冬奧會期間，為了推介AI虛擬人手語主播，央視主持人朱廣權(quán)和AI手語主播進行線上語速PK，就是采用的畫幅相同的呈現(xiàn)方式。

二、媒體融合視角下AI手語技術(shù)在新聞報道中應(yīng)用的關(guān)鍵點

在媒體融合時代，AI手語技術(shù)在新聞報道中得到廣泛應(yīng)用。尤其是通過可視化的媒介資源、多元化的媒介窗口、迭代化的媒體技術(shù)、戰(zhàn)略性的IP運營，讓AI手語更有助于聽障人士了解政策資訊，實現(xiàn)傳播效果的最大化和最優(yōu)化。

1.可視化的媒介資源?？梢暬且婚T新興的交叉學科，通過可視化的表達與交互傳感技術(shù)，使得用戶能夠親眼看到、親自探索以至深入理解深層次的抽象化的大量信息。人工智能在新聞播報中的“破圈”，就是以信息可視化技術(shù)的發(fā)展迭代為基礎(chǔ)的。信息可視化創(chuàng)建了以直觀易懂的形式表達抽象信息的手段和方法，結(jié)合語音識別、計算機翻譯等人工智能技術(shù)，構(gòu)建起一套復雜而精準的手語翻譯引擎，將文字、音頻、視頻等成功翻譯為手語，再通過專門為手語優(yōu)化而研發(fā)的自然動作引擎，進行虛擬形象的驅(qū)動。這些技術(shù)使AI手語主播具備了高識別度的手語表達能力和精準流暢的手語呈現(xiàn)效果。

2.多元化的媒介窗口。在新聞報道中，聽障群體受語言交流的局限，容易對信息資訊的理解產(chǎn)生歧義或誤區(qū)。伴隨著“互聯(lián)網(wǎng)+新聞報道”的推廣和人工智能的應(yīng)用，各個媒體的技術(shù)硬件得到了升級，新聞報道的配套軟件也越來越人性化。利用這些新型技術(shù)，將新聞報道以圖片、動畫、視頻的形式展現(xiàn)在聽障群體面前，并輔以AI手語主播、字幕等多種形式，將抽象思維以一種直觀易懂的方式向他們傳達出來。此外，AI手語主播還應(yīng)用在手機小屏上，采用大小屏聯(lián)動的方式，突破新聞播報的時空限制，確保聽障用戶能夠隨時隨地收看。

早在2020年，長沙廣電就利用人工智能技術(shù)，實現(xiàn)了一個AI手語主播與一個專業(yè)播音員同屏呈現(xiàn)進行新聞直播，將新聞報道技術(shù)與聽障群體認知規(guī)律相結(jié)合，研發(fā)了“三視融合”新聞報道形式，構(gòu)建了“三窗同屏”新聞報道模式，進行了“三視融合+三窗同屏”的混合新聞報道改革，突破聽障群體對于新聞報道的解讀障礙，有效促進信息的平等傳播。

“三視融合”是依據(jù)殘障觀眾依賴于視覺獲得資訊的認識模式，運用新聞直播軟件、影像制作軟件，把政策信息、時事熱點、民生民情等報道內(nèi)容制作成“視頻+AI手語+字幕”的新聞報道（如圖1），通過即時通訊媒體、AI手語在線播報及直播平臺等媒介，以打破聽障群體對新聞報道的聽覺障礙，減少聽障群體的信息閱讀困難，提高聽障群體觀看新聞報道的興趣，實現(xiàn)“處處皆新聞”。

“三窗同屏”是在聽障受眾觀看常規(guī)新聞報道或在線直播的時候，利用信息技術(shù)、人工智能和智能裝置，將播報內(nèi)容窗口、互動窗口、語音轉(zhuǎn)換文字窗口同步到智能播報畫面上，從而實現(xiàn)“播報內(nèi)容窗口+AI手語互動窗口+語音文本轉(zhuǎn)化”的視覺效果（如圖2）。聽障受眾只需在一個屏幕上就能看到所需的新聞資訊?！叭巴痢奔夹g(shù)既可以作為新聞報道的呈現(xiàn)模式，還可以作為遠程教學的實況轉(zhuǎn)播。

3.迭代化的媒體技術(shù)。AI手語技術(shù)應(yīng)用于視頻傳播，其核心問題在于確保傳播的安全和穩(wěn)定，實現(xiàn)技術(shù)先進性、理論科學性和實踐性的統(tǒng)一。尤其是在技術(shù)要求上，要符合廣電總局有關(guān)廣播電視節(jié)目播出的產(chǎn)業(yè)標準，這樣才能跟得上媒介技術(shù)的不斷發(fā)展。

升級迭代AI手語技術(shù)，具體包括網(wǎng)絡(luò)直播中虛擬主持人形象的優(yōu)化、新聞素材的充實、手語翻譯的更新、手語播放的更新等，技術(shù)的升級才能給殘疾人用戶帶來更好的觀賞體驗。長沙廣電的AI手語欄目經(jīng)過了三輪技術(shù)升級，被長沙市耳聾學會會長和聽力障礙者代表紛紛點贊，認為現(xiàn)在的AI手語主播已經(jīng)日趨成熟，表達準確，動作流暢，有助于聽力障礙者更好地了解新聞信息和社會發(fā)展。截至2023年3月底，已有337家機構(gòu)安裝了人工智能的視頻直播系統(tǒng)，覆蓋30個省級行政區(qū)（國家級1家、省級臺10家、省會臺17家、市級臺95家、縣級臺211家、公司3家）。AI手語廣泛應(yīng)用于如“兩會”報道等時政新聞報道中，得到殘障人士的廣泛好評。雖然只是一個小小的熒屏，但它為聽障人士開啟了一扇了解政策資訊的窗口，方便聽障人士了解政務(wù)信息，也讓政府的聲音第一時間傳達到基層百姓。

4.戰(zhàn)略性的IP運營。除了先進的技術(shù)優(yōu)勢、精準的用戶群體和精美的形象設(shè)計外，打造一名AI手語主播還需要有推廣運營的戰(zhàn)略思維。把握好投放的時機，密切關(guān)注新聞熱點，整合媒介資源，運用新媒體的傳播手段以及IP運營的思維，幫助其進行宣傳推廣，形成具有記憶點的品牌IP。

以北京冬奧會AI手語主持人為例，AI手語主持人在2021年11月正式上線，這位形象親切自然，動作精確、實時轉(zhuǎn)譯的主播不僅僅是手語主持工具人，更擁有自己的性格特點、興趣愛好。通過各種關(guān)于北京冬奧會AI手語主持人上線的新聞報道、短視頻、海報、文案的宣發(fā)，一篇又一篇的人工智能應(yīng)用技術(shù)文章的發(fā)布提高了公眾對于人工智能手語主持人的認知程度，有助于IP形象深入人心，進一步提升傳播效果。

三、媒體融合視角下AI手語在新聞報道中的突破

2020年9月，習近平總書記到湖南考察調(diào)研，在參觀馬欄山影視文化創(chuàng)意園區(qū)過程中察看了長沙廣電研發(fā)推出的AI手語技術(shù)電視播報系統(tǒng)，并對其在電視臺新聞直播轉(zhuǎn)播中的使用給予了充分的認可。為貫徹落實習近平總書記指示精神，長沙廣電積極推進“文化+科技”的戰(zhàn)略，在AI手語播報上做出有益的嘗試與應(yīng)用。

1.技術(shù)賦能是保障。目前長沙廣電主要是采用基于視頻信號處理的人工智能手語新聞播報系統(tǒng)。該系統(tǒng)能夠?qū)﹄娨暜嬅孢M行精確的總結(jié)，并通過人工智能對電視畫面中的手勢語言進行運算，最終生成一個由虛擬主播所呈現(xiàn)的手勢語言，經(jīng)過與視頻合成，最終形成聽障人士也能無障礙接收信息的節(jié)目。經(jīng)過多次迭代，目前技術(shù)已經(jīng)比較成熟，將為全國各級廣播電視臺充分發(fā)揮手語人工智能、虛擬主持人等技術(shù)在電視欄目中的推廣和應(yīng)用，為各廣電臺落實《廣播電視技術(shù)迭代實施方案（2020-2022年）》的有關(guān)要求提供借鑒，并為破解媒體融合發(fā)展中的技術(shù)“瓶頸”打下堅實的理論依據(jù)。

而下一步，要想實現(xiàn) AI手語在新聞報道中應(yīng)用的突破，還需要對技術(shù)研發(fā)進行更多的強化，尤其是對人工智能手語電視播報系統(tǒng)進行升級、軟硬件配套研發(fā)、應(yīng)用場景開發(fā)、項目孵化等，積極對接上下游企業(yè)，打造新型產(chǎn)業(yè)鏈。

2.數(shù)據(jù)庫建設(shè)是關(guān)鍵。AI手語播報系統(tǒng)建設(shè)是基于人工神經(jīng)網(wǎng)絡(luò)的智能演算方法，而持續(xù)地對各大媒體進行詞庫收集、不斷完善其數(shù)據(jù)庫的建設(shè)、打上更多的數(shù)據(jù)標簽，提升人工智能系統(tǒng)的學習能力，是系統(tǒng)更新迭代的關(guān)鍵所在。因此，一方面需要由當?shù)貜V電部門主動向上級部門爭取政策支持和資金支持，從上至下推廣，不斷完善AI常用手語大數(shù)據(jù)庫，除了《國家通用手語詞典》外，還要采集多種場景下的靜態(tài)手勢、動態(tài)手勢、唇語等各種數(shù)據(jù)；另一方面，可以邀請有關(guān)部門領(lǐng)導和業(yè)內(nèi)權(quán)威專家組成專家小組，把AI手語列入國家標準，推動AI在聽障群體中的普及，從而收集更多聽障人士提供的一手數(shù)據(jù)。

3.無障礙環(huán)境建設(shè)是目標。AI手語播報項目的推進，將為2700萬聽障群體提供一座連接外部世界的橋梁，是我國實現(xiàn)“無障礙化”戰(zhàn)略的重大舉措。隨著項目的發(fā)展成熟，將會產(chǎn)生一套全新的、具有自主知識產(chǎn)權(quán)的、滿足國內(nèi)廣電行業(yè)需求的AI手語技術(shù)新聞播報系統(tǒng)。同時，打造出一位具有自身性格特點的虛擬主播，成為聽障人士的“代言人”。與媒體產(chǎn)業(yè)和媒體渠道進行整合后，還將努力構(gòu)建一個聽障人士共享的集手語教學、文化培訓和交友互動為一體的多功能互聯(lián)網(wǎng)平臺，為營造全社會的無障礙環(huán)境努力。

AI手語播報技術(shù)對推動我國殘疾人工作實現(xiàn)高質(zhì)量發(fā)展具有重大意義。該技術(shù)將人工智能技術(shù)與新聞行業(yè)相結(jié)合，還有待于在實踐中進一步優(yōu)化、深化、普及并最終形成產(chǎn)業(yè)，其應(yīng)用范圍也可以從現(xiàn)有的新聞領(lǐng)域拓展到政務(wù)服務(wù)、公共交通、養(yǎng)老陪伴等多個板塊，在媒體融合不斷深化的大趨勢之下，實現(xiàn)AI手語在公共傳播領(lǐng)域中的全方位應(yīng)用與突破。

作者系長沙廣播電視集團經(jīng)營管理部主任

參考文獻

[1]秦秀宇.媒介融合背景下電視輿論引導面臨的挑戰(zhàn)及對策[J].中國廣播電視學刊，2022（12）.

[2]郭曉磊.機器人搖臂及AI手語播報系統(tǒng)在新聞演播室中的應(yīng)用[J].廣播與電視技術(shù)，2022（11）.

[3]張怡，王琳.尋源與開流：新時代傳媒業(yè)融合之守正創(chuàng)新發(fā)展策略研究[J].新聞愛好者，2022（10）.

[4]喻國明，傅海鑫.AI手語主播的技術(shù)可供性：代償性機制下認知重構(gòu)的發(fā)展版圖——以聽覺感知重構(gòu)為例探知未來媒體的聚合式發(fā)展邏輯[J].教育傳媒研究，2022（04）.

[5]文琳.AI技術(shù)在電視新聞手語播報中的應(yīng)用淺析[J].聲屏世界，2021（12）.

【編輯：陳琦】