騰訊3D手語數(shù)智人“聆語”亮相央視頻，為冰雪賽事提供AI手語翻譯服務(wù)

（CWW）“中國隊，率先沖過終點！”

2月5日晚短道速滑混合團體接力決賽后，騰訊3D手語數(shù)智人“聆語”，用手語表達了見證中國隊獲得冠軍的激動心情。

騰訊3D手語數(shù)智人“聆語”作為央視頻AI手語翻譯官，為這場比賽提供了手語翻譯解說服務(wù)，見證了中國隊在本屆賽事中首枚金牌的誕生，讓處于無聲世界中的特殊人群也能感受到中國舉辦冰雪賽事的盛況，進一步提升了聽障人士的觀賽體驗。

騰訊3D手語數(shù)智人“聆語”由騰訊云小微聯(lián)合PCG AI等技術(shù)團隊共同打造，整合多模態(tài)交互技術(shù)、3D數(shù)字人建模、機器翻譯、語音識別和自然語言理解等技術(shù)，讓“聆語”的手語表達能力接近真人。騰訊自主研發(fā)了一套可視化動作編輯平臺，為更專業(yè)的手語老師提供了友好的工具平臺，可以讓手語老師高效率的對全量手語動作進行精修。截至目前，騰訊3D手語數(shù)智人“聆語”詞匯和語句覆蓋量超過160萬，并針對體育賽事做了大量定向優(yōu)化，手語可懂度90%以上，技術(shù)水準行業(yè)領(lǐng)先。

在賽事手語解說中，基于《國家通用手語詞典》規(guī)范，“聆語”首先通過健聽人語言與聽障者手語的機器翻譯能力，將比賽解說內(nèi)容低延遲生成高準確率的手語語言表征，再通過騰訊多模態(tài)端到端生成模型，進行聯(lián)合建模及預(yù)測生成高準確率的動作、表情、唇動等序列，實現(xiàn)自然專業(yè)、易懂度高的手語效果。“聆語”的外觀，依托騰訊領(lǐng)先的3D光照掃描還原、面部肌肉驅(qū)動、表情肢體手勢捕捉等技術(shù)，形象高度還原真人發(fā)膚，動作也更加自然生動；在信息準確率方面，“聆語”可以快速學(xué)習(xí)時下的新詞熱詞，還可以快速完成各種行業(yè)、業(yè)務(wù)場景和相關(guān)知識的學(xué)習(xí)，提升翻譯準確性。

《“十四五”殘疾人保障和發(fā)展規(guī)劃》中提出要加快發(fā)展信息無障礙，智能化服務(wù)要適應(yīng)殘疾人需求，智能工具應(yīng)當便于殘疾人日常生活使用。據(jù)全國第二次殘疾人抽樣調(diào)查數(shù)據(jù)，中國有2780萬聽障人士，手語是這些聽障人士之間相互交流思想、獲取外界信息的第一語言。但由于手語表達語序和漢語不同、需要結(jié)合表情和嘴部動作輔助理解，如果省略詞匯不當、新詞熱詞無法表達等原因，會對手語播報可懂度產(chǎn)生很大影響。AI手語數(shù)智人主播，希望通過建立健聽人語言體系、逼真的畫面語言、連貫自然的動作和新詞熱詞快速適配，提升AI手語表達的可懂度。

騰訊云小微在AI交互智能領(lǐng)域，不斷推動技術(shù)發(fā)展和產(chǎn)業(yè)應(yīng)用落地，讓數(shù)智人成為很多行業(yè)的數(shù)字助手，輔助人類提供更加高效、精準的服務(wù)。在新聞傳媒領(lǐng)域，在2021年10月，廣電總局在《廣播電視和網(wǎng)絡(luò)視聽“十四五”科技發(fā)展規(guī)劃》中也首次明確指出，要推動虛擬主播、動畫手語廣泛應(yīng)用于新聞播報、天氣預(yù)報、綜藝科教等節(jié)目生產(chǎn)，創(chuàng)新節(jié)目形態(tài)，提高制播效率和智能化水平。未來，騰訊3D手語數(shù)智人“聆語”，也將在更多場景提供服務(wù)，助力實現(xiàn)更好的無障礙信息傳播環(huán)境。

關(guān)鍵詞： 資訊 通信世界網(wǎng) 騰訊 AI 冬奧會