0
| 本文作者： 嘉嘉 | 2022-02-06 11:47 |
“中國隊，率先沖過終點！”
2月5日晚短道速滑混合團體接力決賽后，騰訊3D手語數智人“聆語”，用手語表達了見證中國隊獲得冠軍的激動心情。
騰訊3D手語數智人“聆語”作為央視頻AI手語翻譯官，為這場比賽提供了手語翻譯解說服務，見證了中國隊在本屆賽事中首枚金牌的誕生，讓處于無聲世界中的特殊人群也能感受到中國舉辦冰雪賽事的盛況，進一步提升了聽障人士的觀賽體驗。
騰訊3D手語數智人“聆語”由騰訊云小微聯合PCG AI等技術團隊共同打造，整合多模態交互技術、3D數字人建模、機器翻譯、語音識別和自然語言理解等技術，讓“聆語”的手語表達能力接近真人。騰訊自主研發了一套可視化動作編輯平臺，為更專業的手語老師提供了友好的工具平臺，可以讓手語老師高效率的對全量手語動作進行精修。截至目前，騰訊3D手語數智人“聆語”詞匯和語句覆蓋量超過160萬，并針對體育賽事做了大量定向優化，手語可懂度90%以上，技術水準行業領先。
在賽事手語解說中，基于《國家通用手語詞典》規范，“聆語”首先通過健聽人語言與聽障者手語的機器翻譯能力，將比賽解說內容低延遲生成高準確率的手語語言表征，再通過騰訊多模態端到端生成模型，進行聯合建模及預測生成高準確率的動作、表情、唇動等序列，實現自然專業、易懂度高的手語效果。“聆語”的外觀，依托騰訊領先的3D光照掃描還原、面部肌肉驅動、表情肢體手勢捕捉等技術，形象高度還原真人發膚，動作也更加自然生動；在信息準確率方面，“聆語”可以快速學習時下的新詞熱詞，還可以快速完成各種行業、業務場景和相關知識的學習，提升翻譯準確性。
《“十四五”殘疾人保障和發展規劃》中提出要加快發展信息無障礙，智能化服務要適應殘疾人需求，智能工具應當便于殘疾人日常生活使用。據全國第二次殘疾人抽樣調查數據，中國有2780萬聽障人士，手語是這些聽障人士之間相互交流思想、獲取外界信息的第一語言。但由于手語表達語序和漢語不同、需要結合表情和嘴部動作輔助理解，如果省略詞匯不當、新詞熱詞無法表達等原因，會對手語播報可懂度產生很大影響。AI手語數智人主播，希望通過建立健聽人語言體系、逼真的畫面語言、連貫自然的動作和新詞熱詞快速適配，提升AI手語表達的可懂度。
騰訊云小微在AI交互智能領域，不斷推動技術發展和產業應用落地，讓數智人成為很多行業的數字助手，輔助人類提供更加高效、精準的服務。在新聞傳媒領域，在2021年10月，廣電總局在《廣播電視和網絡視聽“十四五”科技發展規劃》中也首次明確指出，要推動虛擬主播、動畫手語廣泛應用于新聞播報、天氣預報、綜藝科教等節目生產，創新節目形態，提高制播效率和智能化水平。未來，騰訊3D手語數智人“聆語”，也將在更多場景提供服務，助力實現更好的無障礙信息傳播環境。
雷峰網(公眾號：雷峰網)
