騰訊3D手語數智人“聆語”亮相央視頻 為冰雪賽事提供AI手語翻譯服務
來源:中央廣電總臺國際在線  |  2022-02-06 12:39:45

  國際在線消息:“中國隊,率先衝過終點。”2月5日晚短道速滑混合團體接力決賽後,騰訊3D手語數智人“聆語”用手語表達了見證中國隊獲得冠軍的激動心情。

騰訊3D手語數智人“聆語”亮相央視頻 為冰雪賽事提供AI手語翻譯服務_fororder_1

  騰訊3D手語數智人“聆語”用手語表達了見證中國隊獲得冠軍的激動心情

  騰訊3D手語數智人“聆語”作為央視頻AI手語翻譯官,為這場比賽提供了手語翻譯解説服務,見證了中國隊在本屆賽事中首枚金牌地誕生,讓處於無聲世界中的特殊人群也能感受到中國舉辦冰雪賽事的盛況,進一步提升聽障人士的觀賽體驗。

騰訊3D手語數智人“聆語”亮相央視頻 為冰雪賽事提供AI手語翻譯服務_fororder_2

  騰訊3D手語數智人“聆語”

  據介紹,騰訊3D手語數智人“聆語”由騰訊雲小微聯合PCG AI等技術團隊共同打造,整合多模態交互技術、3D數字人建模、機器翻譯、語音識別和自然語言理解等技術,讓“聆語”的手語表達能力接近真人。騰訊自主研發了一套可視化動作編輯平臺,為更專業的手語老師提供工具平臺,可以讓手語老師對全量手語動作進行精修。截至目前,騰訊3D手語數智人“聆語”詞彙和語句覆蓋量超過160萬,並針對體育賽事做了大量定向優化,手語可懂度90%以上,技術水準行業領先。

  在賽事手語解説中,基於《國家通用手語詞典》規範,“聆語”首先通過健聽人語言與聽障者手語的機器翻譯能力,將比賽解説內容低延遲生成高準確率的手語語言表徵,再通過騰訊多模態端到端生成模型,進行聯合建模及預測生成高準確率的動作、表情、唇動等序列,實現自然專業、易懂度高的手語效果。“聆語”的外觀,依託騰訊3D光照掃描還原、面部肌肉驅動、表情肢體手勢捕捉等技術,形象高度還原真人髮膚,動作也更加自然生動;在信息準確率方面,“聆語”可以快速學習新詞熱詞,並快速完成各種行業、業務場景和相關知識的學習,提升翻譯準確性。

騰訊3D手語數智人“聆語”亮相央視頻 為冰雪賽事提供AI手語翻譯服務_fororder_3

  騰訊3D手語數智人“聆語”正在做手語翻譯工作

  手語是聽障人士之間相互交流思想、獲取外界信息的第一語言。但由於手語表達語序和漢語不同、需要結合表情和嘴部動作輔助理解,如果省略詞彙不當、新詞熱詞無法表達,會對手語播報可懂度産生很大影響。AI手語數智人主播,希望通過建立健聽人語言體系、逼真的畫面語言、連貫自然的動作和新詞熱詞快速適配,提升AI手語表達的可懂度。

  騰訊雲小微在AI交互智慧領域,不斷推動技術發展和産業應用落地,讓數智人成為很多行業的數字助手,輔助人類提供更加高效、精準服務。在新聞傳媒領域,推動虛擬主播、動畫手語廣泛應用於新聞播報、天氣預報、綜藝科教等節目生産,創新節目形態,提高制播效率和智慧化水準。未來,騰訊3D手語數智人“聆語”將在更多場景提供服務,助力實現無障礙信息傳播環境更好發展。(圖/央視頻 文/陳東)

責編:馮實
最新推薦
新聞
文娛
體育
環創
城市