國際在線消息:2021年中關村論壇繼續發揮科技辦會的優勢,利用多項黑科技全面提升參會體驗。在2021中關村論壇中,多項科技辦會應用,將直接落地北京冬奧會中。
從內到外 科技凸顯中國式防疫的力量
疫情期間舉辦如此規模的論壇,防疫工作必然是重中之重。首先,論壇根據不同功能需求,在關鍵區域和出入口布設睿家科技智慧安檢測溫系統及曠視明驥智慧體溫篩查比對系統。前者用於在安檢處快速核驗個人健康防疫信息,後者用於在人員密集處快速篩查體溫。
值得一提的是,睿家科技智慧安檢測溫系統可以做到一秒七步合一:身份識別、智慧測溫、健康碼、核酸檢測、疫苗接種、公安聯網、電子登記。
MR全景會場 雲上論壇開啟融合的世界
辦會期間的科技防疫是基礎操作,科技對會議主體內容的賦能更突顯智慧。3G時代人與人之間的溝通更快了,4G時代物與物連成了物聯網,5G時代,人、物、數據將更加深度的綁定在一起,現實世界和虛擬世界也會加速融合。
本次雲上論壇將同步在MR(混合現實)全景會場中舉辦,融合實景全景+三維模型,還原真實的會場空間,將多種融媒體整合、讓觀眾可以在線上得到身臨其境的沉浸式體驗。
那MR和本就融合了現實和虛擬的AR有何不同?
AR這項技術主要是通過三維模型、視頻等數字媒體來給現實世界增加新的視角,將各種“美術”元素實時疊加在了用戶的像機視圖上。
MR與之不同之處在於,在MR的世界裏人們能夠像現實世界一般去互動、操縱和體驗。想像一下,類似隔空輸入,敲擊著桌面上的虛擬鍵盤,螢幕上就實時顯示出了內容。在混合現實中,到處都是這樣的場景,虛擬世界的對象都是可觸碰、有反饋的,MR相當於創造了現實和虛擬共存的混合世界。
那MR全景會場如何構建?首先需要一套全景技術來複製一份會場的全景三維鏡像,然後再整合多元化的媒體信息。這個全景系統涉及超高清全景相機、全景拼接和全景圖像渲染引擎等。
全景相機將拍攝的會場高清圖像上傳至雲端,後臺通過特徵點識別、特徵點匹配、圖像智慧拼接、圖像融合等技術,將圖片無縫拼接好,再由前端渲染引擎實現全景照片在手機、電腦、智慧屏等終端上完美呈現。
融合空間定位、實時數據映射等多元媒體技術,一個令人興奮可以實時交互的MR全景會場就誕生了,這個MR會場不再是“堆特效”堆出來的死場景,而是生動可感的第三世界。
“悟道2.0”加持 手語播報數字人讓聽障人士享受普惠AI
MR雲上會場雖然有更加沉浸式的體驗,但現場的互動體驗更能讓與會者感受到科技的變化。中關村論壇這樣的科技盛會,不僅規格高,場次也很多,比較重要的會議通常伴有手語直播,方便聽障人士參會,如果全靠真人手語主播,工作強度將會加大。
近兩年,虛擬數字主播逐漸走上舞臺,幫助主持會議、播報新聞,幾乎可以亂真,但目前可以播報手語的虛擬人並不常見。本次大會利用 “悟道2.0”超大規模預訓練模型加持的手語播報數字人。
由於手語主要靠手勢來傳遞信息,不同的人有不同的手勢習慣,很容易造成信息傳遞偏差,而人工智能則可以避免“千人千面”,只要前端接收的自然語言信息無誤,就能準確表達。普通播報新聞的虛擬主播也是由AI來驅動,對它們來説,只要語音準確就可以,表情和手勢只需配合,而手語播報數字人,對手勢的要求會更加精準。
追根溯源,手語數字人是為了傳遞信息,所以對自然語言的理解尤為重要,這次的手語數字人背後注入了“悟道2.0”和微軟小冰的強大基因。
“悟道2.0”是類似GPT-3的人工智能預訓練大模型,參數規模達1.75萬億,是GPT-3的10倍,並且完全使用國產算力,在9項Benchmark基準測試任務上都達到精準智慧。
因為訓練數據和參數跟普通的AI模型不在一個量級,所以在自然語言理解上會有明顯優勢。微軟小冰基於情感的交互能力更強,不光可以進行創作性回答,還能控制自然對話的節奏,讓整個播報更像真人。
據悉,該手語播報數字人不光參加中關村論壇,也會服務於北京冬奧會,為全世界的聽障人士帶去更好的參會體驗。
AI修復+視錯覺視頻技術 線上觀看效果依然“人從畫中來”
作為線下論壇,利用科技增強現場效果,給觀眾帶來更佳的體驗亦是重中之重。中關村論壇引入一系列適用於論壇場景的新技術,多維度整合進論壇場景中,讓科技論壇真正科技化。
“國際化”“高端化”是2021年中關村論壇辦會特色,為此論壇邀請眾多海外相關領域嘉賓線上參會,嘉賓線上視頻的品質直接影響了現場效果。
中關村論壇利用技術打造了線上嘉賓“人從畫中來”的真實效果。首先,視錯覺視頻技術。主會場採用大面積弧形屏+頂部條屏結合的方式,營造沉浸感氛圍,條形屏通過動態素材的呈現增加靈動感,同時配合視頻呈現裸眼3D效果。
利用視覺差原理,通過綠幕錄製、後期特效等方式製作遠程嘉賓演講視頻,達到線下線上裸眼3D效果,配合製作合成的模擬特寫鏡頭上屏,達到以假亂真的效果。
論壇利用AI視頻增強技術,將部分品質不高的演講視頻優化為高清視頻。如今,AI視頻增強技術通常是基於深度學習技術,重新設計或提出自研的超分核心技術演算法。可針對有損的視頻場景、低解析度視頻流或視頻文件進行實時放大、修復、復原,輸出高解析度、高清晰度視頻,並經過神經網絡的處理,有效修復編解碼引入的圖像錯誤。
除此之外,2021中關村論壇在在北京市通州區九棵樹文化產業園設置沉浸式第二現場,全方位還原中關村論壇部分活動場次——通過邊緣融合技術對多個方位拍攝影像進行拼接融合,在第二現場進行播出,達到全方位沉浸式體驗的效果。
許多賽事會議都將用上基於5G的沉浸式VR體驗,例如2022北京冬奧會的賽場。如今的許多體育場和競技場全都安裝有數十台高清攝像機,然後捕捉各類角度的賽事鏡頭,將捕捉到的圖像數據進行渲染處理,進而能夠實現360度的回放,並使得對人眼難以判斷的動作和場上的違規行為進行詳細描述成為可能。
如今,人、物、數據將更加深度的連結在一起,現實世界和虛擬世界正在加速融合,VR會議只是數字孿生的冰山一角,是一個表現形式一個窗口,未來的數字化智慧工廠不是搬進了虛擬世界,而是邁上了通往融合創新的新大陸。(文/徐若華)
1、“國際在線”由中國國際廣播電台主辦。經中國國際廣播電台授權,國廣國際在線網絡(北京)有限公司獨家負責“國際在線”網站的市場經營。
2、凡本網註明“來源:國際在線”的所有信息內容,未經書面授權,任何單位及個人不得轉載、摘編、複製或利用其他方式使用。
3、“國際在線”自有版權信息(包括但不限于“國際在線專稿”、“國際在線消息”、“國際在線XX消息”“國際在線報道”“國際在線XX報道”等信息內容,但明確標注為第三方版權的內容除外)均由國廣國際在線網絡(北京)有限公司統一管理和銷售。
已取得國廣國際在線網絡(北京)有限公司使用授權的被授權人,應嚴格在授權範圍內使用,不得超範圍使用,使用時應註明“來源:國際在線”。違反上述聲明者,本網將追究其相關法律責任。
任何未與國廣國際在線網絡(北京)有限公司簽訂相關協議或未取得授權書的公司、媒體、網站和個人均無權銷售、使用“國際在線”網站的自有版權信息產品。否則,國廣國際在線網絡(北京)有限公司將採取法律手段維護合法權益,因此產生的損失及為此所花費的全部費用(包括但不限于律師費、訴訟費、差旅費、公證費等)全部由侵權方承擔。
4、凡本網註明“來源:XXX(非國際在線)”的作品,均轉載自其它媒體,轉載目的在於傳遞更多信息,豐富網絡文化,此類稿件並不代表本網贊同其觀點和對其真實性負責。
5、如因作品內容、版權和其他問題需要與本網聯繫的,請在該事由發生之日起30日內進行。