在元宇宙的帶動下,各種虛擬偶像、虛擬主播,虛擬數字人玩出了新高度,在冬奧會這個全球關注的賽事上,虛擬人又火了。
2月2日,在北京舉辦的“相約北京”奧林匹克文化節開幕式上,中國虛擬歌手洛天依以一首歌曲《Time to shine》受到廣泛關注,成為第一位登上奧運舞臺的中國虛擬歌手。
從整個冬奧會的進程來看,虛擬數字人的全面參與,是在冬奧會的宣傳、開幕式和播報上。
虛擬數字人“熱愛REAI”就是首次被采用的數字人奧林匹克公益宣傳大使。
據悉,虛擬數字人相關產業規模正在不斷擴大,根據頭豹研究所數據顯示,當前虛擬數字人市場規模已超2000億元,預計2030年將達到2703億元,而其中身份型虛擬人將在未來發展中占據主導地位。另據Research And Markets研究,預計到2028年,全球虛擬活動市場規模將達到5047.6億美元。
借道冬奧這樣的盛會,虛擬數字人的熱度蹭蹭蹭上漲。我們一起來看看數字人都是怎么“玩轉”冬奧的。

阿里巴巴 數字人“冬冬”
作為云上奧運的技術服務商之一,阿里巴巴也推出了冬奧數字人“冬冬”。冬冬在北京冬奧會主媒體中心的首秀,便是與主持人一同到北京2022官方特許商品零售店介紹各種冬奧周邊商品。
而冬奧會開始之后,冬冬每天晚上7點半之后在淘寶直播帶貨2個小時左右。數場直播下來,直播間的觀看人數已經穩定在14萬左右。“冬冬”的角色更像是一個直播帶貨主播。
數智人Meet GU
在谷愛凌比賽前,咪咕的冬奧演播室里,一個“神秘嘉賓”驚喜現身,與主持人互動,為谷愛凌加油。她就是Meet GU——中國移動咪咕通過自研技術為谷愛凌量身打造的數智分身。
這是以谷愛凌為原型的亞毫米級超寫實數字人打造,首次實現冬奧演播室虛實互動呈現。通過高質量肢體及亞毫米級面部綁定,采用動補驅動亞毫米級數字人并達到4K質量合成,Meet GU應用了3D人臉關鍵點位置精確修正、眼眶眼球自動適配、任意姿態人臉配準等核心技術,讓3D人臉擬合精度達亞毫米量級,實現演播室虛實互動。
作為咪咕的冬奧嘉賓天團成員,冰雪數智達人Meet GU走進演播室,陪伴觀眾直擊中國冰雪健兒的拼搏姿態。

拓爾思“小思”
拓爾思旗下的虛擬數字人“小思”在冬奧會期間連續進行冬奧熱點播報的同時,還正式加盟了本屆冬奧會宣傳報道的重要媒體之一——國家體育總局官方媒體《中國體育報》。據悉,小思可以實現自動采編、智能寫稿、虛擬播報等全自動功能。
科大訊飛“3D虛擬冰冰”
科大訊飛派出的“3D虛擬冰冰”,在專屬H5中帶領大家說冬奧。憑借酷似央視主播王冰冰的眉眼和神韻,“3D虛擬冰冰”迅速贏得了眾多網友的擁躉。 “3D虛擬冰冰”還解鎖了東北話、英語等多達31種語言技能。
小冰AI虛擬氣象主播馮小殊
早在冬奧會開幕前十天,中國天氣 WAP 華為站、張家口氣象公眾號等新媒體平臺上,一位氣象主播馮小殊就已經正式上崗。

這位主播馮小殊不是人類,而是由中國氣象局華風氣象傳媒集團聯合小冰公司共同創造、誕生于小冰框架的 AI 虛擬氣象主播。這也是小冰框架虛擬人技術解鎖的又一場景。
馮小殊以中國天氣主持人馮殊為訓練目標,依托小冰框架數字孿生虛擬人技術構建而成。他的訓練時間僅為一周,背后是小冰深度神經網絡渲染技術(Xiaoice Neural Rendering, XNR)及小樣本學習技術。即使用少量樣本,馮小殊的面容、表情、肢體動作的整體自然度就達到了與真人十分相似的程度。
在語音專家模型、嘴型專家模型及人臉渲染專家模型的訓練下,馮小殊學習了馮殊本人的嘴部動作、眼部及臉部肌肉之間的協同關系,最終呈現出這一自然、逼真的效果。
背后的科技力量
在這些虛擬人背后,百度和騰訊技術功不可沒。其中百度主要為央視電視直播提供手語翻譯服務,騰訊的聆語主要為央視頻提供手語翻譯服務,并上線小聰在騰訊體育上進行手語翻譯。
AI手語翻譯的主要困難在于,手語也有自己的 “語法”,語序也并不一定與漢語相同,且手語也存在“方言”,即便是真人手語翻譯師也難以保障百分百的可懂度。因此AI手語虛擬主播本質上仍是一個即時翻譯功能。
由百度開發的AI手語虛擬主播由其數字人平臺曦靈打造,主要是通過語音識別、自然語言理解等人工智能技術構建手語翻譯引擎,再通過專為手語優化的自然動作引擎獎授予實時演繹為數字人的表情動作。
“聆語”則由騰訊云小微聯合PCG AI等技術團隊共同打造,通過整合多模態交互技術、3D數字人建模、機器翻譯、語音識別和自然語言理解等技術優化手語翻譯。
相關報道顯示,百度通過百度智能云構建手語翻譯引擎,可懂度達到85%以上,聆語詞匯和語句覆蓋量超過160萬,手語翻譯的可懂度可達90%,基本可以滿足電視直播手語翻譯的需要。