微博

QQ

虚拟数字人 冬奥玩出新高度

2022-04-07 依马狮视听工场


在元宇宙的带动下,各种虚拟偶像、虚拟主播,虚拟数字人玩出了新高度,在冬奥会这个全球关注的赛事上,虚拟人又火了。


2月2日,在北京举办的“相约北京”奥林匹克文化节开幕式上,中国虚拟歌手洛天依以一首歌曲《Time to shine》受到广泛关注,成为第一位登上奥运舞台的中国虚拟歌手。

从整个冬奥会的进程来看,虚拟数字人的全面参与,是在冬奥会的宣传、开幕式和播报上。

虚拟数字人“热爱REAI”就是首次被采用的数字人奥林匹克公益宣传大使。

据悉,虚拟数字人相关产业规模正在不断扩大,根据头豹研究所数据显示,当前虚拟数字人市场规模已超2000亿元,预计2030年将达到2703亿元,而其中身份型虚拟人将在未来发展中占据主导地位。另据Research And Markets研究,预计到2028年,全球虚拟活动市场规模将达到5047.6亿美元。

借道冬奥这样的盛会,虚拟数字人的热度蹭蹭蹭上涨。我们一起来看看数字人都是怎么“玩转”冬奥的。

虚拟数字人  冬奥玩出新高度

阿里巴巴 数字人“冬冬”

作为云上奥运的技术服务商之一,阿里巴巴也推出了冬奥数字人“冬冬”。冬冬在北京冬奥会主媒体中心的首秀,便是与主持人一同到北京2022官方特许商品零售店介绍各种冬奥周边商品。

而冬奥会开始之后,冬冬每天晚上7点半之后在淘宝直播带货2个小时左右。数场直播下来,直播间的观看人数已经稳定在14万左右。“冬冬”的角色更像是一个直播带货主播。

数智人Meet GU

在谷爱凌比赛前,咪咕的冬奥演播室里,一个“神秘嘉宾”惊喜现身,与主持人互动,为谷爱凌加油。她就是Meet GU——中国移动咪咕通过自研技术为谷爱凌量身打造的数智分身。

这是以谷爱凌为原型的亚毫米级超写实数字人打造,首次实现冬奥演播室虚实互动呈现。通过高质量肢体及亚毫米级面部绑定,采用动补驱动亚毫米级数字人并达到4K质量合成,Meet GU应用了3D人脸关键点位置精确修正、眼眶眼球自动适配、任意姿态人脸配准等核心技术,让3D人脸拟合精度达亚毫米量级,实现演播室虚实互动。

作为咪咕的冬奥嘉宾天团成员,冰雪数智达人Meet GU走进演播室,陪伴观众直击中国冰雪健儿的拼搏姿态。

虚拟数字人  冬奥玩出新高度

拓尔思“小思”

拓尔思旗下的虚拟数字人“小思”在冬奥会期间连续进行冬奥热点播报的同时,还正式加盟了本届冬奥会宣传报道的重要媒体之一——国家体育总局官方媒体《中国体育报》。据悉,小思可以实现自动采编、智能写稿、虚拟播报等全自动功能。

科大讯飞“3D虚拟冰冰”

科大讯飞派出的“3D虚拟冰冰”,在专属H5中带领大家说冬奥。凭借酷似央视主播王冰冰的眉眼和神韵,“3D虚拟冰冰”迅速赢得了众多网友的拥趸。 “3D虚拟冰冰”还解锁了东北话、英语等多达31种语言技能。

小冰AI虚拟气象主播冯小殊

早在冬奥会开幕前十天,中国天气 WAP 华为站、张家口气象公众号等新媒体平台上,一位气象主播冯小殊就已经正式上岗。

虚拟数字人  冬奥玩出新高度

这位主播冯小殊不是人类,而是由中国气象局华风气象传媒集团联合小冰公司共同创造、诞生于小冰框架的 AI 虚拟气象主播。这也是小冰框架虚拟人技术解锁的又一场景。

冯小殊以中国天气主持人冯殊为训练目标,依托小冰框架数字孪生虚拟人技术构建而成。他的训练时间仅为一周,背后是小冰深度神经网络渲染技术(Xiaoice Neural Rendering, XNR)及小样本学习技术。即使用少量样本,冯小殊的面容、表情、肢体动作的整体自然度就达到了与真人十分相似的程度。

在语音专家模型、嘴型专家模型及人脸渲染专家模型的训练下,冯小殊学习了冯殊本人的嘴部动作、眼部及脸部肌肉之间的协同关系,最终呈现出这一自然、逼真的效果。

背后的科技力量

在这些虚拟人背后,百度和腾讯技术功不可没。其中百度主要为央视电视直播提供手语翻译服务,腾讯的聆语主要为央视频提供手语翻译服务,并上线小聪在腾讯体育上进行手语翻译。

AI手语翻译的主要困难在于,手语也有自己的 “语法”,语序也并不一定与汉语相同,且手语也存在“方言”,即便是真人手语翻译师也难以保障百分百的可懂度。因此AI手语虚拟主播本质上仍是一个即时翻译功能。

由百度开发的AI手语虚拟主播由其数字人平台曦灵打造,主要是通过语音识别、自然语言理解等人工智能技术构建手语翻译引擎,再通过专为手语优化的自然动作引擎奖授予实时演绎为数字人的表情动作。

“聆语”则由腾讯云小微联合PCG AI等技术团队共同打造,通过整合多模态交互技术、3D数字人建模、机器翻译、语音识别和自然语言理解等技术优化手语翻译。

相关报道显示,百度通过百度智能云构建手语翻译引擎,可懂度达到85%以上,聆语词汇和语句覆盖量超过160万,手语翻译的可懂度可达90%,基本可以满足电视直播手语翻译的需要。

科大讯飞 冬奥会 元宇宙 AI 直播

视听科技视频号 广告
发表评论