随着新设备吸引消费者XR市场,由移动和视频技术研发公司InterDigital委托市场研究公司ABI research撰写的一份白皮书详细介绍了创造新的扩展现实(XR)机会的标准、解决方案和新挑战。
这份名为《定义XR体验:实现沉浸式生态系统》的报告介绍了无线和视频创新的坚实基础,这些创新支撑了包括AR、VR和MR在内的各种XR体验,并强调了标准在确保兼容性,以及在各种设备、网络和增强XR体验的系统上对抗技术分裂的重要性。虽然消费者对XR头显和服务的接受相对缓慢,但报告指出,设备硬件、内容捕获、编码和面向XR的内容分发能力的改进是推动XR市场增长的关键因素。
无缝的沉浸式XR体验取决于多种因素,包括能够处理高分辨率、高帧率、多视点内容和空间音频的头显,以及能够满足XR低延迟和高可靠性要求的网络。在现有的独立、有绳和基于手机的VR设备解决方案中,并不是所有的头显都能够在设备内有计算功能。大多数需要把渲染分割到整个网络上,这通常会给真正的沉浸式体验带来延迟及其它障碍。最近推出的Apple Vision Pro等设备在触觉、眼动追踪及其它精度指标上都有所改进,增强了设备所能提供的沉浸式体验。
“当前无线和多媒体的创新使我们能够将音频、视频、触觉和动觉数据捕获到一个场景呈现中,并通过我们的网络传输复杂的XR流量,从而实现实体世界和虚拟世界的无缝融合,因而使XR能力稳步推进,”InterDigital首席技术官Rajesh Pankaj表示,“如果没有像InterDigital这样的公司的长期研究和对标准的贡献,这些新的‘现实’是不可能实现的,这些公司改进网络能力,发展压缩技术,并确保设备和服务在这个不断增长的生态系统中的互操作性。”
该报告将沉浸式生态系统的增长归因于视频压缩和传输协议的基础改进以及标准提供的无数好处。视频标准组织MPEG已经开始通过围绕动态网格编码、触觉和场景描述研究的标准研究工作探索XR经验。此外,MPEG的视觉体积视频编码(V3C)标准,由MIV(MPEG沉浸式视频)和V-PCC(基于视频的点云压缩)组成,已经建立了编码和流传输体积内容(预计是捕获、处理和分发方面最具挑战性的XR内容类型之一)的定义。在无线标准方面,3GPP专门开展了大量活动增强5G系统,以更好地支持XR通信,同时解决5G网络如何变得更加“XR感知”的问题。
“XR是硬件和内容要求的完美风暴,这使得支持它成为一个难题:高分辨率和帧率、交互性、移动性以及像触觉和空间跟踪这样的新数据类型,”ABI Research研究总监Eric Abbruzzese表示,“提高从创建到分发的整个XR管道的效率对用户和运营商都有好处。随着XR的普及,确保设备和生态系统的互操作性也变得至关重要,确保健康的开发者和内容生态系统,为用户提供高价值的内容,同时最大限度地减少用户体验摩擦。”
报告认为,在XR的各个方面都有进展,标准仍然是赋予新功能和确保兼容性的不可或缺的一部分。展望未来,XR生态系统将继续探索新的“XR感知”网络功能、新的XR附件和支持硬件,以及多用户支持XR机用户跟踪和定位的解决方案,以及其它机会。