网络暴力|新一代XR头显标配,详解眼动追踪技术的价值和挑战( 三 )


Tobii作为眼动追踪技术的全球领先者 , 多年的研究和全球产品整合经验为其XR整合平台提供了最为庞大的数据总集和子集 , 无论XR设备针对全球用户还是局部市场(如亚洲或中国) , 都可以在高人群覆盖中获得高准确度和高精度 。
除此之外 , Tobii认为 , “整合眼动技术过程中所需的认证、生产、测试等环节 , 需要大量经验积累才能避免额外成本 。 因此 , 技术方案提供商整合经验越丰富 , 上市产品越多 , 就越能控制不必要的成本支出 。 ”
眼动追踪作为一项前沿技术 , 历经多年发展 , 到底有何价值或者想象力 , 能吸引XR领域厂商的一致看好?
眼动追踪的核心价值:
优化资源、提升体验、获取洞见
近年来 , 眼动追踪在XR企业级设备和应用开发上得到普遍采用 , 未来在消费级设备上将推动出现更多颠覆性功能和体验 。 总体来说 , 其核心价值在于优化系统资源、提供舒适自然的交互体验以及揭示用户行为洞见 。
1、优化系统资源
基于眼动追踪的注视点渲染技术是优化XR设备系统资源的高效手段和核心功能 , 也是前文所列举的产品搭载眼动追踪的主要目的之一 。
追求更好的视觉效果是大势所趋 , 所以未来XR设备的分辨率和视场角都会持续提升 , 目前VR设备的分辨率已经达到8K甚至12K , 产品的最大视场角也达到了210度 , 随之而来的是对渲染的压力提升 , 8K屏幕用移动端的处理平台根本无法负荷 , 但采用注视点实时对局部进行渲染则可以实现 。
注视点渲染可以简化理解为 , 仅对XR视野内用户注视的中心区域进行高精度渲染 , 而对视野内的其他区域进行低分辨率渲染 , 在降低GPU着色负载的同时保持高帧率 , 以此更好配置有限的算力资源 , 让用户获得出色体验 。 这种“聚焦”的视觉效果也与自然的人眼视觉行为特征相符 。
注视点渲染又分为固定和动态两种类型 。 据了解 , 采用固定注视点渲染 , XR设备会预设显示器中心部分为高质渲染区域 。 因此用户的注视点需始终处于该区域位置 , 靠头部转动转移视线 。 早在2018年 , Oculus Go便开始采用这种方式 。

Oculus Go(图源:网络)
而动态注视点渲染则可在眼球转动时捕捉注视点以实现更精准的实时渲染 。 Tobii曾在不同设备和环境下做过一系列基准测试 。 测试数据表明 , 动态注视点渲染比固定注视点渲染能降低两倍的GPU着色负载 , 能更有效地维持高帧率和优化系统资源 。 无论是一体机还是连接PC的头显设备 , 动态注视点渲染都能使其性能更加出色 。
在Pico Neo 3 Pro Eye的硬件环境下 , 该基准测试表明Tobii的动态注视点技术Tobii Spotlight能将帧率提高78% , 一体机能耗降低10% 。 这无疑是一体机增强硬件性能的极佳方案 。

Tobii动态注视点渲染基准测试之一(图源:Tobii)
Tobii的动态注视点渲染还被用在了英伟达的VRSS解决方案中 。 新版本 VRSS 2 以最小延迟为驱动程序提供最新的眼动追踪信息 , 用于控制渲染帧的超采样区域 , 根据用户注视的位置提高图像质量 。 VRSS 是一种零编码解决方案 , 这意味着开发人员无需添加任何代码即可实现其功能 。
2、舒适自然的交互体验
社交是VR中极为重要的应用之一 , 用户通过各自的虚拟形象(Avatar)进行自由交流 , 期待一种真实沉浸的体验 。
为创造这样的体验 , XR大厂在Avatar身上下足了功夫 , 比如Meta开发了从肢体语言到脸部、嘴唇等细节部位足够好的动作捕捉 , 以增加虚拟形象的表现力 。

Meta推出新的Avatar系统(图源:网络)

相关经验推荐