visionOS 26.4重磅发布:引领VR串流新纪元,空间音频体验升级

苹果公司近日正式推出了visionOS 26.4系统更新,为其面向Apple Vision Pro的混合现实设备带来了重磅功能。这次更新的核心在于引入了全新的VR注视点串流(Foveated Streaming)技术,并对混合现实空间音频进行了重要优化,极大地提升了PC VR串流的效率和音频体验。

首先,注视点串流是本次更新的亮点。与注视点渲染不同,注视点串流侧重于在用户注视区域内提供更高画质的内容传输,而注视点渲染则是在设备端对该区域进行更高分辨率的渲染。这两者可以协同工作,为用户提供更加清晰流畅的视觉体验。其原理在于,VR头显的解码器在分辨率和码率方面受到限制,因此该技术优先保障用户注视区域的分辨率与压缩质量,同时对边缘区域进行适度优化。这种设计特别适合在带宽和计算能力受限的场景中,提升整体的清晰度与流畅度。

技术上,注视点串流采用了跨平台的底层框架,不仅限于本地的Mac设备,理论上任何PC VR服务器都可以适配。此外,苹果与英伟达的深度合作,使得CloudXR SDK的集成成为可能,支持本地与云端的PC串流。这一创新不仅提升了用户的使用体验,也为开发者提供了更大的灵活性。

在隐私方面,系统仅向开发者提供用户注视的粗略区域,而不暴露精确的眼动数据,兼顾了隐私保护与功能的实现。这也是visionOS首次向开发者开放此类视线信息,标志着苹果在保护用户隐私方面的持续努力。

在适配限制方面,目前CloudXR SDK仅支持英伟达的Ada和Blackwell架构,即RTX 40和50系列显卡。针对这一更新,已经有多个模拟类应用推出了专属的visionOS客户端,例如X-Plane 12和iRacing,这些应用能够自动对接PC模拟,利用计算机视觉对齐座舱与外设,并通过透视显示技术实现更好的用户体验。

除了注视点串流,空间音频的升级也是本次更新的重要组成部分。自发布以来,Vision Pro便支持音频光线追踪技术,能够扫描环境的材质与结构,使得声音能够更好地匹配物理空间的声学特性。visionOS 26.4对此进行了进一步优化,使得系统能够存储和记忆房间的声学属性,音频光线追踪的初始化速度大幅提升,用户无需移动头显便可快速建立完整的环境声学模型。这种优化让混合现实中的音频响应更加迅速,沉浸感更为连贯。

总结来看,visionOS 26.4以注视点串流为核心,打通了Vision Pro与高性能PC及云端之间的高效VR内容串流通道,兼顾了隐私、性能与画质。而空间音频的升级则让混合现实的听觉体验更加自然流畅。目前,该更新已经向所有Vision Pro用户推送,开发者和高端用户可以快速体验这些全新的串流与音频能力。随着技术的不断发展,未来的VR体验将会更加丰富和多元化,期待苹果在这一领域的持续创新。