visionOS 27为Vision Pro开放第三方配件追踪,最高支持90Hz

🤖 由 文心大模型 生成的文章摘要

苹果在visionOS 27中为Apple Vision Pro引入了一套全新的“空间配件”框架,首次允许第三方厂商打造可被头显追踪的控制器和工具类硬件。该更新已于9月14日随苹果其他平台版本一同推送给Vision Pro用户。

空间配件框架:红外LED+IMU,最高90Hz追踪

根据苹果开发者页面的描述,空间配件通过“红外LED与IMU相结合,实现精确、低延迟的六自由度追踪”,追踪频率最高可达90Hz。苹果表示,这一追踪能力可支持“高动态使用场景以及低光照条件下的追踪”。

配件不仅可以被追踪,还能集成“按钮、触控板、触觉反馈等物理输入方式”。触控笔、工具手柄或游戏控制器是最明显的应用方向,不过苹果目前尚未公布任何具体的消费级产品。

这一技术路线与Meta为Quest控制器采用的方案基本相同:头显摄像头可识别的红外LED,加上惯性传感器来填补摄像头帧之间的空隙。区别在于,苹果将其作为平台开放给第三方,而非推出自家控制器。

此前已有厂商尝试绕过苹果的限制。Surreal Touch控制器于2024年登陆Kickstarter,号称首款Vision Pro控制器。苹果的新框架为这类产品提供了官方接入头显的途径。

DFRobot与MikroE将推出参考硬件

苹果称,包括DFRobot和MikroE在内的制造商将在“今年晚些时候”发布参考硬件和开发套件,用于测试或直接在visionOS应用中使用。不过,首批硬件目前尚未开售。

PS VR2 Sense控制器接入Unity,Godot支持在途

索尼PS VR2 Sense控制器也获得了更广泛的支持。苹果表示,“visionOS现已支持Unity应用和游戏中的空间配件”,并点名PS VR2 Sense控制器为例,同时称“visionOS上的Godot也将获得支持”。

Sense控制器本身并非首次登陆Vision Pro。苹果在2025年6月随visionOS 26宣布了对该控制器的支持,此前约半年已有报道称苹果正在推进此事。此次变化在于引擎层面的支持:Unity开发者现在可以将这些控制器作为空间配件进行开发,苹果称Godot支持也即将到来。

Quest和SteamVR上的许多VR游戏基于Unity构建,Godot则支撑着越来越多的小型项目。对于从这些平台移植的工作室而言,这意味着可以在自己熟悉的引擎内为Vision Pro实现控制器输入——目前是Unity,之后是Godot。

物体追踪与高斯泼溅渲染升级

本次更新还包含两项较小的开发者改动。苹果称“高帧率追踪让应用在物体移动时获得更频繁的姿态更新”,Create ML中扩展的训练选项则提升了精度,“尤其是对握持在手中的物体”。

RealityKit“现在可高效渲染3D高斯泼溅”,苹果表示,这使应用能将真实物体的照片级扫描放入虚拟场景。Quest用户自2024年起已在Gracia等应用中见过这一技术,苹果现在在其自有渲染引擎中提供了支持。

对用户而言:硬件与开发者适配仍是前提

对于现有Vision Pro用户来说,在配件厂商出货硬件、开发者采用新API之前,这些更新尚不会带来实际体验变化。DFRobot和MikroE的套件预计于今年晚些时候推出,是迈向落地的第一步。

「93913原创内容,转载请注明出处」