
苹果在WWDC 2026开发者大会上正式公布了visionOS 27。作为Apple Vision Pro头显的第四代主力系统,该版本看似在主题演讲中着墨不多,但结合官方文档与开发者分享内容来看,visionOS 27是迄今为止功能更新幅度最大的版本之一,涵盖AI交互、空间追踪、配件生态、影音录制、场景体验、开发框架等数十项核心优化,将于今年秋季推送至M2与M5两款 Apple Vision Pro机型,目前首个测试版已对外开放。
一、AI 能力全面进化:Siri AI 落地,视觉智能拓展交互边界
今年晚些时候,搭载大语言模型的Siri AI将登陆visionOS 27,这也是苹果全系主力系统的重要升级。该功能依托苹果新一代Foundation模型打造,相关模型由苹果与谷歌联合开发、基于谷歌Gemini技术,合作规模达每年10亿美元。沿用苹果智能技术的运行逻辑,简单任务可在设备端本地运行,复杂计算则交由苹果私有云计算平台处理。
在Vision Pro的空间场景中,Siri AI以可固定在室内实体位置的悬浮光球形态呈现。用户无需唤醒词,只需注视光球即可发起对话,同时系统全面支持视觉智能(Visual Intelligence),能够识别周边实体与虚拟环境,协助用户完成搜索、提问、指令执行等操作。此外,visionOS 27还上线独立Siri应用,可查看历史对话,成为ChatGPT、Gemini等第三方AI聊天工具的原生替代选择。
依托新一代基础模型,系统还附带多项通用功能优化:Image Playground图像生成效果更逼真、Safari浏览器可自动整理标签页、支持一键强化已保存密码强度,以及信息应用个性化智能回复等。
二、空间追踪与配件生态革新,降低外设开发门槛
物体追踪能力迎来质的飞跃是本次更新的核心亮点之一。此前visionOS 2仅支持静态3D物体追踪,移动物体识别延迟极高。visionOS 27新增高帧率物体追踪模式,适配手持、移动类物件,开发者实测其刷新率约30Hz。针对手持物品追踪,系统配备进阶训练模式,可大幅提升识别精度,但也会显著延长机器学习模型训练时长,有开发者测试,训练一款玩具模型耗时约18小时。
同时,苹果正式开放红外LED配件追踪框架,推出标准化API,打破以往仅对索尼PS VR2 手柄、Muse数位笔等少数硬件的专属适配限制。第三方厂商可基于该接口自主研发红外 LED追踪配件,光学追踪帧率可达90Hz,并结合惯性测量单元数据保障定位精度。硬件厂商有两种适配方案可选:一是配套专属应用注册硬件信息,面向消费级产品;二是将硬件信息内置至应用中,更适配行业场景。目前DFRobot、MikroE等厂商已着手推出参考硬件与开发者套件,预计年内上市,大幅降低第三方配件的研发门槛。
三、影音录制与画面体验升级,内容创作更便捷
针对用户长期诟病的渲染录制问题,visionOS 27新增高质量无焦外录制功能。Apple Vision Pro原生采用注视区域高清渲染的焦外渲染技术,以往录制画面中,非注视区域会呈现模糊状态,且头戴设备无法录制完整高清画面。新版本支持设备端直接录制最长3分钟的4K全清晰度视频,无需借助Mac模拟器,极大便利了开发者、创作者与测评博主展示设备效果,也是用户呼声最高的功能之一。
界面视觉方面,系统为Safari浏览器、Freeform白板、Apple TV多视图模式新增曲面窗口效果,曲面界面可环绕用户视野,提升沉浸式体验。不过该功能为苹果第一方应用专属接口,第三方应用在共享空间中无法使用。此外,控制中心完成界面重构,拆分为三大面板,布局更整洁:左侧展示时间、电量、网络与通知;中间集中各类快捷开关与音量调节;右侧负责虚拟环境、昼夜模式、透视强度等设置。
四、全新虚拟场景与交互细节,优化日常使用体验
visionOS 27新增第十款官方虚拟空间——冰岛索斯默克山谷(Thórsmörk),该场景拥有白昼与黑夜两种模式,夜间可呈现绚丽极光景观。至此,visionOS官方虚拟环境已涵盖夏威夷火山、优胜美地、月球、博拉博拉岛、木星等十余个特色场景。
系统还支持将iPhone拍摄的全景照片转化为空间全景场景,并设置为系统默认桌面背景,让个人影像融入空间交互环境。在交互细节上,通知栏新增注视展开功能,用户看向通知即可查看完整内容与操作选项;系统搭载端侧语音识别模型,可为所有视频自动生成字幕,强化无障碍使用体验。
针对Wi-Fi连接慢的老问题,visionOS 27将设备开机后的Wi-Fi初始化速度提升至原来的三倍,改善开机初期断网的情况。同时新增迷你级别的配件小组件,尺寸小于传统组件,可用于显示电量、倒计时、智能家居开关等,其中Mac虚拟显示器专属小组件,支持一键连接休眠状态下的Mac主机。
五、跨设备协同增强,Mac 联动能力再升级
借助macOS 27配套接口,visionOS 27上线Mac 3D物体预览API。当Vision Pro通过Mac 虚拟显示器连接电脑后,用户可在空间环境中直接预览Mac端的3D模型,系统原生预览应用已适配该功能。开发者仅需少量代码即可为旗下Mac软件添加该能力,模型支持注视+捏合的空间编辑操作,修改内容可实时同步至Mac端,同时支持多人共享协作。目前Cinema 4D、SketchUp等主流3D设计软件已宣布将接入该接口。
面向开发者,macOS端Xcode 27新增设备中心(Device Hub)工具,开发者可通过Mac远程启动Vision Pro中的应用,免去引导用户操作空间界面的步骤,大幅提升线下演示、测试的效率,这也是iPhone、iPad配套应用暂未实现的能力。此外,Safari浏览器新增网页3D 环境功能,开发者可为网页定制专属沉浸式3D场景,该功能独立于WebXR技术,部署门槛更低。
六、开发框架与无障碍功能全面补强
苹果自研空间开发引擎RealityKit迎来大规模迭代,多项能力补齐行业短板:其一,新增实体空间光照功能,应用可向真实环境投射点光源、聚光灯,支持投影纹理与动态光影效果;其二,原生集成高斯泼溅渲染,开发者无需自主编写代码即可实现高精度3D实景重建;其三,加入实时布料模拟系统,可模拟布料垂坠、褶皱、碰撞等物理效果,并支持自定义材质参数;其四,推出混响网格API,开发者可定义虚拟空间的声学属性,模拟不同环境下的声音反射、混响效果,打造更真实的沉浸式音频体验。
在实用功能层面,系统引入车辆动态视觉提示功能,该功能此前已登陆苹果其他系统,通过屏幕边缘动态光点提示车辆加减速、转向状态,有望缓解VR使用中的眩晕问题。无障碍领域迎来重大更新,visionOS 27原生支持眼动控制电动轮椅,首批适配Tolt、LUCI两大驱动系统,支持蓝牙与有线连接,苹果表示后续将持续拓展兼容设备品类。
据介绍,当前推送的首个测试版并未包含全部新功能,完整版特性将在秋季正式版中逐一落地。整体来看,visionOS 27围绕AI、空间交互、跨设备协同、开发者生态四大方向深度升级,不仅补齐了Apple Vision Pro过往的功能短板,也进一步强化了其空间计算设备的竞争力,同时开放的各类接口也将吸引更多第三方厂商入局,丰富整个visionOS生态。






