创维XR将在IROS 2026展示面向具身AI的第一人称数据采集方案

🤖 由 文心大模型 生成的文章摘要

XR硬件制造商创维XR近日宣布,将在于美国宾夕法尼亚州匹兹堡举行的2026年IEEE/RSJ国际智能机器人与系统会议(IROS)上,展示其面向具身AI的头戴式和腕戴式第一人称(ego-centric)数据采集系统。该会议将于2026年9月27日至10月1日举行。

创维XR表示,其参展正值第一人称人类数据日益成为具身AI和机器人基础模型重要资源之际。公司援引了近期的一些进展,包括Dyna Robotics披露其Dyna-2世界动作模型基于100万小时人类视频进行预训练,并强调了这一数据管道规模的不断扩大。公司补充说,这一趋势也表明XR硬件与机器人数据采集正在走向融合。

据创维XR介绍,第一人称数据正在超越传统的第一人称视频。公司援引了Meta的Ego4D和Project Aria等项目,指出这些项目已证明可穿戴设备不仅能捕捉人眼所见,还能捕捉设备运动、空间位置和其他传感器数据。此外,创维XR表示近期研究已探索将这些人类演示数据与机器人数据结合,用于模仿学习和具身AI。在公司看来,这使得XR硬件与下一代数据采集尤为相关。

创维XR解释称,XR设备本就需要解决高质量第一人称数据集所需的许多相同工程挑战,包括多摄像头同步、同步定位与建图(SLAM)和视觉惯性里程计(VIO)、六自由度(6DoF)追踪、传感器校准、嵌入式处理、热管理以及长时间佩戴运行。公司还强调,在规模化应用中,采集系统需要产出一致、同步且具有空间结构的数据,以便集成到下游AI训练管道中。

创维XR表示,正将其在VR和XR硬件制造方面的经验应用于专门的第一人称数据采集产品线,而非将这项技术视为一次性的定制项目。公司指出,其产品组合包括双目、六摄像头和九摄像头可穿戴系统,这些产品于2026年4月开始交付,到8月已交付超过10,000台。创维XR补充说,根据客户部署情况,这些设备已支持达到数十万小时的数据采集。

公司表示,还开发了配套的腕戴式摄像头和定位模块,用于需要额外手部和6DoF信息的应用,其头戴式和腕戴式系统能够无线通信,同时保持50微秒以内的同步误差。

最后,创维XR表示,其看到的机会不仅限于单个采集设备,而是面向大规模数据采集的模块化硬件生态系统。公司指出,随着具身AI数据集持续增长,关注点可能日益从单纯衡量采集了多少小时数据,转向衡量每小时数据包含多少可用信息。据公司称,对于XR制造商而言,这为最初为空间计算开发的技术——从可穿戴传感和空间追踪到多模态同步和大规模硬件制造——创造了一个新应用。

「93913原创内容,转载请注明出处」