谷歌公开AR眼镜新专利:结合手势与眼动,手指一指即可获取现实物体信息

🤖 由 文心大模型 生成的文章摘要

谷歌一项新公开专利申请,披露未来AR智能眼镜交互方案。设备可以结合用户手指指向动作与眼球注视点,理解用户意图,无需开口提问,直接针对现实物体给出AI解答。该眼镜大概率会和安卓手机配对使用。

这份专利于今年4月9日提交,10月15日正式对外公布。专利给出一个典型使用场景:调试路由器时,用户只需手指指向路由器的网口,眼镜识别目标,直接把接口说明、操作指引叠加显示在对应硬件位置上,不用拿出手机查阅说明书。

整套系统会同时采集三类信息:手指指向的点位、目标完整物体、周边物体之间空间关系。依靠两套AI模型协同工作,第一套把手势、眼动信息转化为完整文本提示词;第二套AI检索生成答案,将虚拟标签锚定在真实物体之上,就算物体被拿起移动,虚拟标注依旧跟随目标。系统还会参考手势保持时长、指尖距离、视线停留时间,进一步判断用户真实诉求。

除手势交互之外,眼镜还可以识别实物标签文字,理解语音提问,例如“这两个部件该如何组装”。专利还加入安全预警能力,当系统识别到咖啡杯放置在硬盘旁边,会主动提示液体泼洒风险,规避硬件损坏隐患。

针对隐私风险,专利文档提到设备支持端侧预处理,上传云端之前,可在本地对人脸、照片、纸质文档画面做模糊处理,保护用户现场画面隐私。

需要强调,专利不等于最终量产产品,谷歌会提交大量专利,很多技术不会落地为商用硬件。不过该方案和Android XR平台、Gemini大模型的产品方向高度契合。记者在今年Google I/O大会体验过Android XR眼镜原型,AI能力是产品最大亮点;如果指向识别技术落地,将比单纯语音唤醒Gemini更加自然,推动智能眼镜从新奇玩具走向实用工具。

业内观点指出,Android XR现有手势体系已经比较成熟,但现实环境下手势识别的稳定性,依旧有待实际产品验证。

「93913原创内容,转载请注明出处」