93913.COM-XR资讯第一站

主菜单

  • 网站首页
  • 活动中心
  • 视频娱乐
  • 2022XRIC

logo

  • 网站首页
  • 活动中心
  • 视频娱乐
  • 2022XRIC
01f8cf69b5784b5bd612.jpg
  • 最新文章
  • 产业动态
  • 游戏快报
  • 人物专访
  • 2021金V奖
首页›最新文章›全球资讯›产业动态›Meta Reality Labs开发可呈现逼真虚拟化身的原型VR头显

Meta Reality Labs开发可呈现逼真虚拟化身的原型VR头显

By William
2022年5月5日
0
fc7471646707470e15fa.gif

据RoadtoVR报道,Meta Reality Labs研究人员创建了一个原型VR头显,该头显配置了设计用于AI处理的定制加速器芯片,从而使该公司逼真的用户虚拟化身(Codec Avatars)在VR一体机上的呈现成为可能。

早在更名Meta之前,Meta(Facebook)就一直致力于其“Codec Avatars”项目,该项目旨在使近乎逼真的虚拟化身成为现实,该系统整合了头显传感器功能(如眼动追踪和嘴部追踪)与AI处理功能,以实时呈现用户虚拟化身。

基于NVIDIA Titan X GPU强大功能支持,Meta“Codec Avatars”研发得以突飞猛进,如今,Meta已开始研究如何在低功率VR一体机上制作Codec Avatars,正如上个月2022 IEEE CICC会议期间Meta发表的一篇论文证明,Meta创建了一个采用7nm工艺构建的定制芯片,以作为Codec Avatars的加速器。

研究人员表示,该芯片远未上市,团队在设计时考虑了Codec Avatars处理管道的重要组成部分——分析传入的眼动追踪图像、并生成Codec Avatars模型所需的数据,该芯片基底面仅为1.6mm²。

“该测试芯片采用7nm技术节点制造,具有神经网络(NN)加速器,由1024乘积(MAC)阵列、2MB片内SRAM和32位RISC-V CPU组成。”

反过来,Meta基于芯片特定架构,还重建了部分Codec Avatars AI模型。

“通过重构基于卷积(神经网络)的注视提取模型并为硬件量身定制,使模型适配芯片,以减轻片外存储器访问的系统级能耗和延迟成本,”Reality Labs研究人员指出,“通过电路级别有效加速卷积运算,该原型芯片在低外形尺寸下实现了每秒30帧的性能和低功耗。”

通过加速Codec Avatars密集部分的工作负载,该芯片不仅加快了效能,还降低了所需的功率和能耗,另外由于芯片采用定制设计,它比通用CPU更加有效。

通常而言,头显通用CPU(Quest 2 Snapdragon XR2芯片)以全功耗运行,而自定义芯片则处理Codec Avatars编码过程、XR2管理解码过程并呈现化身实际视觉效果。

令人印象深刻的是,Meta Codec Avatars可以兼容于VR一体机(即使需要专门芯片),但我们尚不清楚Codec Avatars的视觉渲染处理效果。

这项研究代表了新计算架构的实际应用,Reality Lab首席科学家Michael Abrash最近将其描述为实现XR科幻愿景的必经之路,Michael Abrash表示,从高度集中的处理转向更分布式的处理,对于这类头显的功率和性能需求至关重要。

可以想象,XR特有的一系列功能将受益于专门设计用于加速效能的芯片,例如,基于位置跟踪和手部跟踪功能将能提升XR体验(这也是将硬件和算法结合设计以优化功率和速率的优势之处)。

「93913原创内容,转载请注明出处」
赞(23)微海报分享
689d514f2d2728410e08.png
TagsMeta Reality Labs原型VR头显虚拟化身

William

遨游虚拟世界星辰大海,求真XR科技最新资讯。

相关文章 更多作者

  • 探讨AR眼镜发展方向,Meta Reality Labs首席科学家阐述新计算架构

    2022年5月4日
    By William
  • The Verge:Meta Reality Labs员工超过1.7万名

    2022年5月23日
    By William
  • Meta Reality Labs:研究团队展示可用于制造变焦VR头显的动态聚焦LC透镜

    2022年5月26日
    By William

大家都在看

奇遇VR恐怖游戏「灵魂之逝:来生」,带你体验尖叫的快感

上线首周仅需47元
  • 大朋VR新品携手梦语者「流浪太空」,打造顶级科幻FPS体验

    By 93913虚拟现实网
    2022年5月27日
  • 超2000美元的苹果MR头显,能掀起消费市场的「巨浪」吗?

    By Roger
    2022年5月27日
  • PSVR 2将与“20多款第一方和第三方首发游戏”同步发布

    By William
    2022年5月27日
  • XR硬件厂商Lynx完成400万美元A轮融资

    By William
    2022年5月27日

人物专访

  • 苹果索尼Meta消费级XR硬件新标配,眼球追踪的「魅力」在哪里?

    专访七鑫易维副总裁路伟成
  • 从产品组合拳到企业元宇宙,瑞立视的「整合聚变」之路

    瑞立视深度布局XR数字孪生生态圈
  • 人人都想突破的AR消费市场,光粒为何从智能泳镜下手?

    专访光粒科技创始人&CEO张卓鹏
  • 穿越产业「盛夏」与「寒冬」,老兵眼中的普惠VR之道

    93913专访超级队长CEO王磊
  • 奇遇VR的「元宇宙」征途

    对话爱奇艺智能CEO熊文

“93913虚拟现实网”成立于2015年9月13日,是目前国内最早且最具影响力的XR专业媒体,我们致力为虚拟现实(XR)爱好者提供国内外最新、最in的硬件、游戏以及产业动态,了解更多虚拟现实资讯就上 www.93913.com

友情链接

百度VR 720云 玖的VR 邀界网 VRPinea VR陀螺 爱奇艺VR 7663 超级队长 新浪VR ARinChina 速途元宇宙研究院

联系我们

  • 中国 · 北京 / 福州
  • news@93913.com
  • 商务合作 | 微信:XR-93913 陈先生

Copyright © 2015-2021 93913.com All rights reserved. 闽ICP备15021441号-5

  • 93913
  • 邀界网
© Copyright 93913. All rights reserved.