支持6DoF追踪,Meta详细介绍AI眼镜Aria Gen 2背后技术
| VR陀螺| 2025-06-06
【流媒体网】摘要:Meta发布Aria Gen 2智能眼镜,配备先进传感器和眼动追踪功能,推动AR与AI研究。

  当地时间 6 月 5 日,Meta 在其官方博客上透露了更多关于 Aria Gen 2 的信息。这是一款实验性智能眼镜,旨在作为增强现实、人工智能和机器人研究的测试平台。

  据悉,在今年 2 月,Meta 首次公布了该产品,当时仅是粗略分享了关于这款开发者眼镜的基本配置,以及相关落地案例。而现在,Meta 进一步介绍了 Aria Gen 2 背后的一系列技术。

  1.可穿戴性

  Aria Gen 2 虽然仅仅只是一款「开发者」设备,不过在佩戴设计上依旧考虑到了人体工学设计,Meta 强调其在佩戴体验,舒适度和贴合度均有所提升,同时能够适应更广泛的脸型,并配备丰富的传感器组件,可用于研究。

  这款眼镜延续了轻巧的设计(重量在 74 至 76 克之间,具体重量取决于尺寸),并新增了可折叠镜腿,方便日常存放和携带。为了确保每位佩戴者都能获得最佳的佩戴体验和功能性贴合度,Meta 推出了八种尺寸选择,充分考虑了多种人为因素,包括头宽和鼻梁差异。

  2. 计算机视觉(CV)摄像头增强功能

  高动态范围 (HDR): Aria Gen 2 的全局快门相机传感器提供 120 dB 的高动态范围,而 Gen 1 的范围为 70 dB。Meta 声称这使得在不同光照条件下,它都能执行卓越的计算机视觉任务。

  CV 摄像机能够捕捉高度动态的场景,并能分辨出 LED 灯丝以及场景中的其他细节

  宽视野 (FOV): Aria Gen 2 配备四个计算机视觉 (CV) 摄像头,是 Gen 1 中 CV 摄像头数量的两倍,以提供更宽的视野并实现先进的 3D 手部和物体跟踪。

  立体重叠: Gen 2 中的立体重叠从 Gen 1 的 35° 增加到 80°,从而促进了基于立体的基础模型,增强了深度感知和空间意识。

  这里的示例说明了增强的立体重叠如何使 NVIDIA 的 FoundationStereo 等方法能够基于校正后的立体图像生成深度图。这些深度图可以融合在一起,仅使用 Aria Gen 2 的立体对数据即可生成场景的几何重建。

  3. 新的传感器集成

  环境光传感器 (ALS): Aria Gen 2 包含经过校准的 ALS,可实现更佳的曝光控制算法,并在低帧率下解锁新功能,ALS 的紫外线模式可用于区分室内和室外光照。

  接触式麦克风: Aria Gen 2 包含一个嵌入在设备鼻托中的接触式麦克风,可增强嘈杂环境中的音频捕捉效果。

  心率: Aria Gen 2 包含一个嵌入在设备鼻托中的PPG(光电容积描记)传感器,可以估计佩戴该设备的人的心率。

  4. 设备时间校准

  Aria Gen 2 配备板载硬件解决方案,利用 SubGHz 无线电技术广播计时信息,从而实现与其他 Aria Gen 2 设备或支持 SubGHz 无线电的兼容设备进行精确的时间校准。该技术实现了亚毫秒级精度的时间校准,相比 Gen 1 的基于软件的校准方式有了显著改进。

  5. 设备上的实时机器感知(MP)信号

  Aria Gen 2 搭载先进的设备端机器感知算法,该算法基于 Meta 的节能定制协处理器。这些尖端功能使设备能够生成精准的数据,追踪我们与周围环境的互动方式。

  视觉惯性里程计(VIO)

  Aria Gen 2 的关键特性之一是它能够利用视觉惯性里程计 (VIO) 在空间参考系内以六自由度 (6DoF) 追踪眼镜,这实现了无缝的环境导航和地图绘制,为情境人工智能和机器人技术的研究开辟了新的可能性。

  眼动追踪

  Aria Gen 2 还配备了先进的基于摄像头的眼动追踪系统,能够以无与伦比的精度追踪佩戴者的视线。该系统提供丰富的信息,包括:单眼视线、聚散点、眨眼检测、瞳孔中心估计、瞳孔直径、角膜中心等。

  Meta 表示这些先进的信号能够更深入地了解佩戴者的视觉注意力和意图,为人机交互开辟新的可能性。

  手势追踪

  Aria Gen 2 还配备了手部追踪解决方案,可在 3D 空间中追踪佩戴者的手部。这可在设备参考框架内生成清晰的手部关节姿势,从而为数据集提供准确的手部注释,并支持诸如灵巧机器人手部操作等需要高精度操作的应用。

  最后,Meta 表示 Aria Gen 2 眼镜为下一代计算平台的未来创新铺平了道路,Aria Gen 2 的合作申请将于今年晚些时候开放,并且该眼镜将于 CVPR 2025 大会上展示。

责任编辑:凌美

分享到:
版权声明:凡注明来源“流媒体网”的文章,版权均属流媒体网所有,转载需注明出处。非本站出处的文章为转载,观点供业内参考,不代表本站观点。文中图片均来源于网络收集整理,仅供学习交流,版权归原作者所有。如涉及侵权,请及时联系我们删除!