Project Aria
Aria项目是Meta的研究计划,旨在通过以自己为中心的数据收集和分析,推进增强现实(AR)和人工智能(AI)。它为研究人员提供了Aria Gen 2眼镜,这是一款配备了增强传感器套件的可穿戴设备,包括多台SLAM相机、眼动追踪、PPG传感器、接触麦克风和设备端计算能力。这些眼镜实现了全天候感知和人机交互功能,拓展了在上下文AI、机器人技术和机器感知领域的研究。
该项目支持包括学术界和企业界在内的200多个合作伙伴,提供访问Aria研究套件的权限,套件包括硬件、软件工具和服务。研究人员可以收集、传输和分析多模态传感器数据,以创建数据集并构建提升场景理解和AI上下文感知的模型。
Aria项目强调开放科学,分享大量公共数据集,如城市规模的以自己为中心的数据、合成环境和详细的物体目录。它还提供开源工具,如EgoBlur用于隐私保护的数据处理,以及SceneScript用于场景几何推断。这些资源加速了研究,促进了计算机视觉和机器人技术领域的合作。
Aria Gen 2眼镜在第一代基础上进行了改进,具有更长的电池续航(6-8小时)、可折叠设计、可编程应用和云端流媒体支持。设备集成了先进的传感器,包括四台SLAM相机、RGB和眼动追踪相机、惯性测量单元、麦克风、GNSS、PPG传感器和接触麦克风,实现了丰富的数据捕获和设备端处理能力。
Meta为Aria研究套件提供持续的申请流程,使独立研究人员和机构能够接触到这项技术。该项目还提供全面的文档、研究论文,并通过挑战和合作伙伴关系保持积极的社区参与。
总体而言,Aria项目通过提供先进的硬件、开放的数据集和合作生态系统,弥合了研究与实际AR应用之间的差距。它使研究人员能够探索以人为本的机器感知,并开发出能够推动未来AR和AI产品创新的技术。
🎥 多模态传感器套件:通过 SLAM、RGB、眼动追踪、PPG 以及接触式麦克风捕获丰富数据,实现对环境的全面理解。
🕶️ 可穿戴常时开启眼镜:长续航电池和折叠设计,支持在自然环境中进行长时间真实世界数据采集。
⚙️ 设备端计算:直接在眼镜上运行应用和机器感知算法,获取实时洞察。
☁️ 云端流媒体支持:本地或云端传输传感器数据,实现灵活的研究流程和远程分析。
📂 开放资源:访问丰富的公共数据集、开源工具和模型,加速 AI 与 AR 研究。
提供独特的可穿戴平台,配备先进传感器,实现自我视角数据采集。
通过开放数据集和工具支持广泛的研究社区。
实现始终在线的感知功能,拥有更长的电池寿命和设备端处理能力。
提供可编程眼镜和云端流媒体,支持灵活的实验操作。
保持积极的合作伙伴关系和开放科学计划,促进协作发展。
Aria研究套件的访问需申请并获批准,限制了即时可用性。
硬件专为研究设计,不适用于消费者使用。
某些高级功能可能需要技术专长才能有效利用。
我如何申请 Aria 研究工具包?
您可以通过 Project Aria 网站上的滚动申请流程申请,需展示明确的研究用例并理解相关工具。
Aria 第二代眼镜包括哪些传感器?
眼镜配备四个 SLAM 摄像头、一个 RGB 摄像头、两个眼动追踪摄像头、惯性测量单元、麦克风、GNSS、PPG 传感器以及一个接触麦克风。
我可以直接在 Aria 第二代眼镜上运行应用程序吗?
可以,Aria 第二代支持可编程应用,可安装并在设备上运行,实现实时机器感知。
Project Aria 是否提供公开数据集?
是,Project Aria 提供丰富的开放数据集,包括城市规模的第一视角数据、合成环境和物体目录,均可通过 Dataset Explorer 访问。
有哪些工具可用于处理 Aria 数据?
开源工具如 EgoBlur、SceneScript 和 Aria Studio 可帮助进行数据处理、隐私保护、可视化和场景理解。
Aria 研究工具包是面向消费者使用的吗?
不是,该工具包专为研究目的设计,不是消费产品。
Aria 第二代眼镜的电池续航时间是多久?
电池续航时间在 6 至 8 小时之间,支持长时间的数据采集。

