Project Aria

Project Aria是Meta现实实验室发起的一项开创性研究项目，致力于负责任地构建增强现实和人工智能的未来。它不是一款消费产品，而是一个全面的研究平台，旨在帮助研究人员理解和克服开发未来AR眼镜和情境AI系统所面临的复杂挑战。该项目的核心是Aria眼镜，这是一款精密的穿戴设备，配备了最先进的传感器套件，用于从第一人称（自我中心）视角捕捉数据。该平台通过Aria研究套件（ARK）提供给Meta的内部研究人员以及全球学术和企业合作伙伴社区。

如何使用Project Aria

Project Aria平台主要面向研究社区，不对公众销售。参与流程如下：

1. 探索开放资源：在申请之前，鼓励潜在合作伙伴探索Project Aria公开发布的资源。这包括广泛的开源数据集（如Nymeria和Digital Twin Catalog）、模型和工具（如Aria训练与评估工具包 - ATEK）。这有助于研究人员了解该平台的数据和功能。
2. 制定研究计划：构思一个清晰且新颖的研究计划，利用Aria眼镜和生态系统的独特能力。成功的申请通常致力于解决计算机视觉、情境AI、机器人技术或机器感知领域的关键挑战。
3. 申请Aria研究套件（ARK）：感兴趣的学术机构和企业研究组织可以通过Project Aria网站提交申请。申请将进行滚动审核。
4. 开展研究：申请获批后，合作伙伴将收到ARK，其中包括Aria Gen 2眼镜、一个全面的SDK以及支持服务，以启动他们的研究工作。

Project Aria的核心功能

• Aria Gen 2眼镜：作为项目的核心，这款先进的研究眼镜配备了强大的传感器套件，包括4个SLAM摄像头、1个RGB摄像头、2个眼动追踪摄像头、一个IMU、气压计、磁力计和GNSS。它们还包含用于生理数据采集的PPG传感器、一个接触式麦克风、设备端计算能力以及长达6-8小时的续航电池。
• Aria研究套件（ARK）：一个为研究人员准备的完整软件包，包含Aria眼镜、一个功能齐全的软件开发工具包（SDK）以及一套用于数据管理、处理和分析的工具。
• 丰富的开放数据集：Project Aria向社区提供了大规模、高质量的数据集，例如用于眼动追踪研究的“野外阅读识别”（Reading Recognition in the Wild）、用于人体运动预测的“Nymeria”以及用于3D对象重建的“数字孪生目录”（Digital Twin Catalog）。
• 开源工具和模型：该平台包括强大的工具，如用于构建和评估深度学习模型的Aria训练与评估工具包（ATEK），以及用于可视化和下载数据的Aria数据集浏览器（ADE）。它还支持与Nerfstudio等流行框架的集成。
• 协作研究生态系统：该项目培育了一个由200多个合作伙伴组成的充满活力的社区，鼓励开源使用该平台开发的工具和数据集，例如HD-Epic和EgoLife。

Project Aria的使用案例

Project Aria正被用于推动多个领域的创新：

• 情境AI与机器感知：开发能够理解用户情境、环境和意图的AI，以提供及时和相关的辅助。
• 机器人技术：通过观察第一人称视角的人类演示，使机器人能够学习复杂的任务，如佐治亚理工学院的EgoMimic项目所示。
• 增强现实（AR）：为未来的全天候可穿戴AR眼镜构建基础技术，包括场景理解、3D重建和用户交互模型。
• 无障碍技术：与Envision AI等组织合作，创造能够通过提供视觉信息来赋能盲人和低视力人群的技术。
• 汽车行业：与宝马等合作伙伴合作，研究如何将AR技术集成到未来汽车中，以增强驾驶员的感知和体验。

Project Aria的优势特点

Project Aria的主要优势在于其作为研究加速器的角色。它为研究人员提供了一个专门构建的、非商业化的硬件和软件平台，技术水平领先消费级产品数年。这使得社区能够解决基础研究问题，而无需承担构建定制传感器装置的昂贵开销。对开放资源和协作的关注创造了一个强大的飞轮效应，社区的贡献相互促进，从而更快地推动整个自我中心AI和AR领域的发展。

定价和计划

Project Aria是一个研究项目，而非商业产品。因此，它没有传统的定价或计划。对Aria Gen 2眼镜和全套工具的访问权限是通过Aria研究套件（ARK）计划提供的。该套件提供给成功申请该计划的精选学术和企业研究合作伙伴。筛选标准基于所提研究的价值和新颖性。参与该计划没有明确的费用，因为它是一种合作研究伙伴关系。