Project Aria

Project Aria는 Meta의 Reality Labs에서 시작한 선구적인 연구 프로그램으로, 증강 현실과 인공 지능의 미래를 책임감 있게 구축하는 데 전념하고 있습니다. 이는 소비자 제품이 아니라, 연구자들이 미래 AR 안경과 상황 인식 AI 시스템 개발의 복잡한 과제를 이해하고 극복하는 데 도움을 주기 위해 설계된 포괄적인 연구 플랫폼입니다. 이 프로젝트의 핵심은 1인칭(자기 중심적) 시점에서 데이터를 캡처하기 위한 최첨단 센서 스위트를 갖춘 정교한 웨어러블 장치인 Aria 안경입니다. 이 플랫폼은 Aria Research Kit(ARK)를 통해 Meta의 내부 연구원들과 전 세계 학계 및 기업 파트너 커뮤니티에 제공됩니다.

Project Aria 사용 방법

Project Aria 플랫폼에 대한 접근은 연구 커뮤니티를 대상으로 하며 일반 대중에게는 판매되지 않습니다. 참여 절차는 다음과 같습니다:

1. 오픈 리소스 탐색: 신청하기 전에 잠재적 파트너는 Project Aria의 공개적으로 이용 가능한 리소스를 탐색하는 것이 좋습니다. 여기에는 광범위한 오픈 소스 데이터셋(Nymeria 및 Digital Twin Catalog 등), 모델 및 도구(Aria Training and Evaluation toolkit - ATEK 등)가 포함됩니다. 이를 통해 연구자들은 플랫폼의 데이터와 기능을 이해할 수 있습니다.
2. 연구 제안서 개발: Aria 안경과 생태계의 독특한 기능을 활용하는 명확하고 새로운 연구 계획을 수립합니다. 성공적인 지원서는 일반적으로 컴퓨터 비전, 상황 인식 AI, 로보틱스 또는 기계 인식의 핵심 과제를 다룹니다.
3. Aria Research Kit(ARK) 신청: 관심 있는 학술 기관 및 기업 연구 조직은 Project Aria 웹사이트를 통해 신청서를 제출할 수 있습니다. 신청서는 수시로 검토됩니다.
4. 연구 수행: 승인되면 파트너는 Aria Gen 2 안경, 포괄적인 SDK 및 연구 활동을 시작하기 위한 지원 서비스가 포함된 ARK를 받게 됩니다.

Project Aria의 핵심 기능

• Aria Gen 2 안경: 이 프로젝트의 중심인 이 고급 연구용 안경은 4개의 SLAM 카메라, 1개의 RGB 카메라, 2개의 시선 추적 카메라, IMU, 기압계, 자력계 및 GNSS를 포함한 강력한 센서 스위트를 갖추고 있습니다. 또한 생리 데이터용 PPG 센서, 접촉 마이크, 온디바이스 컴퓨팅 기능 및 6-8시간의 연장된 배터리 수명을 포함합니다.
• Aria Research Kit(ARK): 연구자를 위한 완벽한 패키지로, Aria 안경, 모든 기능을 갖춘 소프트웨어 개발 키트(SDK), 데이터 관리, 처리 및 분석을 위한 도구 모음이 포함되어 있습니다.
• 광범위한 오픈 데이터셋: Project Aria는 시선 추적 연구를 위한 'Reading Recognition in the Wild', 인간 동작 예측을 위한 'Nymeria', 3D 객체 재구성을 위한 'Digital Twin Catalog'와 같은 대규모 고품질 데이터셋을 커뮤니티에 제공합니다.
• 오픈 소스 도구 및 모델: 이 플랫폼은 딥 러닝 모델을 구축하고 평가하기 위한 Aria Training and Evaluation toolkit(ATEK)과 데이터 시각화 및 다운로드를 위한 Aria Dataset Explorer(ADE)와 같은 강력한 도구를 포함합니다. 또한 Nerfstudio와 같은 인기 있는 프레임워크와의 통합을 지원합니다.
• 협력적 연구 생태계: 이 프로젝트는 200개 이상의 파트너로 구성된 활발한 커뮤니티를 육성하며, HD-Epic 및 EgoLife와 같이 플랫폼을 사용하여 개발된 도구 및 데이터셋의 오픈 소싱을 장려합니다.

Project Aria의 사용 사례

Project Aria는 여러 분야에서 혁신을 주도하는 데 사용되고 있습니다:

• 상황 인식 AI 및 기계 인식: 사용자의 상황, 환경 및 의도를 이해하여 시기적절하고 관련성 있는 지원을 제공할 수 있는 AI 개발.
• 로보틱스: Georgia Tech의 EgoMimic 프로젝트에서 볼 수 있듯이, 1인칭 시점에서 인간의 시연을 관찰하여 로봇이 복잡한 작업을 학습할 수 있도록 합니다.
• 증강 현실(AR): 장면 이해, 3D 재구성 및 사용자 상호 작용 모델을 포함하여 미래의 하루 종일 착용 가능한 AR 안경을 위한 기반 기술 구축.
• 접근성: Envision AI와 같은 조직과 협력하여 시각 장애인 및 저시력자에게 시각 정보에 대한 접근을 제공함으로써 그들의 역량을 강화하는 기술을 만듭니다.
• 자동차 산업: BMW와 같은 파트너와 협력하여 운전자 인식 및 경험을 향상시키기 위해 AR 기술을 미래 차량에 통합하는 방법을 연구합니다.

Project Aria의 장점

Project Aria의 주요 장점은 연구 가속기로서의 역할입니다. 연구자들에게 소비자 기술보다 몇 년 앞선 특수 목적의 비상업적 하드웨어 및 소프트웨어 플랫폼을 제공합니다. 이를 통해 커뮤니티는 맞춤형 센서 장비를 구축하는 데 드는 막대한 비용 없이 근본적인 연구 문제를 해결할 수 있습니다. 오픈 리소스와 협력에 중점을 둠으로써 커뮤니티 기여가 서로를 기반으로 구축되어 자기 중심적 AI 및 AR 분야 전체를 더 빠르게 발전시키는 강력한 선순환 효과를 창출합니다.

가격 및 플랜

Project Aria는 상업용 제품이 아닌 연구 프로그램입니다. 따라서 전통적인 가격 책정이나 플랜이 없습니다. Aria Gen 2 안경과 전체 도구 모음에 대한 접근은 Aria Research Kit(ARK)를 통해 제공됩니다. 이 키트는 프로그램에 성공적으로 지원한 일부 학술 및 기업 연구 파트너에게 제공됩니다. 선정은 제안된 연구의 가치와 독창성을 기반으로 합니다. 이는 협력적 연구 파트너십이므로 참여에 명시된 비용은 없습니다.