Project Aria

Project Aria là một chương trình nghiên cứu tiên phong từ Reality Labs của Meta, chuyên tâm xây dựng tương lai của thực tế tăng cường và trí tuệ nhân tạo một cách có trách nhiệm. Đây không phải là một sản phẩm tiêu dùng mà là một nền tảng nghiên cứu toàn diện được thiết kế để giúp các nhà nghiên cứu hiểu và vượt qua những thách thức phức tạp trong việc phát triển kính AR và hệ thống AI theo ngữ cảnh trong tương lai. Cốt lõi của dự án là kính Aria, một thiết bị đeo tinh vi được trang bị bộ cảm biến hiện đại để thu thập dữ liệu từ góc nhìn người thứ nhất (egocentric). Nền tảng này được cung cấp cho các nhà nghiên cứu nội bộ của Meta và một cộng đồng toàn cầu gồm các đối tác học thuật và doanh nghiệp thông qua Bộ công cụ Nghiên cứu Aria (ARK).

Cách sử dụng Project Aria

Quyền truy cập vào nền tảng Project Aria dành cho cộng đồng nghiên cứu và không bán ra công chúng. Quy trình tham gia như sau:

1. Khám phá Tài nguyên Mở: Trước khi đăng ký, các đối tác tiềm năng được khuyến khích khám phá các tài nguyên công khai của Project Aria. Điều này bao gồm các bộ dữ liệu mã nguồn mở phong phú (như Nymeria và Digital Twin Catalog), các mô hình và công cụ (như bộ công cụ Đào tạo và Đánh giá Aria - ATEK). Điều này giúp các nhà nghiên cứu hiểu rõ dữ liệu và khả năng của nền tảng.
2. Phát triển Đề xuất Nghiên cứu: Xây dựng một kế hoạch nghiên cứu rõ ràng và mới lạ, tận dụng các khả năng độc đáo của kính Aria và hệ sinh thái. Các đơn đăng ký thành công thường giải quyết các thách thức chính trong lĩnh vực thị giác máy tính, AI theo ngữ cảnh, robot hoặc nhận thức máy.
3. Đăng ký Bộ công cụ Nghiên cứu Aria (ARK): Các tổ chức học thuật và tổ chức nghiên cứu doanh nghiệp quan tâm có thể nộp đơn đăng ký qua trang web của Project Aria. Các đơn đăng ký được xem xét liên tục.
4. Tiến hành Nghiên cứu: Sau khi được chấp thuận, các đối tác sẽ nhận được ARK, bao gồm kính Aria Gen 2, một SDK toàn diện và các dịch vụ hỗ trợ để bắt đầu nỗ lực nghiên cứu của họ.

Tính năng chính của Project Aria

• Kính Aria Gen 2: Là trung tâm của dự án, chiếc kính nghiên cứu tiên tiến này có một bộ cảm biến mạnh mẽ bao gồm 4 camera SLAM, 1 camera RGB, 2 camera theo dõi mắt, một IMU, khí áp kế, từ kế và GNSS. Chúng cũng bao gồm cảm biến PPG cho dữ liệu sinh lý, micrô tiếp xúc, khả năng tính toán trên thiết bị và thời lượng pin kéo dài 6-8 giờ.
• Bộ công cụ Nghiên cứu Aria (ARK): Một gói hoàn chỉnh dành cho các nhà nghiên cứu chứa kính Aria, một Bộ công cụ Phát triển Phần mềm (SDK) đầy đủ tính năng và một bộ công cụ để quản lý, xử lý và phân tích dữ liệu.
• Bộ dữ liệu Mở Rộng lớn: Project Aria cung cấp các bộ dữ liệu quy mô lớn, chất lượng cao cho cộng đồng, chẳng hạn như 'Reading Recognition in the Wild' cho nghiên cứu theo dõi mắt, 'Nymeria' để dự đoán chuyển động của con người và 'Digital Twin Catalog' để tái tạo đối tượng 3D.
• Công cụ và Mô hình Mã nguồn Mở: Nền tảng này bao gồm các công cụ mạnh mẽ như bộ công cụ Đào tạo và Đánh giá Aria (ATEK) để xây dựng và đánh giá các mô hình học sâu, và Trình khám phá Bộ dữ liệu Aria (ADE) để trực quan hóa và tải xuống dữ liệu. Nó cũng hỗ trợ tích hợp với các framework phổ biến như Nerfstudio.
• Hệ sinh thái Nghiên cứu Hợp tác: Dự án thúc đẩy một cộng đồng sôi động với hơn 200 đối tác, khuyến khích việc mở nguồn các công cụ và bộ dữ liệu được phát triển bằng nền tảng này, chẳng hạn như HD-Epic và EgoLife.

Các trường hợp sử dụng Project Aria

Project Aria đang được sử dụng để thúc đẩy sự đổi mới trong nhiều lĩnh vực:

• AI theo Ngữ cảnh và Nhận thức Máy: Phát triển AI có thể hiểu được ngữ cảnh, môi trường và ý định của người dùng để cung cấp sự hỗ trợ kịp thời và phù hợp.
• Robot: Cho phép robot học các nhiệm vụ phức tạp bằng cách quan sát các màn trình diễn của con người từ góc nhìn người thứ nhất, như đã thấy trong dự án EgoMimic của Georgia Tech.
• Thực tế Tăng cường (AR): Xây dựng các công nghệ nền tảng cho kính AR đeo cả ngày trong tương lai, bao gồm hiểu biết cảnh quan, tái tạo 3D và các mô hình tương tác người dùng.
• Khả năng Tiếp cận: Hợp tác với các tổ chức như Envision AI để tạo ra các công nghệ trao quyền cho người mù và người khiếm thị bằng cách cung cấp cho họ quyền truy cập vào thông tin thị giác.
• Ngành Công nghiệp Ô tô: Hợp tác với các đối tác như BMW để nghiên cứu cách công nghệ AR có thể được tích hợp vào các phương tiện trong tương lai để nâng cao nhận thức và trải nghiệm của người lái.

Ưu điểm của Project Aria

Ưu điểm chính của Project Aria là vai trò của nó như một công cụ tăng tốc nghiên cứu. Nó cung cấp cho các nhà nghiên cứu một nền tảng phần cứng và phần mềm không thương mại, được xây dựng có mục đích, đi trước công nghệ tiêu dùng nhiều năm. Điều này cho phép cộng đồng giải quyết các vấn đề nghiên cứu cơ bản mà không phải chịu chi phí tốn kém để xây dựng các giàn cảm biến tùy chỉnh. Việc tập trung vào các tài nguyên mở và sự hợp tác tạo ra một hiệu ứng bánh đà mạnh mẽ, nơi các đóng góp của cộng đồng xây dựng dựa trên nhau, thúc đẩy toàn bộ lĩnh vực AI egocentric và AR phát triển nhanh hơn.

Giá cả và gói dịch vụ

Project Aria là một chương trình nghiên cứu, không phải là một sản phẩm thương mại. Do đó, nó không có giá cả hoặc các gói dịch vụ truyền thống. Quyền truy cập vào kính Aria Gen 2 và bộ công cụ đầy đủ được cung cấp thông qua chương trình Bộ công cụ Nghiên cứu Aria (ARK). Bộ công cụ này dành cho các đối tác nghiên cứu học thuật và doanh nghiệp được chọn lọc đã đăng ký thành công vào chương trình. Việc lựa chọn dựa trên giá trị và sự mới lạ của nghiên cứu được đề xuất. Không có chi phí cụ thể nào cho việc tham gia, vì đây là một quan hệ đối tác nghiên cứu hợp tác.