Project Aria

Project Aria是Meta現實實驗室發起的一項開創性研究項目，致力於負責任地建構擴增實境和人工智慧的未來。它不是一款消費產品，而是一個全面的研究平台，旨在幫助研究人員理解和克服開發未來AR眼鏡和情境AI系統所面臨的複雜挑戰。該項目的核心是Aria眼鏡，這是一款精密的穿戴設備，配備了最先進的感測器套件，用於從第一人稱（自我中心）視角捕捉數據。該平台透過Aria研究套件（ARK）提供給Meta的內部研究人員以及全球學術和企業合作夥伴社群。

如何使用Project Aria

Project Aria平台主要面向研究社群，不對公眾銷售。參與流程如下：

1. 探索開放資源：在申請之前，鼓勵潛在合作夥伴探索Project Aria公開發布的資源。這包括廣泛的開源資料集（如Nymeria和Digital Twin Catalog）、模型和工具（如Aria訓練與評估工具包 - ATEK）。這有助於研究人員了解該平台的數據和功能。
2. 制定研究計畫：構思一個清晰且新穎的研究計畫，利用Aria眼鏡和生態系統的獨特能力。成功的申請通常致力於解決電腦視覺、情境AI、機器人技術或機器感知領域的關鍵挑戰。
3. 申請Aria研究套件（ARK）：感興趣的學術機構和企業研究組織可以透過Project Aria網站提交申請。申請將進行滾動審核。
4. 開展研究：申請獲批後，合作夥伴將收到ARK，其中包括Aria Gen 2眼鏡、一個全面的SDK以及支援服務，以啟動他們的研究工作。

Project Aria的核心功能

• Aria Gen 2眼鏡：作為項目的核心，這款先進的研究眼鏡配備了強大的感測器套件，包括4個SLAM攝影機、1個RGB攝影機、2個眼動追蹤攝影機、一個IMU、氣壓計、磁力計和GNSS。它們還包含用於生理數據採集的PPG感測器、一個接觸式麥克風、設備端運算能力以及長達6-8小時的續航電池。
• Aria研究套件（ARK）：一個為研究人員準備的完整軟體包，包含Aria眼鏡、一個功能齊全的軟體開發工具包（SDK）以及一套用於數據管理、處理和分析的工具。
• 豐富的開放資料集：Project Aria向社群提供了大規模、高品質的資料集，例如用於眼動追蹤研究的「野外閱讀識別」（Reading Recognition in the Wild）、用於人體運動預測的「Nymeria」以及用於3D物件重建的「數位孿生目錄」（Digital Twin Catalog）。
• 開源工具和模型：該平台包括強大的工具，如用於建構和評估深度學習模型的Aria訓練與評估工具包（ATEK），以及用於視覺化和下載數據的Aria資料集瀏覽器（ADE）。它還支援與Nerfstudio等流行框架的整合。
• 協作研究生態系統：該項目培育了一個由200多個合作夥伴組成的充滿活力的社群，鼓勵開源使用該平台開發的工具和資料集，例如HD-Epic和EgoLife。

Project Aria的使用案例

Project Aria正被用於推動多個領域的創新：

• 情境AI與機器感知：開發能夠理解用戶情境、環境和意圖的AI，以提供及時和相關的輔助。
• 機器人技術：透過觀察第一人稱視角的人類演示，使機器人能夠學習複雜的任務，如喬治亞理工學院的EgoMimic項目所示。
• 擴增實境（AR）：為未來的全天候可穿戴AR眼鏡建構基礎技術，包括場景理解、3D重建和用戶互動模型。
• 無障礙技術：與Envision AI等組織合作，創造能夠透過提供視覺資訊來賦能盲人和低視力人群的技術。
• 汽車行業：與寶馬等合作夥伴合作，研究如何將AR技術整合到未來汽車中，以增強駕駛員的感知和體驗。

Project Aria的優勢特點

Project Aria的主要優勢在於其作為研究加速器的角色。它為研究人員提供了一個專門建構的、非商業化的硬體和軟體平台，技術水平領先消費級產品數年。這使得社群能夠解決基礎研究問題，而無需承擔建構客製化感測器裝置的昂貴開銷。對開放資源和協作的關注創造了一個強大的飛輪效應，社群的貢獻相互促進，從而更快地推動整個自我中心AI和AR領域的發展。

定價和計劃

Project Aria是一個研究項目，而非商業產品。因此，它沒有傳統的定價或計劃。對Aria Gen 2眼鏡和全套工具的存取權限是透過Aria研究套件（ARK）計畫提供的。該套件提供給成功申請該計畫的精選學術和企業研究合作夥伴。篩選標準基於所提研究的價值和新穎性。參與該計畫沒有明確的費用，因為它是一種合作研究夥伴關係。