Project Aria

O Project Aria é um programa de pesquisa pioneiro do Reality Labs da Meta, dedicado a construir de forma responsável o futuro da realidade aumentada e da inteligência artificial. Não é um produto de consumo, mas uma plataforma de pesquisa abrangente projetada para ajudar os pesquisadores a entender e superar os complexos desafios no desenvolvimento de futuros óculos de AR e sistemas de IA contextual. O núcleo do projeto são os óculos Aria, um dispositivo vestível sofisticado equipado com um conjunto de sensores de última geração para capturar dados de uma perspectiva de primeira pessoa (egocêntrica). Esta plataforma é disponibilizada para os pesquisadores internos da Meta e para uma comunidade global de parceiros acadêmicos e corporativos através do Aria Research Kit (ARK).

Como usar o Project Aria

O acesso à plataforma Project Aria destina-se à comunidade de pesquisa e não está disponível para compra pública. O processo para se envolver é o seguinte:

1. Explore os Recursos Abertos: Antes de se inscrever, os parceiros em potencial são incentivados a explorar os recursos publicamente disponíveis do Project Aria. Isso inclui extensos conjuntos de dados de código aberto (como Nymeria e o Digital Twin Catalog), modelos e ferramentas (como o Aria Training and Evaluation toolkit - ATEK). Isso ajuda os pesquisadores a entender os dados e as capacidades da plataforma.
2. Desenvolva uma Proposta de Pesquisa: Formule um plano de pesquisa claro e inovador que aproveite as capacidades únicas dos óculos Aria e do ecossistema. As inscrições bem-sucedidas geralmente abordam desafios-chave em visão computacional, IA contextual, robótica ou percepção de máquina.
3. Inscreva-se para o Aria Research Kit (ARK): Instituições acadêmicas e organizações de pesquisa corporativas interessadas podem enviar uma inscrição através do site do Project Aria. As inscrições são analisadas continuamente.
4. Conduza a Pesquisa: Uma vez aprovados, os parceiros recebem o ARK, que inclui os óculos Aria Gen 2, um SDK abrangente e serviços de suporte para iniciar seus esforços de pesquisa.

Recursos principais do Project Aria

• Óculos Aria Gen 2: A peça central do projeto, estes óculos de pesquisa avançados apresentam um poderoso conjunto de sensores, incluindo 4 câmeras SLAM, 1 câmera RGB, 2 câmeras de rastreamento ocular, um IMU, barômetro, magnetômetro e GNSS. Eles também incluem sensores PPG para dados fisiológicos, um microfone de contato, capacidade de computação no dispositivo e uma vida útil de bateria estendida de 6 a 8 horas.
• Aria Research Kit (ARK): Um pacote completo para pesquisadores contendo os óculos Aria, um Kit de Desenvolvimento de Software (SDK) completo e um conjunto de ferramentas para gerenciamento, processamento e análise de dados.
• Extensos Conjuntos de Dados Abertos: O Project Aria fornece conjuntos de dados de grande escala e alta qualidade para a comunidade, como 'Reading Recognition in the Wild' para pesquisa de rastreamento ocular, 'Nymeria' para previsão de movimento humano e o 'Digital Twin Catalog' para reconstrução de objetos 3D.
• Ferramentas e Modelos de Código Aberto: A plataforma inclui ferramentas poderosas como o Aria Training and Evaluation toolkit (ATEK) para construir e avaliar modelos de aprendizado profundo, e o Aria Dataset Explorer (ADE) para visualizar e baixar dados. Também suporta integração com frameworks populares como o Nerfstudio.
• Ecossistema de Pesquisa Colaborativa: O projeto fomenta uma comunidade vibrante de mais de 200 parceiros, incentivando o código aberto de ferramentas e conjuntos de dados desenvolvidos usando a plataforma, como HD-Epic e EgoLife.

Casos de uso para o Project Aria

O Project Aria está sendo usado para impulsionar a inovação em múltiplos domínios:

• IA Contextual e Percepção de Máquina: Desenvolvendo IA que pode entender o contexto, o ambiente e a intenção de um usuário para fornecer assistência oportuna e relevante.
• Robótica: Permitindo que robôs aprendam tarefas complexas observando demonstrações humanas de uma perspectiva de primeira pessoa, como visto no projeto EgoMimic da Georgia Tech.
• Realidade Aumentada (AR): Construindo as tecnologias fundamentais para futuros óculos de AR vestíveis para uso diário, incluindo compreensão de cena, reconstrução 3D e modelos de interação do usuário.
• Acessibilidade: Em parceria com organizações como a Envision AI para criar tecnologias que capacitam pessoas cegas e com baixa visão, fornecendo-lhes acesso a informações visuais.
• Indústria Automotiva: Colaborando com parceiros como a BMW para pesquisar como a tecnologia de AR pode ser integrada em veículos futuros para melhorar a consciência e a experiência do motorista.

Vantagens do Project Aria

A principal vantagem do Project Aria é seu papel como acelerador de pesquisa. Ele fornece aos pesquisadores uma plataforma de hardware e software construída para esse fim, não comercial, que está anos à frente da tecnologia de consumo. Isso permite que a comunidade enfrente problemas de pesquisa fundamentais sem o custo elevado de construir equipamentos de sensores personalizados. O foco em recursos abertos e colaboração cria um poderoso efeito de volante, onde as contribuições da comunidade se baseiam umas nas outras, avançando todo o campo da IA egocêntrica и AR mais rapidamente.

Preços e planos

O Project Aria é um programa de pesquisa, não um produto comercial. Portanto, não possui preços ou planos tradicionais. O acesso aos óculos Aria Gen 2 e ao conjunto completo de ferramentas é fornecido através do programa Aria Research Kit (ARK). Este kit está disponível para parceiros de pesquisa acadêmicos e corporativos selecionados que se inscrevem com sucesso no programa. A seleção é baseada no mérito e na novidade da pesquisa proposta. Não há custo especificado para a participação, pois é uma parceria de pesquisa colaborativa.