Project Aria

Project Aria

Le projet Aria est une initiative de recherche de Meta visant à faire progresser la réalité augmentée (RA) et l'intelligence artificielle (IA) à travers la collecte et l'analyse de données egocentriques. Il fournit aux chercheurs des lunettes Aria Gen 2, un dispositif portable équipé d'une suite de capteurs améliorée comprenant plusieurs caméras SLAM, un suivi oculaire, des capteurs PPG, des microphones à contact, et des capacités de calcul intégrées. Ces lunettes permettent une détection en permanence et des fonctionnalités avec human-in-the-loop, étendant la recherche en IA contextuelle, robotique et perception machine.

Le programme soutient une communauté diversifiée de plus de 200 partenaires académiques et industriels, offrant l'accès au kit de recherche Aria comprenant du matériel, des outils logiciels et des services. Les chercheurs peuvent collecter, diffuser et analyser des données de capteurs multimodaux pour créer des ensembles de données et construire des modèles qui améliorent la compréhension des scènes et la conscience contextuelle de l'IA.

Le projet Aria met l'accent sur une science ouverte en partageant d'importants ensembles de données publics tels que des données egocentriques à l'échelle de la ville, des environnements synthétiques et des catalogues d'objets détaillés. Il propose également des outils open source comme EgoBlur pour le traitement des données en respectant la vie privée, et SceneScript pour l'inférence de la géométrie de scène. Ces ressources accélèrent la recherche et favorisent la collaboration dans les domaines de la vision par ordinateur et de la robotique.

Les lunettes Aria Gen 2 améliorent la première génération avec une autonomie plus longue (6-8 heures), un design pliable, des applications programmables, et la prise en charge du streaming dans le cloud. L’appareil intègre des capteurs avancés tels que quatre caméras SLAM, des caméras RGB et de suivi oculaire, des unités de mesure inertielle, des microphones, du GNSS, des capteurs PPG et des microphones à contact, permettant une capture de données riche et un traitement en local.

Meta propose un processus de candidature continu pour le kit de recherche Aria, rendant cette technologie accessible aux chercheurs indépendants et aux institutions. Le programme maintient également une documentation complète, des articles de recherche, et une participation active de la communauté via des défis et des partenariats.

Dans l'ensemble, le projet Aria comble le fossé entre la recherche et les applications de RA en fournissant du matériel de pointe, des ensembles de données ouverts et un écosystème collaboratif. Il permet aux chercheurs d'explorer la perception machine centrée sur l'humain et de développer des innovations qui orienteront les futurs produits de RA et d'IA.

Fonctionnalités principales:
  1. 🎥 Suite de capteurs multimodale : Capturez des données riches avec SLAM, RGB, suivi oculaire, PPG et microphones de contact pour une compréhension complète de l'environnement.

  2. 🕶️ Lunettes portables toujours actives : Une longue autonomie de batterie et un design pliable permettent une collecte prolongée de données en conditions réelles et naturelles.

  3. ⚙️ Calcul embarqué : Exécutez des applications et des algorithmes de perception machine directement sur les lunettes pour des analyses en temps réel.

  4. ☁️ Support de streaming cloud : Diffusez les données des capteurs localement ou vers le cloud pour des flux de travail de recherche flexibles et une analyse à distance.

  5. 📂 Ressources ouvertes : Accédez à d'importants jeux de données publics, des outils open-source et des modèles pour accélérer la recherche en IA et réalité augmentée.

Pros:
  1. Fournit une plateforme portable unique avec des capteurs avancés pour la capture de données égocentriques.

  2. Soutient une large communauté de recherche avec des ensembles de données et des outils ouverts.

  3. Permet une détection toujours active grâce à une meilleure autonomie de la batterie et un traitement embarqué.

  4. Propose des lunettes programmables et un streaming cloud pour une expérimentation flexible.

  5. Maintient des partenariats actifs et des initiatives de science ouverte pour favoriser la collaboration.

Cons:
  1. L'accès au Kit de Recherche Aria nécessite une demande et une approbation, limitant la disponibilité immédiate.

  2. Le matériel est spécialisé pour la recherche et n'est pas destiné à un usage grand public.

  3. Certaines fonctionnalités avancées peuvent nécessiter une expertise technique pour être utilisées efficacement.

FAQ:

Comment puis-je postuler pour le kit de recherche Aria ?

Vous pouvez postuler via un processus de candidature continu sur le site Web du Projet Aria, en démontrant un cas d'utilisation clair pour la recherche et une bonne compréhension des outils.

Quels capteurs sont inclus dans les lunettes Aria Gen 2 ?

Les lunettes comprennent quatre caméras SLAM, une caméra RGB, deux caméras de suivi oculaire, des unités de mesure inertielle, des microphones, GNSS, des capteurs PPG et un microphone de contact.

Puis-je exécuter des applications directement sur les lunettes Aria Gen 2 ?

Oui, Aria Gen 2 prend en charge des applications programmables qui peuvent être installées et exécutées sur l'appareil pour une perception machine en temps réel.

Des jeux de données publics sont-ils disponibles via le Projet Aria ?

Oui, le Projet Aria propose de vastes jeux de données ouverts incluant des données égocentriques à l'échelle de la ville, des environnements synthétiques et des catalogues d'objets accessibles via le Dataset Explorer.

Quels outils sont fournis pour travailler avec les données Aria ?

Des outils open-source comme EgoBlur, SceneScript et Aria Studio facilitent le traitement des données, la confidentialité, la visualisation et la compréhension des scènes.

Le kit de recherche Aria est-il destiné à un usage grand public ?

Non, ce kit est conçu spécifiquement à des fins de recherche et n'est pas un produit grand public.

Quelle est la durée de vie de la batterie des Aria Gen 2 ?

L'autonomie de la batterie varie de 6 à 8 heures, permettant des sessions prolongées de collecte de données.

Tarification:

Gratuit

Tags:

augmented reality
artificial intelligence
research program
egocentric research
machine perception
Meta
contextual AI
robotics
datasets
open source
artificial intelligence
egocentric research
machine perception
contextual AI
robotics
datasets
open source
wearable sensors
computer vision

Technologie utilisée:

SLAM Cameras
Eye Tracking Technology
On-Device Compute
Inertial Measurement Units (IMU)
Global Navigation Satellite System (GNSS)
jQuery
Cloudflare
PHP
Ruby
GitHub
Styled Components
SLAM
Eye Tracking
Machine Perception Algorithms
Cloud Streaming

Commentaires:

Give your opinion on Project Aria :-

Overall rating

Join thousands of AI enthusiasts in the World of AI!

Meilleur Gratuit Project Aria Alternatives (et Payées)

By Rishit