Neuralangelo Research Reconstructs 3D Scenes | NVIDIA vs Meshy

Neuralangelo est un modèle d'intelligence artificielle développé par NVIDIA Research qui transforme des clips vidéo 2D en structures 3D détaillées en utilisant des réseaux neuronaux. Il crée des répliques virtuelles réalistes d'objets tels que des bâtiments, des sculptures et des scènes complexes en capturant des détails et textures intricats depuis plusieurs points de vue. Cette technologie est conçue pour les professionnels de la création et les développeurs travaillant dans la réalité virtuelle, les jumeaux numériques, la robotique et le développement de jeux, leur permettant d'importer des modèles 3D de haute fidélité dans leurs flux de travail de conception.

Contrairement aux méthodes antérieures, Neuralangelo excelle dans la reproduction de matériaux complexes comme les shingles de toiture, les vitres et les surfaces en marbre lisse avec une grande précision. Il utilise des primitives graphiques neuronales instantanées, la technologie à l'origine de NVIDIA Instant NeRF, pour capturer les détails fins et les motifs de textures répétitifs qui étaient auparavant difficiles à représenter. Le modèle traite des images sélectionnées de vidéos pour estimer les positions de la caméra, puis construit et affinez une représentation 3D, à l'image d'un sculpteur façonnant un sujet depuis plusieurs angles.

Neuralangelo prend en charge la reconstruction d'objets petits comme de scènes à grande échelle, y compris l'intérieur et l'extérieur de bâtiments, comme le montrent des modèles détaillés tels que la statue de David de Michel-Ange et le parc du campus de NVIDIA à la Baie. Cela en fait un outil polyvalent pour les industries nécessitant des répliques numériques réalistes d'environnements et d'objets du monde réel.

Le modèle simplifie la création d'actifs virtuels utilisables à partir de séquences filmées, même avec un smartphone, accélérant ainsi les flux de travail des artistes, designers et ingénieurs. En comblant le fossé entre le monde physique et numérique, Neuralangelo améliore le réalisme et l'efficacité des projets dans les domaines du divertissement, du design industriel et de la robotique.

NVIDIA a rendu Neuralangelo disponible sur GitHub, encourageant les développeurs et chercheurs à explorer et à construire sur cette technologie. Il représente une avancée significative dans la reconstruction 3D, combinant un rendu neuronal avancé avec une utilité pratique pour une large gamme d'applications.

Meshy est une boîte à outils 3D IA polyvalente qui permet aux utilisateurs de créer rapidement et facilement des modèles 3D détaillés à partir de prompts textuels, d'images ou de concepts en 2D. Elle s'adresse à un large éventail de créateurs, y compris les développeurs de jeux, les artistes 3D, les éducateurs et les designers de produits, en simplifiant le processus de création de contenu 3D. Les utilisateurs peuvent générer des modèles prêts pour la production en quelques secondes, réduisant ainsi le temps et le coût par rapport aux méthodes traditionnelles.

La plateforme prend en charge plusieurs types d'entrée, tels que la conversion du texte en 3D et l'image en 3D, offrant une haute fidélité et une géométrie nette et bien définie qui reproduit fidèlement les concepts originaux. Meshy offre également un contrôle sur les paramètres de maillage, la richesse des textures, et supporte l'édition de textures alimentée par IA pour affiner les détails. Cette flexibilité permet aux utilisateurs d’adapter les modèles aux besoins spécifiques de leur projet.

Meshy s'intègre parfaitement aux flux de travail professionnels avec la prise en charge de plusieurs formats de fichiers 3D, l'accès via API, et des plugins. Elle propose des fonctionnalités de sécurité de niveau entreprise, telles que les certifications SOC2 Type II et ISO27001, la connexion unique (SSO), et une facturation centralisée, la rendant adaptée aux équipes et organisations. La collaboration est facilitée par des espaces de travail partagés et une gestion multi-équipe.

L'outil supporte une variété de styles artistiques tels que le réalisme, le cartoon, le low poly, et le voxel, avec d'autres styles prévus. Il comprend également une bibliothèque d'animations et des outils de rigging pour donner vie aux modèles. La prise en charge multilingue et un assistant d'instructions IA rendent la plateforme accessible à un public mondial.

La valeur de Meshy réside dans sa capacité à permettre une création rapide et évolutive d'actifs 3D sans sacrifier la qualité ni le contrôle créatif. Elle démocratise la modélisation 3D en supprimant les barrières techniques et en offrant un ensemble riche de fonctionnalités adaptées aussi bien aux débutants qu'aux professionnels. La communauté dynamique et les mises à jour continues garantissent aux utilisateurs un accès aux dernières avancées en conception 3D assistée par IA.