Sloyd vs Text-To-4D

Sloyd transforme des invites textuelles, des photos ou des modèles paramétriques en modèles 3D texturés directement dans le navigateur. Vous pouvez générer des ressources à partir d'une description, télécharger une référence JPG ou PNG, ou commencer à partir de modèles faits main avec des contrôles par curseur. Les exportations sont disponibles aux formats GLB, FBX, OBJ, STL, USD et autres pour les moteurs de jeu, les outils DCC et les imprimantes 3D.

De nombreux générateurs 3D limitent chaque invite avec des plafonds stricts de crédits. Sloyd propose une génération illimitée de texte et d'images dans les plans payants, les utilisateurs invités bénéficiant d'une génération AI 3D par jour et d'une personnalisation illimitée des modèles dans le navigateur. Les niveaux Plus et Pro ajoutent l'accès aux plugins pour Unity, Unreal et Blender, le rigging automatique, l'animation AI et la licence commerciale.

Le produit convient aux développeurs de jeux, aux studios indépendants, aux amateurs d'impression 3D, aux équipes de visualisation e-commerce et aux architectes ayant besoin d'itérations rapides. Sloyd propose également un créateur d'avatar Roblox, des contrôles de topologie jusqu'à 500K triangles sur Pro, et un support communautaire Discord. Le support payant est accessible par email à [email protected].

Text-To-4D est un projet de recherche de Meta AI (MAV3D) qui génère des scènes dynamiques tridimensionnelles à partir de descriptions textuelles. La méthode utilise un Neural Radiance Field dynamique en 4D optimisé pour la cohérence d'apparence, de densité et de mouvement en interrogeant un modèle de diffusion texte-vidéo.

Contrairement aux générateurs 3D statiques qui produisent un seul maillage, Text-To-4D crée des scènes que l'on peut visualiser sous n'importe quel angle de caméra et intégrer dans d'autres environnements 3D. L'approche ne nécessite pas de données d'entraînement 3D ou 4D ; le modèle texte-vidéo sous-jacent est entraîné uniquement sur des paires texte-image et des vidéos non étiquetées.

La page du projet propose des exemples de démonstration pour des invites texte-vers-4D comme « un corgi jouant avec une balle » et des conversions image-vers-4D à partir de photos fixes. Il s'agit d'une vitrine de recherche, non d'un produit commercial avec une API publique ou une inscription. Les chercheurs et artistes 3D intéressés par la génération de scènes dynamiques basées sur NeRF peuvent consulter l'article et les exemples sur le site.