GET3D | Nvidia vs Civitai

GET3D génère des modèles 3D texturés que vous pouvez intégrer directement dans un moteur de rendu, entraîné uniquement à partir de collections d'images 2D. Les chercheurs de NVIDIA l'ont conçu pour produire des maillages explicites avec géométrie et texture, et non des champs de radiance neuronale nécessitant des moteurs de rendu personnalisés.

La plupart des modèles génératifs 3D à l'époque omettaient les textures, imposaient une topologie fixe ou nécessitaient des pipelines de rendu neuronal pour visualiser les résultats. GET3D utilise la méthode différentiable des tétraèdres marchants (DMTet) ainsi que des pertes adversariales sur des images RGB rasterisées et des silhouettes, ce qui donne en sortie un maillage texturé standard. Le compromis est un accès de niveau recherche : il s'agit d'un projet du laboratoire d'IA NVIDIA Toronto présenté à NeurIPS 2022, et non d'un SaaS hébergé avec un bouton de téléchargement.

Le modèle prend en charge les voitures, chaises, animaux, motos, personnages humains et bâtiments. Il supporte également la génération de formes guidée par texte via un affinage basé sur CLIP, similaire à StyleGAN-NADA, et peut dissocier la géométrie de la texture grâce à des codes latents séparés.

Civitai est une communauté de génération de modèles où les créateurs téléchargent, partagent et téléchargent des checkpoints Stable Diffusion, des LoRAs, des images, des vidéos et des ressources 3D. Vous pouvez parcourir les modèles en vedette, effectuer des générations sur le site avec des crédits Buzz, et synchroniser les téléchargements vers une machine locale via Civitai Link. La place de marché héberge également des articles, des défis et un programme créateur pour l'accès payant aux modèles.

Contrairement à un générateur d'images fermé, Civitai fonctionne comme un catalogue ouvert associé à un hub de génération. Les évaluations de la communauté mettent en avant les modèles populaires, les créateurs peuvent facturer des Buzz pour un accès anticipé ou une licence, et les niveaux d'adhésion augmentent les limites de file d'attente et les allocations mensuelles de Buzz. Cela le rapproche davantage de Hugging Face pour les modèles de diffusion que d'une application SaaS artistique à style unique.

Civitai convient aux amateurs à la recherche de nouveaux styles, aux formateurs de modèles publiant des checkpoints personnalisés, et aux studios qui ont besoin d'un flux constant de LoRAs communautaires. Les abonnements payants Bronze, Silver et Gold ajoutent des Buzz, des files d'attente plus rapides et des plafonds de monétisation pour les créateurs, tandis que les utilisateurs gratuits peuvent toujours parcourir et télécharger de nombreuses ressources.