ZenPrompts vs GET3D | Nvidia

ZenPrompts est une plate-forme de pointe conçue pour permettre aux ingénieurs d'invites de créer, d'affiner, de tester et de partager des invites sophistiquées pour divers modèles OpenAI. Cette plate-forme conviviale dispose d'un puissant éditeur d'invites qui facilite la comparaison des invites entre plusieurs modèles d'IA, garantissant ainsi la sélection de celui le plus approprié en fonction de la qualité, du coût et des performances. Le service, dont l'utilisation est gratuite pendant sa version bêta, fournit aux utilisateurs des outils précieux pour développer et présenter leur portefeuille rapide avec un design minimaliste qui met l'accent sur leur créativité.

Avec ZenPrompts, les utilisateurs peuvent expérimenter des invites sans craindre de perdre leurs travaux antérieurs, partager leurs inventions avec une communauté plus large et adopter la méthode DRY (Don't Repeat Yourself) pour une création efficace d'invites à l'aide de variables dynamiques. De plus, les utilisateurs ont la possibilité de documenter les invites avec des commentaires pour une meilleure organisation et préservation des informations sur le développement. L'objectif de la plateforme est d'améliorer les capacités des ingénieurs prompts et d'afficher leurs compétences à l'ère des grands modèles linguistiques et de l'IA.

GET3D génère des modèles 3D texturés que vous pouvez intégrer directement dans un moteur de rendu, entraîné uniquement à partir de collections d'images 2D. Les chercheurs de NVIDIA l'ont conçu pour produire des maillages explicites avec géométrie et texture, et non des champs de radiance neuronale nécessitant des moteurs de rendu personnalisés.

La plupart des modèles génératifs 3D à l'époque omettaient les textures, imposaient une topologie fixe ou nécessitaient des pipelines de rendu neuronal pour visualiser les résultats. GET3D utilise la méthode différentiable des tétraèdres marchants (DMTet) ainsi que des pertes adversariales sur des images RGB rasterisées et des silhouettes, ce qui donne en sortie un maillage texturé standard. Le compromis est un accès de niveau recherche : il s'agit d'un projet du laboratoire d'IA NVIDIA Toronto présenté à NeurIPS 2022, et non d'un SaaS hébergé avec un bouton de téléchargement.

Le modèle prend en charge les voitures, chaises, animaux, motos, personnages humains et bâtiments. Il supporte également la génération de formes guidée par texte via un affinage basé sur CLIP, similaire à StyleGAN-NADA, et peut dissocier la géométrie de la texture grâce à des codes latents séparés.