mo-di-diffusion on Hugging Face vs The Replace-background API of novita.ai

mo-di-diffusion est un point de contrôle Stable Diffusion 1.5 affiné sur Hugging Face qui génère des personnages et des scènes dans un style de film d'animation moderne. Le créateur nitrosocke l'a entraîné sur des captures d'écran d'un studio d'animation populaire en utilisant DreamBooth avec une perte de préservation préalable et un entraînement de l'encodeur de texte sur plus de 9 000 étapes. Ajoutez le token modern disney style à votre prompt pour déclencher cette esthétique.

Les points de contrôle SD 1.5 généraux visent le photoréalisme ou des styles d'illustration larges. mo-di-diffusion se concentre fortement sur ce look brillant d'animation de personnages, c'est pourquoi les exemples de prompts pour des héros de jeux, des animaux et des paysages sont tous plutôt cinématographiques que photographiques. Les poids se chargent via le pipeline standard Diffusers StableDiffusionPipeline, vous pouvez donc l'exécuter localement, dans Colab ou dans Hugging Face Spaces sans API propriétaire.

Les artistes, amateurs et développeurs expérimentant des concepts de personnages utilisent mo-di-diffusion lorsqu'ils souhaitent des rendus proches de Disney sans commander un entraînement de modèle personnalisé. La fiche du modèle inclut un code Python d'exemple, des liens vers des démos Gradio, ainsi que des notes sur les options d'export ONNX, MPS et FLAX. Il est téléchargeable gratuitement sous licence CreativeML OpenRAIL-M avec une utilisation commerciale autorisée sous réserve des restrictions de la licence sur les dommages.

L'API Replace Background de Novita AI remplace l'arrière-plan d'une photo téléchargée par une nouvelle scène décrite dans une invite textuelle. Elle fait partie des Model APIs d'édition d'image de Novita, aux côtés des appels de suppression d'arrière-plan, de retouche et d'amélioration qui partagent la même plateforme api.novita.ai.

La plupart des outils d'arrière-plan fournissent un découpage vide ou une bibliothèque de modèles fixes. Le point de terminaison replace-background de Novita est piloté par invite, ce qui permet à la même intégration d'insérer un produit dans un entrepôt, un portrait dans un studio, ou un sujet dans n'importe quelle scène que vous décrivez, sans avoir à gérer des packs d'actifs séparés.

Les développeurs y accèdent via les API REST de Novita ou les SDK officiels Python et JavaScript après avoir créé une clé API dans la console. Les nouveaux comptes reçoivent un crédit de démarrage, les usages sont facturés sur un solde prépayé, et le playground Model API permet de tester les flux d'images avant de les intégrer dans du code de production.