Img2Video vs Lumiere

Img2Video transforme des images fixes téléchargées en de courtes vidéos animées grâce à un flux de travail sur navigateur accessible sur img2video.org/create. Vous choisissez un modèle, téléchargez 2 à 3 fichiers JPG ou PNG d'une taille maximale de 10Mo chacun, définissez une durée de 5, 10 ou 15 secondes et ajoutez éventuellement une instruction avant de générer le clip.

De nombreuses applications d'image à vidéo visent un mouvement cinématique à partir d'une seule photo. Img2Video se concentre sur un rendu de type diaporama multi-images avec des modèles, une bibliothèque musicale libre de droits et des préréglages d'exportation dimensionnés pour Instagram, TikTok, YouTube et Facebook. Les exportations gratuites comportent un filigrane, tandis que les formules Lite et Pro le suppriment et débloquent le mode professionnel.

La section tarifaire liste les formules Free, Lite à $9.9 par mois pendant l'offre de lancement, et Pro à $19.9 par mois avec des quotas mensuels de 2, 30 et 80 vidéos standard. Les créateurs de contenu, les gestionnaires de réseaux sociaux et les vendeurs e-commerce sont les publics mentionnés sur la page d'accueil et la page de création.

Lumiere est un modèle de diffusion de texte à vidéo développé par Google Research, conçu pourSynthétiser des vidéos avec un mouvement réaliste, diversifié et cohérent. La page du projet présente des exemples de sorties pour la génération de vidéo à partir de texte, d'image à vidéo, la génération stylisée, la stylisation de vidéos, les cinémagraphes, et la retouche vidéo.

Son architecture Space-Time U-Net génère un clip vidéo entier en une seule passe du modèle, plutôt que de créer des images-clés distantes et de combler les gaps avec une super-résolution temporelle. Le modèle utilise un échantillonnage spatial et temporel à la montée et à la descente, et s'appuie sur une base de diffusion text-to-image pré-entraînée pour produire des vidéos en fréquence d'image complète sur plusieurs échelles espace-temps.

Le site est une démonstration de recherche et accompagne un article, ce n'est pas une application destinée aux consommateurs. Il s'adresse aux chercheurs, ingénieurs et créateurs qui souhaitent étudier l'état de l'art en diffusion vidéo et voir ce que le modèle peut réaliser en termes de génération et de montage.