Phenaki vs Rizzle

Phenaki es un modelo de texto a video de Google Research que genera clips de dominio abierto a partir de secuencias de indicaciones, de modo que la historia puede cambiar a medida que llega nuevo texto con el tiempo. Su codificador C-ViViT comprime el metraje en tokens discretos con atención temporal causal, lo que permite al sistema manejar longitudes variables de clips en lugar de ráfagas fijas de dos segundos. Un transformador enmascarado convierte tokens de texto en tokens de video, luego el decodificador reconstruye los píxeles para demostraciones que duran más de dos minutos cuando las indicaciones están encadenadas.

Los generadores de video para consumidores suelen pedir una indicación por clip. El artículo y el sitio de demostración de Phenaki se centran en cadenas de indicaciones que varían en el tiempo, continuación condicionada por imagen a partir de un primer cuadro y entrenamiento conjunto en pares imagen-texto además de conjuntos más pequeños de video-texto para ir más allá de los conjuntos de datos limitados de video. Se pueden explorar historias de ejemplo en la página del proyecto en lugar de registrarse para un editor alojado.

Investigadores, ingenieros de ML y tecnólogos creativos estudian Phenaki para la síntesis narrativa de larga duración y el diseño de tokenizadores. El sitio phenaki.github.io aloja ejemplos interactivos de astronautas, continuaciones de imagen más indicación y muestras publicadas de historias de dos a dos minutos y medio con listas de indicaciones documentadas junto a cada clip.

Rizzle convierte artículos, blogs y textos editoriales en videos listos para publicar, diseñados para editores digitales y empresas de medios. El flujo de trabajo comienza con una IA que crea guiones gráficos a partir de tu contenido escrito, combinando texto con imágenes con licencia, música, transiciones y locuciones. Luego, expertos humanos en video revisan el ritmo, las imágenes y el tono antes de que cualquier contenido se publique.

A diferencia de las herramientas genéricas de texto a video que se detienen en la exportación, Rizzle también distribuye los videos terminados y las historias escritas a través de redes asociadas como Yahoo, MSN, SmartNews y NewsBreak. Rizzle es una agencia externa designada para la distribución de contenido de Yahoo, por lo que los editores pueden añadir inventario de video y alcance multiplataforma desde la misma plataforma que crea los clips. Las plataformas tradicionales de sindicación distribuyen texto que ya tienes; Rizzle crea primero nuevos activos de video monetizables y luego envía ambos formatos a través de una sola capa de infraestructura.

Organizaciones de noticias, editores digitales y equipos de contenido empresarial usan Rizzle para dar una segunda vida en video a historias escritas existentes, alcanzar audiencias que prefieren video y abrir flujos de monetización a partir de asociaciones de sindicación. El modelo de servicio gestionado se encarga de la creación de guiones gráficos, edición, revisión y distribución para que los equipos puedan aumentar la producción de video sin construir un departamento de producción interno.