Immersity (formerly LeiaPix Converter) vs Text-To-4D

Immersity, antes LeiaPix Converter, convierte fotos y vídeos planos en animaciones de profundidad que puedes ver en una pantalla normal o en unos auriculares XR. Subes un archivo 2D, el Neural Depth Engine crea un mapa de profundidad y exportas formatos como 3D lado a lado, mapas de profundidad, vídeo espacial para Apple Vision Pro o clips animados de Immersive Motion.

Las aplicaciones genéricas de fotos en 3D suelen limitarse a un simple movimiento de paralaje. Immersity separa el primer plano y el fondo en capas distintas con Neural Depth Rendering 4.0, que completa los detalles ocultos al desplazar o acercar la vista. También convierte vídeo, no solo imágenes fijas, con opciones de exportación de hasta 4K en los planes de pago.

Creadores, profesionales del marketing y aficionados a la XR lo utilizan para clips sociales, metraje de viajes y contenido estereoscópico sin tener que crear mapas de profundidad a mano. El nivel gratuito permite conversiones ilimitadas con marca de agua de hasta 720p; los planes de imágenes de pago empiezan en $4.99 al mes por 500 créditos y salida en 4K sin marcas de agua.

Text-To-4D es un proyecto de investigación de Meta AI (MAV3D) que genera escenas dinámicas tridimensionales a partir de descripciones de texto. El método utiliza un Campo Neural de Radiancia dinámico 4D optimizado para la apariencia, densidad y consistencia del movimiento mediante la consulta a un modelo de difusión de texto a video.

A diferencia de los generadores 3D estáticos que producen una sola malla, Text-To-4D crea escenas que se pueden ver desde cualquier ángulo de cámara y componer en otros entornos 3D. El enfoque no requiere datos de entrenamiento 3D o 4D; el modelo subyacente de texto a video se entrena solo con pares de texto-imagen y videos sin etiquetar.

La página del proyecto aloja muestras de demostración para indicaciones de texto a 4D como "un corgi jugando con una pelota" y conversiones de imagen a 4D a partir de fotos fijas. Es una muestra de investigación, no un producto comercial con API pública o registro. Investigadores y artistas 3D interesados en la generación de escenas dinámicas basadas en NeRF pueden explorar el artículo y las muestras en el sitio.