Última actualización 11-04-2025
Categoría:
Reviews:
Join thousands of AI enthusiasts in the World of AI!
Farm3D
Farm3D es una herramienta desarrollada por la Universidad de Oxford que crea modelos animales articulados en 3D a partir de una sola imagen. Utiliza un enfoque único al aprovechar un generador de imágenes basado en difusión 2D, como Stable Diffusion, para entrenar una red que reconstruye formas detalladas en 3D sin necesidad de datos 3D reales. Este método permite que Farm3D genere modelos en 3D con detalles finos, como patas y orejas, aunque no haya sido entrenada con imágenes reales.
La herramienta soporta una síntesis en 3D controlable, permitiendo a los usuarios ajustar la iluminación, intercambiar texturas entre modelos de la misma categoría de animal y animar las formas. Funciona tanto con imágenes reales como con imágenes generadas por Stable Diffusion, produciendo activos en 3D en segundos. Farm3D descompone las imágenes de entrada en componentes como forma articulada, apariencia, punto de vista y dirección de la luz, ofreciendo a los usuarios control sobre el modelo final.
Farm3D también presenta el conjunto de datos Animodel, una colección de mallas en 3D texturizadas de animales articulados como caballos, vacas y ovejas, con poses realistas. Este conjunto de datos sirve como referencia para evaluar la calidad de la reconstrucción 3D de vista única para animales articulados.
Esta herramienta es ideal para investigadores, artistas digitales y desarrolladores interesados en el modelado, la animación y la síntesis en 3D de animales, sin requerir datos de entrenamiento en 3D extensos. Su uso innovador de modelos de difusión para supervisión virtual y puntuación la diferencia de los métodos tradicionales de reconstrucción en 3D.
El enfoque de Farm3D reduce la necesidad de anotaciones 3D costosas al usar vistas sintéticas generadas y criticadas por modelos de difusión durante el entrenamiento. Esto da lugar a una red de reconstrucción monocular que es rápida, flexible y capaz de producir modelos en 3D de alta calidad con características controlables.
🐾 La reconstrucción 3D a partir de una sola imagen crea modelos detallados de animales rápidamente
🎨 El intercambio de texturas te permite personalizar apariencias entre modelos
💡 La iluminación ajustable mejora el realismo con controles de reiluminación
🎬 El soporte de animación agrega movimiento a las formas 3D de animales
🖼️ Utiliza vistas sintéticas de Stable Diffusion para entrenamiento sin datos 3D reales
Genera modelos animales 3D detallados a partir de una sola imagen sin datos 3D reales
Soporta síntesis controlable que incluye animación, intercambio de texturas y reiluminación
Entrena utilizando vistas sintéticas de modelos de difusión, reduciendo los costos de recolección de datos
Produce resultados rápidamente, adecuado para aplicaciones creativas e investigativas
Incluye un conjunto de datos de referencia para evaluar la reconstrucción de animales articulados
Actualmente enfocado en animales articulados, limitando el uso para otras categorías de objetos
Funciones avanzadas como la animación y el intercambio de texturas pueden requerir acceso al plan Pro
¿Cómo crea Farm3D modelos 3D a partir de una sola imagen?
Farm3D utiliza una red entrenada con vistas sintéticas generadas por Stable Diffusion para reconstruir formas detalladas de animales en 3D a partir de una imagen de entrada.
¿Puedo animar los modelos 3D de animales creados con Farm3D?
Sí, Farm3D admite la animación de las formas articuladas de animales en 3D, permitiéndote dar vida a tus modelos.
¿Es posible cambiar la textura o la iluminación de los modelos 3D?
Farm3D te permite intercambiar texturas entre modelos de la misma categoría y ajustar la iluminación mediante controles de relighting para obtener efectos realistas.
¿Necesito datos 3D reales para entrenar la red de reconstrucción de Farm3D?
No, Farm3D entrena su red usando supervisión virtual a partir de un modelo de difusión 2D, eliminando la necesidad de anotaciones 3D reales.
¿Qué tipos de animales puede reconstruir Farm3D?
Farm3D se enfoca en animales articulados como caballos, vacas y ovejas, capturando detalles finos como patas y orejas.
¿Qué tan rápido puede Farm3D generar un modelo 3D a partir de una imagen?
El sistema puede producir activos 3D controlables a partir de una sola imagen en cuestión de segundos.
¿Qué es el conjunto de datos Animodel incluido con Farm3D?
Animodel es un nuevo conjunto de datos de mallas 3D texturizadas de animales articulados con poses realistas, usado para evaluar la calidad de reconstrucción.