Neuralangelo Research Reconstructs 3D Scenes | NVIDIA vs Make3D

Neuralangelo es un modelo de IA desarrollado por NVIDIA Research que transforma clips de video en 2D en estructuras 3D detalladas mediante redes neuronales. Crea réplicas virtuales realistas de objetos como edificios, esculturas y escenas complejas capturando detalles y texturas intrincadas desde múltiples puntos de vista. Esta tecnología está diseñada para profesionales creativos y desarrolladores que trabajan en realidad virtual, gemelos digitales, robótica y desarrollo de juegos, permitiéndoles importar modelos 3D de alta fidelidad en sus flujos de trabajo de diseño.

A diferencia de métodos anteriores, Neuralangelo sobresale en reproducir materiales complejos como tejas de techo, paneles de vidrio y superficies de mármol lisas con gran precisión. Utiliza primitivas gráficas neuronales instantáneas, la tecnología detrás de NVIDIA Instant NeRF, para captar detalles finos y patrones de textura repetitivos que antes resultaban desafiantes. El modelo procesa fotogramas seleccionados de videos para estimar las posiciones de la cámara y luego construye y perfecciona una representación 3D, similar a un escultor que moldea un sujeto desde múltiples ángulos.

Neuralangelo soporta la reconstrucción tanto de objetos pequeños como de escenas a gran escala, incluyendo interiores y exteriores de edificios, demostrada con modelos detallados como la estatua de David de Michelangelo y el parque del campus de NVIDIA en el Área de la Bahía. Esto lo convierte en una herramienta versátil para industrias que requieren réplicas digitales realistas de entornos y objetos del mundo real.

El modelo simplifica la creación de activos virtuales utilizables a partir de grabaciones incluso realizadas con smartphones, acelerando los flujos de trabajo para artistas, diseñadores y ingenieros. Al cerrar la brecha entre los mundos físico y digital, Neuralangelo mejora el realismo y la eficiencia de proyectos en entretenimiento, diseño industrial y robótica.

NVIDIA ha puesto Neuralangelo disponible en GitHub, fomentando a desarrolladores e investigadores a explorar y construir sobre esta tecnología. Representa un avance significativo en la reconstrucción 3D, combinando renderizado neuronal avanzado con usabilidad práctica para una amplia gama de aplicaciones.

Convierte imágenes 2D en imágenes o incrustaciones 3D.