Neuralangelo Research Reconstructs 3D Scenes | NVIDIA

Neuralangelo Research Reconstructs 3D Scenes | NVIDIA

Neuralangelo es un modelo de NVIDIA Research que reconstruye objetos y escenas 3D detallados a partir de video 2D ordinario. Se alimentan clips filmados desde múltiples ángulos y el sistema construye mallas texturizadas de edificios, esculturas, vehículos e interiores adecuados para juegos, gemelos digitales y simulaciones robóticas.

Los métodos anteriores de reconstrucción neural difuminaban texturas finas como tejas de techo, vidrio y mármol. Neuralangelo extiende las primitivas gráficas neuronales instantáneas de NVIDIA Instant NeRF para capturar esas superficies con mayor fidelidad, por lo que las grabaciones de smartphones pueden producir activos que los equipos creativos pueden importar en herramientas de diseño sin necesidad de un escaneo láser o un modelado manual.

Investigadores, artistas de juegos e ingenieros robóticos usan Neuralangelo para digitalizar objetos del mundo real, desde estatuas a escala Michelangelo hasta edificios de campus. El proyecto es de código abierto en GitHub bajo nvlabs/neuralangelo sin tarifas de licencia comercial para el código de investigación en sí.

Funciones principales:
  1. Reconstruye objetos 3D y escenas grandes a partir de video 2D filmado desde múltiples ángulos

  2. Captura texturas finas como tejas, vidrio y mármol mejor que métodos neuronales anteriores

  3. Basado en primitivas gráficas neuronales instantáneas de la tecnología NVIDIA Instant NeRF

  4. Exporta mallas detalladas para motores de juego, VR, gemelos digitales y pipelines de robótica

  5. Código de código abierto publicado en github.com/nvlabs/neuralangelo

  6. Demostrado en estatuas, vehículos y interiores completos de edificios a partir de grabaciones con teléfono

  7. Presentado en CVPR 2023 junto a casi 30 otros proyectos de NVIDIA Research

Pros:
  1. Texturas de alta fidelidad en tejas, vidrio y mármol desde video de teléfono.

  2. Lanzamiento de código abierto en GitHub bajo NVIDIA Research.

  3. Genera mallas utilizables para juegos, VR y pipelines de robótica.

  4. Maneja tanto objetos pequeños como escenas de gran escala de edificios.

Cons:
  1. La base de código de investigación requiere configuración de GPU y experiencia técnica para ejecutar.

  2. Necesita entrada de video desde múltiples ángulos en lugar de una sola foto.

  3. No hay SaaS alojado; ejecutas Neuralangelo localmente o en tu propia infraestructura.

Preguntas frecuentes:

¿Qué es Neuralangelo?

Neuralangelo es un modelo de IA de NVIDIA Research que reconstruye estructuras 3D a partir de clips de video 2D. Genera réplicas virtuales texturizadas de objetos y escenas del mundo real para flujos de trabajo creativos y de robótica.

¿Neuralangelo es gratis?

Sí. Neuralangelo está disponible como código de investigación de código abierto en GitHub en nvlabs/neuralangelo. NVIDIA publica el modelo para que desarrolladores e investigadores lo descarguen y ejecuten.

¿Qué entrada necesita Neuralangelo?

Neuralangelo utiliza video 2D de un objeto o escena capturado desde múltiples puntos de vista. El modelo selecciona cuadros, estima posiciones de cámara y optimiza una representación 3D detallada.

¿Qué puedo crear con la salida de Neuralangelo?

Las mallas de Neuralangelo pueden importarse en aplicaciones de diseño para videojuegos, experiencias de realidad virtual, gemelos digitales industriales y entornos de simulación robótica.

¿En qué se diferencia Neuralangelo de Instant NeRF?

Neuralangelo se basa en primitivas gráficas neuronales instantáneas de NVIDIA Instant NeRF pero se enfoca en texturas de superficie más nítidas y reconstrucción de escenas a gran escala a partir de video casual.

¿Dónde está alojado el código de Neuralangelo?

El código fuente de Neuralangelo está en GitHub en github.com/nvlabs/neuralangelo. NVIDIA anunció su disponibilidad pública en una nota editorial en su publicación oficial del blog.

¿Quién desarrolló Neuralangelo?

Neuralangelo fue desarrollado por NVIDIA Research, incluyendo al director senior Ming-Yu Liu y colaboradores, y fue presentado en la conferencia CVPR 2023.

Categoría:

Tarificación:

Gratis

Etiquetas:

3D Reconstruction
Neural Rendering
Instant NeRF
Digital Twins
Computer Vision
NVIDIA Research
Video to 3D
Virtual Reality

Tecnología utilizada:

GitHub
Python
CUDA

Reseñas:

Give your opinion on Neuralangelo Research Reconstructs 3D Scenes | NVIDIA :-

Overall rating

Join thousands of AI enthusiasts in the World of AI!

Mejor Gratis Neuralangelo Research Reconstructs 3D Scenes | NVIDIA Alternativas (y Pagadas)

By Rishit