GET3D | Nvidia vs Ava

GET3D genera activos de mallas 3D texturizadas que puedes insertar directamente en un motor de renderizado, entrenado únicamente a partir de colecciones de imágenes 2D. Investigadores de NVIDIA lo desarrollaron para producir mallas explícitas con geometría y textura, no campos de radiancia neuronal que requieren renderizadores personalizados para su uso.

La mayoría de los modelos generativos 3D en ese momento omitían texturas, te limitaban a una topología fija o requerían pipelines de renderizado neuronal para visualizar resultados. GET3D utiliza tetraedros diferenciables en marcha (DMTet) junto con pérdidas adversariales sobre imágenes RGB rasterizadas y siluetas, por lo que el resultado es una malla texturizada estándar. La compensación es el acceso a nivel de investigación: este es un proyecto del Laboratorio de IA de NVIDIA Toronto presentado en NeurIPS 2022, no un SaaS alojado con un botón de carga.

El modelo maneja autos, sillas, animales, motocicletas, personajes humanos y edificios. También soporta generación de formas guiada por texto mediante ajuste fino basado en CLIP, similar a StyleGAN-NADA, y puede separar la geometría de la textura mediante códigos latentes separados.

Ava convierte las conversaciones habladas en subtítulos en vivo en tu teléfono, computadora o navegador. Los usuarios sordos y con dificultades auditivas obtienen texto en tiempo real para videollamadas, conferencias, visitas médicas y conversaciones presenciales. El servicio combina reconocimiento automático de voz con escribas humanos opcionales cuando una reunión requiere precisión de nivel ADA.

La mayoría de las aplicaciones de subtítulos se detienen en la precisión que ofrece el modelo de voz. Ava te permite usar subtítulos de IA gratuitos o de bajo costo para uso diario, y luego añadir un escriba profesional para lograr un 99% de precisión cuando la situación lo amerita. Ava Connect integra subtítulos en Zoom, Google Meet o Teams sin necesidad de rehacer tu flujo de trabajo en torno a una sola plataforma.

Estudiantes, empleadores, clínicas y organizadores de eventos usan Ava para subtitular clases, reuniones rápidas, sesiones de telemedicina y charlas en recintos. Los planes individuales comienzan gratis con sesiones de 40 minutos; las organizaciones pueden añadir diccionarios personalizados, SSO y tiempo programado con escribas.