Drag Your GAN

Drag Your GAN

Drag Your GAN te permite remodelar una imagen generada arrastrando puntos de control hacia ubicaciones específicas en el lienzo. En lugar de entrenar con datos de pose etiquetados o prerrequisitos 3D, DragGAN mueve píxeles dentro del espacio de imágenes de un GAN preentrenado para que las ediciones se mantengan fotorrealistas incluso cuando se generan regiones ocultas. La página del proyecto aloja el artículo de SIGGRAPH 2023, clips de demostración y enlaces al código abierto.

La mayoría de los editores de GAN dependen de anotaciones fijas de entrenamiento o mallas 3D, lo que limita lo que se puede deformar. DragGAN combina supervisión de movimiento basada en características con seguimiento discriminativo de puntos para que los puntos de control sigan tu cursor mientras permanecen en la superficie del objeto. Esto lo hace útil para ajustar poses de animales, expresiones faciales, ángulos de autos y disposiciones de paisajes sin necesidad de reentrenar el generador.

Investigadores, estudiantes de gráficos y ingenieros de visión por computadora lo usan para prototipar flujos de trabajo interactivos de edición de imágenes. La página del Instituto Max Planck distribuye el PDF del artículo y el repositorio de GitHub bajo una licencia Creative Commons no comercial, con detalles de contacto del autor principal.

Funciones principales:
  1. Puntos de la manija de arrastre para apuntar a posiciones con control preciso a nivel de píxel

  2. Supervisión de movimiento basada en funciones que impulsa las manijas sin priors 3D

  3. Seguimiento de puntos usando características discriminativas de GAN para localizar las manijas

  4. Deforma animales, autos, humanos, paisajes y fotos reales invertidas

  5. Código de fuente abierto publicado en github.com/XingangPan/DragGAN

  6. Artículos y videos de demostración de las Actas de SIGGRAPH 2023

Pros:
  1. Control interactivo preciso sin anotaciones manuales de entrenamiento

  2. Genera ediciones realistas dentro del conjunto de datos del GAN

  3. Maneja contenido ocluido y deformaciones rígidas de forma

  4. Código fuente y artículo disponibles de forma gratuita

  5. Funciona con animales, humanos, vehículos y paisajes

Cons:
  1. La licencia no comercial limita el despliegue comercial

  2. Requiere experiencia en GAN para ejecutar la base de código de investigación

  3. No hay una aplicación web alojada para usuarios casuales en la página del proyecto

  4. Página del proyecto de investigación con última actualización en mayo de 2023

Preguntas frecuentes:

¿Drag Your GAN es gratis?

Sí, Drag Your GAN es gratuito para uso no comercial. La página del proyecto distribuye el PDF del artículo y el código en GitHub bajo la licencia Creative Commons CC BY-NC 4.0, requiriendo atribución al título del artículo y a los autores.

¿Para qué sirve Drag Your GAN?

Drag Your GAN te permite arrastrar puntos en una imagen generada para que los píxeles se muevan hacia objetivos definidos por el usuario. DragGAN combina supervisión de movimiento y seguimiento de puntos dentro del espacio latente de un GAN para deformar pose, forma, expresión y disposición.

¿Dónde puedo descargar el código de Drag Your GAN?

Drag Your GAN enlaza al repositorio de código abierto en github.com/XingangPan/DragGAN desde su página del proyecto. La misma página también aloja el PDF del artículo SIGGRAPH 2023 para descarga.

¿Qué tipos de imágenes soporta Drag Your GAN?

Los clips de demostración de Drag Your GAN incluyen leones, gatos, perros, caballos, elefantes, rostros humanos, autos, microscopios y paisajes. El método también muestra manipulación de fotos reales mediante inversión GAN.

¿Quién creó Drag Your GAN?

Drag Your GAN fue desarrollado por investigadores del Max Planck Institute for Informatics, MIT, University of Pennsylvania y Google AR/VR. Xingang Pan figura como contacto en la página del proyecto.

¿Se puede usar Drag Your GAN comercialmente?

Los materiales del sitio Drag Your GAN se publican bajo CC BY-NC 4.0, que restringe el uso comercial. Revisa el archivo de licencia en la página del proyecto antes de usar imágenes, texto o video en proyectos comerciales.

Tarificación:

Gratis

Etiquetas:

GAN Editing
Point-based Control
Image Manipulation
SIGGRAPH 2023
Computer Vision
Open Source
Feature-based motion supervision
Point tracking

Tecnología utilizada:

GANs
GitHub
Google Cloud
Google Fonts
Ruby

Reseñas:

Give your opinion on Drag Your GAN :-

Overall rating

Join thousands of AI enthusiasts in the World of AI!

Mejor Gratis Drag Your GAN Alternativas (y Pagadas)

By Rishit