Drag Your GAN

Drag Your GAN

Drag Your GAN permite remodelar uma imagem gerada arrastando pontos de controle para locais específicos na tela. Em vez de treinar com dados de pose rotulados ou prévias 3D, o DragGAN move pixels dentro do espaço de imagens de um GAN pré-treinado para que as edições permaneçam fotorrealistas mesmo quando regiões ocultas são imaginadas. A página do projeto hospeda o artigo do SIGGRAPH 2023, clipes de demonstração e links para o código aberto.

A maioria dos editores de GAN depende de anotações fixas de treinamento ou malhas 3D, o que limita o que pode ser deformado. O DragGAN combina supervisão de movimento baseada em características com rastreamento discriminativo de pontos para que os pontos de controle sigam o cursor enquanto permanecem na superfície do objeto. Isso o torna útil para ajustar poses de animais, expressões faciais, ângulos de carros e layouts de paisagens sem precisar retreinar o gerador.

Pesquisadores, estudantes de computação gráfica e engenheiros de visão computacional o utilizam para prototipar fluxos de trabalho interativos de edição de imagens. A página do Instituto Max Planck distribui o PDF do artigo e o repositório GitHub sob uma licença Creative Commons não comercial, com detalhes de contato do autor principal.

Recursos Principais:
  1. Pontos de controle de arrasto para posições-alvo com controle preciso em nível de pixel

  2. Supervisão de movimento baseada em recursos que controla as alças sem priors 3D

  3. Rastreamento de pontos usa recursos discriminativos GAN para localizar alças

  4. Deforma animais, carros, humanos, paisagens e fotos reais invertidas

  5. Código open source publicado em github.com/XingangPan/DragGAN

  6. Artigo e vídeos de demonstração das Atas da SIGGRAPH 2023

Pros:
  1. Controle interativo preciso sem anotações manuais de treinamento

  2. Produz edições realistas dentro do espaço do GAN

  3. Lida com conteúdo ocluído e deformações rígidas de forma

  4. Código open source e artigo disponíveis gratuitamente

  5. Funciona com animais, humanos, veículos e paisagens

Cons:
  1. Licença não comercial limita implantação comercial

  2. Requer expertise em GAN para executar a base de código de pesquisa

  3. Sem aplicativo web hospedado para usuários casuais na página do projeto

  4. Página do projeto de pesquisa com última atualização em maio de 2023

Perguntas frequentes:

O Drag Your GAN é gratuito?

Sim, o Drag Your GAN é gratuito para uso não comercial. A página do projeto distribui o PDF do artigo e o código no GitHub sob a licença Creative Commons CC BY-NC 4.0, com atribuição obrigatória ao título do artigo e aos autores.

Para que serve o Drag Your GAN?

O Drag Your GAN permite arrastar pontos em uma imagem gerada para que os pixels se movam para alvos definidos pelo usuário. O DragGAN combina supervisão de movimento e rastreamento de pontos dentro do espaço latente de um GAN para deformar pose, forma, expressão e layout.

Onde posso baixar o código do Drag Your GAN?

O Drag Your GAN fornece o link para o repositório open source em github.com/XingangPan/DragGAN na página do projeto. A mesma página também hospeda o PDF do artigo SIGGRAPH 2023 para download.

Quais tipos de imagem o Drag Your GAN suporta?

Os clipes de demonstração do Drag Your GAN incluem leões, gatos, cães, cavalos, elefantes, rostos humanos, carros, microscópios e paisagens. O método também demonstra manipulação de fotos reais por meio da inversão de GAN.

Quem criou o Drag Your GAN?

O Drag Your GAN foi criado por pesquisadores do Max Planck Institute for Informatics, MIT, University of Pennsylvania e Google AR/VR. Xingang Pan é listado como contato na página do projeto.

Posso usar o Drag Your GAN comercialmente?

Os materiais do site Drag Your GAN são liberados sob CC BY-NC 4.0, que restringe o uso comercial. Revise o arquivo de licença na página do projeto antes de usar imagens, textos ou vídeos em projetos comerciais.

Preços:

Gratuito

Tags:

GAN Editing
Point-based Control
Image Manipulation
SIGGRAPH 2023
Computer Vision
Open Source
Feature-based motion supervision
Point tracking

Tecnologia utilizada:

GANs
GitHub
Google Cloud
Google Fonts
Ruby

Avaliações:

Give your opinion on Drag Your GAN :-

Overall rating

Join thousands of AI enthusiasts in the World of AI!

Melhor Gratuito Drag Your GAN Alternativas (e Pagas)

By Rishit