Drag Your GAN
Drag Your GAN permite remodelar uma imagem gerada arrastando pontos de controle para locais específicos na tela. Em vez de treinar com dados de pose rotulados ou prévias 3D, o DragGAN move pixels dentro do espaço de imagens de um GAN pré-treinado para que as edições permaneçam fotorrealistas mesmo quando regiões ocultas são imaginadas. A página do projeto hospeda o artigo do SIGGRAPH 2023, clipes de demonstração e links para o código aberto.
A maioria dos editores de GAN depende de anotações fixas de treinamento ou malhas 3D, o que limita o que pode ser deformado. O DragGAN combina supervisão de movimento baseada em características com rastreamento discriminativo de pontos para que os pontos de controle sigam o cursor enquanto permanecem na superfície do objeto. Isso o torna útil para ajustar poses de animais, expressões faciais, ângulos de carros e layouts de paisagens sem precisar retreinar o gerador.
Pesquisadores, estudantes de computação gráfica e engenheiros de visão computacional o utilizam para prototipar fluxos de trabalho interativos de edição de imagens. A página do Instituto Max Planck distribui o PDF do artigo e o repositório GitHub sob uma licença Creative Commons não comercial, com detalhes de contato do autor principal.
Pontos de controle de arrasto para posições-alvo com controle preciso em nível de pixel
Supervisão de movimento baseada em recursos que controla as alças sem priors 3D
Rastreamento de pontos usa recursos discriminativos GAN para localizar alças
Deforma animais, carros, humanos, paisagens e fotos reais invertidas
Código open source publicado em github.com/XingangPan/DragGAN
Artigo e vídeos de demonstração das Atas da SIGGRAPH 2023
Controle interativo preciso sem anotações manuais de treinamento
Produz edições realistas dentro do espaço do GAN
Lida com conteúdo ocluído e deformações rígidas de forma
Código open source e artigo disponíveis gratuitamente
Funciona com animais, humanos, veículos e paisagens
Licença não comercial limita implantação comercial
Requer expertise em GAN para executar a base de código de pesquisa
Sem aplicativo web hospedado para usuários casuais na página do projeto
Página do projeto de pesquisa com última atualização em maio de 2023
O Drag Your GAN é gratuito?
Sim, o Drag Your GAN é gratuito para uso não comercial. A página do projeto distribui o PDF do artigo e o código no GitHub sob a licença Creative Commons CC BY-NC 4.0, com atribuição obrigatória ao título do artigo e aos autores.
Para que serve o Drag Your GAN?
O Drag Your GAN permite arrastar pontos em uma imagem gerada para que os pixels se movam para alvos definidos pelo usuário. O DragGAN combina supervisão de movimento e rastreamento de pontos dentro do espaço latente de um GAN para deformar pose, forma, expressão e layout.
Onde posso baixar o código do Drag Your GAN?
O Drag Your GAN fornece o link para o repositório open source em github.com/XingangPan/DragGAN na página do projeto. A mesma página também hospeda o PDF do artigo SIGGRAPH 2023 para download.
Quais tipos de imagem o Drag Your GAN suporta?
Os clipes de demonstração do Drag Your GAN incluem leões, gatos, cães, cavalos, elefantes, rostos humanos, carros, microscópios e paisagens. O método também demonstra manipulação de fotos reais por meio da inversão de GAN.
Quem criou o Drag Your GAN?
O Drag Your GAN foi criado por pesquisadores do Max Planck Institute for Informatics, MIT, University of Pennsylvania e Google AR/VR. Xingang Pan é listado como contato na página do projeto.
Posso usar o Drag Your GAN comercialmente?
Os materiais do site Drag Your GAN são liberados sob CC BY-NC 4.0, que restringe o uso comercial. Revise o arquivo de licença na página do projeto antes de usar imagens, textos ou vídeos em projetos comerciais.

