InstructPix2Pix vs Photoleap

InstructPix2Pix edita uma foto a partir de uma instrução em linguagem simples, como "faça o céu ficar laranja de pôr do sol" ou "transforme isso em uma aquarela." Você fornece uma imagem de entrada e um comando de texto curto, e o modelo retorna uma versão editada em segundos sem precisar treinar nessa foto específica antes. Foi publicado como um Destaque do CVPR 2023 por pesquisadores da UC Berkeley.

Editores baseados em máscara exigem que você pinte regiões antes de alterar qualquer coisa. InstructPix2Pix executa uma única passagem direta apenas a partir do texto, pulando etapas de ajuste fino ou inversão por imagem que retardam outros fluxos de trabalho de edição por difusão. A compensação aparece nos casos de falha do artigo: mudanças de ponto de vista, troca de objetos e edições locais precisas continuam sendo pontos fracos.

O projeto disponibiliza código open source no GitHub e um espaço de demonstração no Hugging Face para testar edições no navegador. O treinamento combinou GPT-3 e Stable Diffusion para sintetizar pares de instruções, e o modelo lançado generaliza para fotos reais de até cerca de 768 pixels de largura, apesar da resolução de treinamento de 256x256.

A Lightricks desenvolveu o Photoleap como um editor de fotos voltado para celulares, onde a IA lida com retoques, trocas de fundo, geração de texto para imagem e filtros criativos por meio de controles fáceis de tocar. As ferramentas gratuitas incluem o removedor de fundo Cutout, e uma assinatura Pro desbloqueia o pacote criativo completo após um teste de 7 dias.

Editores de desktop como o Photoshop exigem camadas e máscaras manuais. Em vez disso, o Photoleap oferece transformações de IA com um toque, como trocas de rosto, filtros de anuário, visualizações de tatuagem e rascunho para imagem diretamente no celular. A função de Texto para Imagem funciona no navegador, mas Rascunho para Imagem, AI Rooms e AI Selfies continuam disponíveis apenas no aplicativo, portanto, a experiência na Web permanece mais limitada do que o aplicativo móvel completo.

Com mais de 65 milhões de downloads e uma classificação de 4,7/5 de 600 mil usuários, o Photoleap é ideal para criadores do Instagram, profissionais de marketing de pequenas empresas e fotógrafos casuais que editam no iOS ou Android sem treinamento em design. Os assinantes Pro obtêm até 12 camadas, além de todas as ferramentas de IA listadas no site.