GET3D | Nvidia vs Civitai

GET3D gera ativos de malha 3D texturizados que você pode importar diretamente em um motor de renderização, treinado apenas a partir de coleções de imagens 2D. Pesquisadores da NVIDIA o desenvolveram para produzir malhas explícitas com geometria e textura, não campos neurais de radiância que precisam de renderizadores personalizados para uso.

A maioria dos modelos generativos 3D na época ou ignorava texturas, restringia você a uma topologia fixa, ou exigia pipelines de renderização neural para visualizar os resultados. GET3D usa tetraedros diferenciáveis em marcha (DMTet) mais perdas adversariais em imagens RGB rasterizadas e silhuetas, então a saída é uma malha texturizada padrão. A compensação é o acesso em nível de pesquisa: este é um projeto do NVIDIA Toronto AI Lab apresentado no NeurIPS 2022, não um SaaS hospedado com botão de upload.

O modelo lida com carros, cadeiras, animais, motocicletas, personagens humanos e edifícios. Também suporta geração de formas guiadas por texto via ajuste fino baseado em CLIP, semelhante ao StyleGAN-NADA, e pode separar geometria de textura por meio de códigos latentes separados.

Civitai é uma comunidade de geração de modelos onde criadores fazem upload, compartilham e baixam checkpoints do Stable Diffusion, LoRAs, imagens, vídeos e ativos 3D. Você pode navegar por modelos em destaque, realizar geração no local com créditos Buzz e sincronizar downloads para uma máquina local através do Civitai Link. O marketplace também hospeda artigos, desafios e um programa para criadores com acesso pago a modelos.

Diferente de um gerador de imagens fechado, Civitai funciona como um catálogo aberto mais um hub de geração. Avaliações da comunidade destacam modelos populares, criadores podem cobrar Buzz por acesso antecipado ou licenciamento, e níveis de associação aumentam limites de fila e cotas mensais de Buzz. Isso o aproxima mais do Hugging Face para modelos de difusão do que de um aplicativo SaaS de arte de estilo único.

Civitai atende a entusiastas em busca de novos estilos, treinadores de modelos que publicam checkpoints personalizados e estúdios que precisam de um fluxo constante de LoRAs da comunidade. Assinaturas pagas Bronze, Silver e Gold adicionam Buzz, filas mais rápidas e limites de monetização para criadores, enquanto usuários gratuitos ainda podem navegar e baixar muitos recursos.