Memix vs MusicLM

O Memix converte suas gravações vocais na voz de um rapper, cantor ou figura pública famosa. Você se cadastra, escolhe um dos 40 modelos de voz de IA, faz o upload de um acapella ou canta diretamente no aplicativo e baixa o áudio transformado. O site é voltado para criadores casuais que desejam fazer canções cover ou clipes de memes, em vez de fluxos de trabalho de produção vocal profissional.

A maioria das ferramentas de voz por IA se concentra em texto para fala ou clonagem genérica de voz. O Memix oferece uma biblioteca fixa de vozes estilo celebridade pronta para uso, então você pula totalmente a etapa de treinamento. O catálogo de vozes abrange artistas de hip-hop, cantores pop e uma pequena quantidade de figuras políticas, o que o torna mais rápido para conteúdo de formato curto do que criar um modelo personalizado do zero.

Criadores do TikTok que fazem canções cover com IA, amigos que produzem clipes de paródia e músicos amadores que experimentam diferentes estilos vocais são o público principal. O produto é desenvolvido no Rio de Janeiro e funciona como um aplicativo web com autenticação Firebase.

MusicLM é um modelo de geração de áudio do Google Research que cria música a partir de legendas de texto a 24 kHz. A página pública de exemplos hospeda clipes de amostra para comandos como trilhas sonoras de arcade, fusões de reggaeton-EDM e jazz relaxante, além de gerações mais longas no modo história que mudam de estilo ao longo de segmentos temporizados. O Google lançou o conjunto de dados MusicCaps com 5.500 pares de música-texto junto com o artigo.

Diferente de aplicativos para consumidores que oferecem uma única caixa de comando, o MusicLM foi publicado como uma demonstração de pesquisa com amostras pré-geradas, e não como um produto com login. Seu truque principal é o condicionamento conjunto de texto e melodia: você pode cantarolar ou assobiar uma melodia e fazer o modelo regravá-la em um novo gênero descrito em texto. O modo história encadeia múltiplas legendas para que a música evolua ao longo das seções.

O MusicLM é importante como base de pesquisa para os modelos musicais Lyria posteriores do Google, mas esta página é para ouvir exemplos publicados, não para criar novas faixas interativamente. Pesquisadores e músicos o estudam pela consistência em longas durações, condicionamento de pintura para música e resultados de transferência de melodia documentados no artigo de 2023.