Aimi.fm vs MusicLM

Aimi.fm cria músicas royalty-free a partir de stems de artistas licenciados em vez de usar gravações protegidas por direitos autorais, e depois distribui esse motor através do Aimi Sync para pontuação de vídeo. Faça upload de um clipe, e o Sync analisa as cenas quadro a quadro para compor uma trilha sonora correspondente com vocais opcionais, narração e stems para download. A página inicial pública agora antecipa um relançamento, mas os preços do Sync, a documentação e a página sobre mostram que a empresa ainda oferece ferramentas para criadores e desenvolvedores.

Enquanto geradores que usam apenas prompts produzem clipes estáticos, o Aimi Sync trata seu vídeo como o prompt e ajusta o tempo conforme o corte de cena. A música vem do Sonic Vault, com samples gravados por humanos orquestrados pelo Aimi Script e o motor AMOS, com um registro que documenta cada posicionamento de stem para pagamentos aos artistas. Esse modelo baseado em samples é o motivo pelo qual a Aimi.fm reivindica mais de 60 patentes e se posiciona contra ferramentas treinadas em catálogos de grandes gravadoras.

Criadores de vídeo que pontuam Reels, tutoriais e trabalhos para clientes têm exportações ilimitadas nos planos pagos, com um plano gratuito para clipes de 1 minuto. Músicos independentes podem enviar stems para o Sonic Vault e ganhar com micro-uso. Desenvolvedores podem solicitar a API do Sync para incorporar trilhas sonoras conscientes das cenas e liberadas de direitos autorais em apps sem precisar lidar com licenciamento.

MusicLM é um modelo de geração de áudio do Google Research que cria música a partir de legendas de texto a 24 kHz. A página pública de exemplos hospeda clipes de amostra para comandos como trilhas sonoras de arcade, fusões de reggaeton-EDM e jazz relaxante, além de gerações mais longas no modo história que mudam de estilo ao longo de segmentos temporizados. O Google lançou o conjunto de dados MusicCaps com 5.500 pares de música-texto junto com o artigo.

Diferente de aplicativos para consumidores que oferecem uma única caixa de comando, o MusicLM foi publicado como uma demonstração de pesquisa com amostras pré-geradas, e não como um produto com login. Seu truque principal é o condicionamento conjunto de texto e melodia: você pode cantarolar ou assobiar uma melodia e fazer o modelo regravá-la em um novo gênero descrito em texto. O modo história encadeia múltiplas legendas para que a música evolua ao longo das seções.

O MusicLM é importante como base de pesquisa para os modelos musicais Lyria posteriores do Google, mas esta página é para ouvir exemplos publicados, não para criar novas faixas interativamente. Pesquisadores e músicos o estudam pela consistência em longas durações, condicionamento de pintura para música e resultados de transferência de melodia documentados no artigo de 2023.