Altered Studio vs MusicLM

Altered Studio transforme des discours enregistrés ou en direct en voix sélectionnées ou personnalisées pour la production médiatique et les appels en temps réel. Son moteur de conversion vocale fonctionne dans le navigateur ou localement sur Windows et Mac, avec une application distincte Real-Time Pro pour les jeux, les centres d'appels et la restauration vocale lors des appels vidéo.

La plupart des changeurs de voix sacrifient la qualité au profit de la latence ou inversement. Altered sépare les fonctions : la transformation pour la production médiatique vise une qualité d'enregistrement sur GPU avec des retouches en post-production, tandis que Real-Time Pro utilise de 1 à 4 cœurs CPU pour des voix à faible latence, la traduction d'accents et le support Euphonia pour la dysphonie et les disfluences.

Les podcasteurs, studios de jeux et équipes de centres d'appels l'utilisent pour doubler des scènes multi-personnages, changer d'accent lors d'appels en direct et nettoyer les dialogues bruyants. La page Studio propose la transcription en plus de 75 langues, la traduction et la synthèse vocale en plus de 70 langues de grands fournisseurs dans un seul éditeur.

MusicLM est un modèle de génération audio de Google Research qui crée de la musique à partir de légendes textuelles à 24 kHz. La page d'exemples publics héberge des extraits pour des invites telles que des bandes-son d'arcade, des fusions reggaeton-EDM et du jazz relaxant, ainsi que des générations plus longues en mode histoire qui changent de style selon des segments temporels. Google a publié le jeu de données MusicCaps de 5 500 paires musique-texte en même temps que l'article.

Contrairement aux applications grand public qui proposent une seule zone de saisie, MusicLM a été publié comme une démo de recherche avec des échantillons pré-générés plutôt qu'un produit nécessitant une connexion. Son astuce principale est la condition conjointe texte et mélodie : vous pouvez fredonner ou siffler un air et le modèle le recompose dans un nouveau genre décrit par texte. Le mode histoire enchaîne plusieurs légendes pour que la musique évolue au fil des sections.

MusicLM est important comme base de recherche derrière les modèles musicaux Lyria ultérieurs de Google, mais cette page sert à écouter des exemples publiés, pas à créer de nouveaux morceaux de manière interactive. Chercheurs et musiciens l'étudient pour la cohérence sur le long terme, la condition peinture-à-musique et les résultats de transfert de mélodie documentés dans l'article de 2023.