ChatTTS vs Dubbing AI

ChatTTS est un modèle de synthèse vocale open-source conçu pour le dialogue. L'équipe 2Noise l'a entraîné sur plus de 100 000 heures de speech en chinois et en anglais, afin qu'il sonne de manière naturelle dans les conversations en échange, et pas seulement en narration scriptée.

Ce qui le distingue, c'est le contrôle de la prosodie à un niveau granulaire. Le modèle peut ajouter des rires, des pauses et des interjections, et il gère plusieurs locuteurs lors d'une même session. Cela en fait un outil adapté pour les assistants LLM, l'audio conversationnel et les médias interactifs riches en dialogue.

Les développeurs l'installent via pip ou en clonant le dépôt GitHub. La version open-source sur Hugging Face est un modèle de base de 40 000 heures sous licence AGPLv3+. L'équipe le présente comme étant destiné à la recherche et aux cas d'usage liés au dialogue, avec un contact à [email protected] pour toute question sur la feuille de route.

Dubbing AI transforme votre voix en temps réel pour le jeu, le streaming, les appels en ligne et la création de contenu. Il propose plus de 500 personnages vocaux uniques, incluant des personas populaires de jeux et d'animes, des célébrités, ainsi que des voix originales, accessibles sur Windows, macOS, iOS et Android.

Ce qui distingue Dubbing AI, c'est sa faible consommation de CPU de seulement 2-3 %, fonctionnant entièrement sur le CPU sans dépendre du GPU, ce qui garantit des performances fluides sans lag. Il prend en charge plus de 40 langues et dialectes locaux avec des expressions émotionnelles telles que crier, soupirer et chuchoter, rendant les transformations vocales naturelles et expressives.

L'outil s'intègre parfaitement avec des plateformes telles que Discord, Zoom, Twitch, OBS, ainsi que des jeux populaires comme League of Legends, Valorant, Fortnite et Roblox. Il inclut un tableau de sons personnalisable et une bibliothèque sonore communautaire pour partager des effets sonores viraux. Parmi ses fonctionnalités supplémentaires : clonage vocal, changeur de voix en ligne accessible via navigateur, et des outils alimentés par IA tels que la suppression vocale et instrumentale, des convertisseurs audio, et un enregistreur vocal.

Les utilisateurs mobiles profitent de l'application mobile Dubbing AI et des écouteurs à changement de voix en temps réel, permettant de transformer la voix lors des appels, streams et jeux en déplacement. Les développeurs peuvent intégrer la fonction de changement de voix dans leurs propres produits grâce au SDK et aux services API fournis.

Dubbing AI traite toutes les données vocales localement sur l'appareil de l'utilisateur, garantissant la confidentialité en évitant la transmission vers des serveurs externes. Le logiciel est gratuit au téléchargement avec un modèle freemium qui propose chaque jour des voix gratuites et offre des abonnements pour un accès complet, offrant une expérience de transformation vocale polyvalente et conviviale sur plusieurs appareils et plateformes.