Description
YuE2-3B est un modèle de génération musicale de pointe hébergé sur Hugging Face, conçu pour créer des chansons de haute qualité à partir de paroles et d'indications de style. Il rivalise avec des modèles propriétaires de premier plan tels que Suno v5 et v6, atteignant des résultats à la pointe de la technologie sur des benchmarks tels que WildSongBench. Les utilisateurs peuvent générer des chansons complètes avec voix et accompagnement, et affiner davantage la sortie en modifiant les mélodies et les accords via une partition éditable.
Lire la suite
YuE2-3B propose également un montage agentique, où les utilisateurs peuvent fournir des retours musicaux pour réviser les partitions, les styles et les paroles, permettant un processus de création musicale dynamique et interactif. Le modèle fonctionne localement sur un GPU de 24 Go, produisant des chansons stéréo à 48 kHz sans quantification. Il est construit sur une architecture Mixture-of-Transformers qui écrit des partitions et des tokens sémantiques, générant des latents acoustiques par correspondance de flux, qui sont ensuite convertis en audio stéréo par un VAE.
Le modèle prend en charge l'intégration avec les API de Hugging Face, permettant aux utilisateurs de charger le modèle, d'appliquer des directives textuelles et d'utiliser des API de planification et de synthèse séparées. Les performances de YuE2-3B sont optimisées pour la vitesse, avec une chanson de 3,6 minutes générée en un peu plus d'une minute sur un GPU RTX 4090. La nature open-source du modèle et sa sortie de haute qualité en font un choix attrayant pour les musiciens, compositeurs et développeurs intéressés par la génération musicale alimentée par l'IA.
- CatégorieModèles d'IA et LLM
- Modèle tarifaireOpen source
- DéploiementExécution locale
- PlateformesWeb
Points forts de YuE2-3B
Modèle de génération musicale ouvert
Partition éditable pour mélodie et accords
Capacités de montage agentique
Fonctionne localement sur un GPU de 24 Go
Architecture Mixture-of-Transformers
Intégration avec les API de Hugging Face
Prend en charge les modes uniquement mélodie et planification complète
Sortie audio stéréo de haute qualité
Premiers pas avec YuE2-3B
Accéder au modèle : Visitez Hugging Face
Authentifier : Créer un compte
Configurer l'environnement : Installer les dépendances
Intégrer via API : Utiliser les API de Hugging Face
Optimiser : Ajuster les paramètres pour de meilleures performances
Cas d'utilisation de YuE2-3B
- Composition Musicale
- Édition de Chansons
- Montage Agentique
- Génération Musicale Locale
- Intégration API
