Beschreibung
YuE2-3B ist ein hochmodernes Musikgenerierungsmodell, das auf Hugging Face gehostet wird und entwickelt wurde, um hochwertige Lieder aus Texten und Stilvorgaben zu erstellen. Es konkurriert mit führenden proprietären Modellen wie Suno v5 und v6 und erzielt erstklassige Ergebnisse bei Benchmarks wie WildSongBench. Benutzer können vollständige Lieder mit Gesang und Begleitung generieren und das Ergebnis weiter verfeinern, indem sie Melodien und Akkorde über eine bearbeitbare Partitur bearbeiten. Das Modell unterstützt verschiedene Modi, einschließlich nur Melodie und vollständige Melodie- und Akkordplanung, was eine vielseitige Musikproduktion und -bearbeitung ermöglicht.
Weiterlesen
YuE2-3B bietet auch agentisches Editing, bei dem Benutzer musikalisches Feedback geben können, um Partituren, Stile und Texte zu überarbeiten, was einen dynamischen und interaktiven Musikschaffungsprozess ermöglicht. Das Modell läuft lokal auf einer 24-GB-GPU und produziert 48 kHz Stereo-Lieder ohne Quantisierung. Es basiert auf einem Mixture-of-Transformers-Rückgrat, das Partituren und semantische Tokens schreibt und akustische Latents durch Flussanpassung generiert, die dann von einem VAE in Stereo-Audio umgewandelt werden.
Das Modell unterstützt die Integration mit den APIs von Hugging Face, sodass Benutzer das Modell laden, Textanleitungen anwenden und separate Planungs- und Synthese-APIs nutzen können. Die Leistung von YuE2-3B ist auf Geschwindigkeit optimiert, wobei ein 3,6-minütiges Lied in etwas mehr als einer Minute auf einer RTX 4090 GPU generiert wird. Die Open-Source-Natur des Modells und die hochwertige Ausgabe machen es zu einer attraktiven Wahl für Musiker, Komponisten und Entwickler, die an KI-gesteuerter Musikgenerierung interessiert sind.
- KategorieKI-Modelle & LLMs
- PreismodellOpen Source
- BereitstellungLäuft lokal
- PlattformenWeb
YuE2-3B im Überblick
Offenes Musikgenerierungsmodell
Bearbeitbare Partitur für Melodie und Akkorde
Agentische Bearbeitungsfunktionen
Läuft lokal auf 24-GB-GPU
Mixture-of-Transformers-Rückgrat
Integration mit Hugging Face APIs
Unterstützt nur Melodie- und vollständige Planungsmodi
Hochwertige Stereo-Audioausgabe
Erste Schritte mit YuE2-3B
Modell zugreifen: Besuchen Sie Hugging Face
Authentifizieren: Konto einrichten
Umgebung einrichten: Abhängigkeiten installieren
Über API integrieren: Hugging Face APIs verwenden
Optimieren: Einstellungen für beste Leistung anpassen
YuE2-3B's Anwendungsfälle
- Musikkomposition
- Liedbearbeitung
- Agentisches Editing
- Lokale Musikgenerierung
- API-Integration
