Descripción
YuE2-3B es un modelo de generación musical de vanguardia alojado en Hugging Face, diseñado para crear canciones de alta calidad a partir de letras y estilos. Compite con modelos propietarios líderes como Suno v5 y v6, logrando resultados de última generación en benchmarks como WildSongBench. Los usuarios pueden generar canciones completas con voces y acompañamiento, y refinar aún más la salida editando melodías y acordes a través de una partitura editable. El modelo admite varios modos, incluyendo solo melodía y planificación completa de melodía y acordes, lo que permite una creación y edición musical versátil.
Leer más
YuE2-3B también ofrece edición agentiva, donde los usuarios pueden proporcionar retroalimentación musical para revisar partituras, estilos y letras, lo que permite un proceso de creación musical dinámico e interactivo. El modelo se ejecuta localmente en una GPU de 24GB, produciendo canciones estéreo de 48 kHz sin cuantización. Está construido sobre una arquitectura de Mixture-of-Transformers que escribe partituras y tokens semánticos, generando latentes acústicos a través de coincidencia de flujo, que luego se convierten en audio estéreo mediante un VAE.
El modelo admite integración con las APIs de Hugging Face, permitiendo a los usuarios cargar el modelo, aplicar orientación textual y utilizar APIs de planificación y síntesis separadas. El rendimiento de YuE2-3B está optimizado para velocidad, generando una canción de 3.6 minutos en poco más de un minuto en una GPU RTX 4090. La naturaleza de código abierto del modelo y su salida de alta calidad lo convierten en una opción atractiva para músicos, compositores y desarrolladores interesados en la generación musical impulsada por IA.
- CategoríaModelos de IA y LLM
- Modelo de preciosCódigo abierto
- ImplementaciónSe ejecuta en local
- PlataformasWeb
Aspectos destacados de YuE2-3B
Modelo de generación musical abierto
Partitura editable para melodía y acordes
Capacidades de edición agentiva
Se ejecuta localmente en GPU de 24GB
Arquitectura de Mixture-of-Transformers
Integración con APIs de Hugging Face
Admite modos solo melodía y planificación completa
Salida de audio estéreo de alta calidad
Primeros pasos con YuE2-3B
Acceder al modelo: Visitar Hugging Face
Autenticarse: Configurar cuenta
Configurar el entorno: Instalar dependencias
Integrar a través de API: Usar APIs de Hugging Face
Optimizar: Ajustar configuraciones para el mejor rendimiento
Casos de uso de YuE2-3B
- Composición Musical
- Edición de Canciones
- Edición Agentiva
- Generación Musical Local
- Integración API
