Descrição
YuE2-3B é um modelo de geração musical de ponta hospedado no Hugging Face, projetado para criar canções de alta qualidade a partir de letras e prompts de estilo. Ele compete com modelos proprietários líderes como Suno v5 e v6, alcançando resultados de última geração em benchmarks como WildSongBench. Os usuários podem gerar canções completas com vocais e acompanhamento, e refinar ainda mais a saída editando melodias e acordes através de uma partitura editável.
Ler mais
YuE2-3B também oferece edição agente, onde os usuários podem fornecer feedback musical para revisar partituras, estilos e letras, permitindo um processo de criação musical dinâmico e interativo. O modelo roda localmente em uma GPU de 24GB, produzindo canções estéreo de 48 kHz sem quantização. É construído sobre uma estrutura de Mixture-of-Transformers que escreve partituras e tokens semânticos, gerando latentes acústicos através de correspondência de fluxo, que são então convertidos em áudio estéreo por um VAE.
O modelo suporta integração com as APIs do Hugging Face, permitindo que os usuários carreguem o modelo, apliquem orientação de texto e utilizem APIs de planejamento e síntese separadas. O desempenho do YuE2-3B é otimizado para velocidade, com uma canção de 3,6 minutos gerada em pouco mais de um minuto em uma GPU RTX 4090. A natureza de código aberto do modelo e sua saída de alta qualidade o tornam uma escolha atraente para músicos, compositores e desenvolvedores interessados na geração musical impulsionada por IA.
- CategoriaModelos de IA e LLMs
- Modelo de preçosCódigo aberto
- ImplantaçãoRoda localmente
- PlataformasWeb
Destaques de YuE2-3B
Modelo de geração musical aberto
Partitura editável para melodias e acordes
Capacidades de edição agente
Roda localmente em GPU de 24GB
Estrutura de Mixture-of-Transformers
Integração com APIs do Hugging Face
Suporta modos apenas de melodia e planejamento completo
Saída de áudio estéreo de alta qualidade
Primeiros passos com YuE2-3B
Acessar modelo: Visite o Hugging Face
Autenticar: Configurar conta
Configurar ambiente: Instalar dependências
Integrar via API: Usar APIs do Hugging Face
Otimizar: Ajustar configurações para melhor desempenho
Casos de uso de YuE2-3B
- Composição Musical
- Edição de Canções
- Edição Agente
- Geração Musical Local
- Integração de API
