설명
YuE2-3B는 Hugging Face에 호스팅된 최첨단 음악 생성 모델로, 가사와 스타일 프롬프트로부터 고품질의 노래를 생성하도록 설계되었습니다. Suno v5 및 v6와 같은 주요 상용 모델과 경쟁하며, WildSongBench와 같은 벤치마크에서 최첨단 결과를 달성합니다. 사용자는 보컬과 반주가 포함된 완전한 노래를 생성하고, 편집 가능한 악보를 통해 멜로디와 코드를 수정하여 출력을 더욱 세밀하게 조정할 수 있습니다. 이 모델은 멜로디 전용 및 전체 멜로디와 코드 계획을 포함한 다양한 모드를 지원하여 다재다능한 음악 생성 및 편집이 가능합니다.
더 읽기
YuE2-3B는 또한 사용자가 음악적 피드백을 제공하여 악보, 스타일 및 가사를 수정할 수 있는 에이전틱 편집 기능을 제공합니다. 이는 동적이고 상호작용적인 음악 생성 프로세스를 가능하게 합니다. 이 모델은 24GB GPU에서 로컬로 실행되며, 양자화 없이 48 kHz 스테레오 노래를 생성합니다. 이 모델은 악보와 의미 토큰을 작성하는 Mixture-of-Transformers 백본을 기반으로 하며, 흐름 일치를 통해 음향 잠재 변수를 생성하고, 이를 VAE를 통해 스테레오 오디오로 변환합니다.
이 모델은 Hugging Face의 API와 통합을 지원하여 사용자가 모델을 로드하고 텍스트 가이드를 적용하며 별도의 계획 및 합성 API를 활용할 수 있습니다. YuE2-3B의 성능은 속도를 최적화하여 RTX 4090 GPU에서 3.6분 길이의 노래를 단 1분 이상 만에 생성합니다. 이 모델의 오픈 소스 특성과 고품질 출력은 AI 기반 음악 생성에 관심이 있는 음악가, 작곡가 및 개발자에게 매력적인 선택이 됩니다.
- 카테고리AI 모델 및 LLM
- 요금제오픈소스
- 배포로컬 실행
- 플랫폼웹
YuE2-3B 하이라이트
오픈 음악 생성 모델
멜로디와 코드를 위한 편집 가능한 악보
에이전틱 편집 기능
24GB GPU에서 로컬 실행
Mixture-of-Transformers 백본
Hugging Face API와 통합
멜로디 전용 및 전체 계획 모드 지원
고품질 스테레오 오디오 출력
YuE2-3B 시작하기
모델 접근: Hugging Face 방문
인증: 계정 설정
환경 설정: 종속성 설치
API를 통한 통합: Hugging Face API 사용
최적화: 최상의 성능을 위한 설정 조정
YuE2-3B의 사용 사례
- 음악 작곡
- 노래 편집
- 에이전틱 편집
- 로컬 음악 생성
- API 통합
