설명
마젠타 DDSP에서 개발한 톤 전이는 기계 학습을 사용하여 소리를 악기로 변환하는 혁신적인 AI 도구입니다. 이 도구는 사용자가 새의 지저귐과 같은 오디오 입력을 플루트나 색소폰과 같은 음악 출력으로 변환할 수 있게 해줍니다. 톤 전이의 기술은 미분 가능한 디지털 신호 처리(DDSP)를 기반으로 하며, 이는 고전 DSP 요소와 현대 기계 학습 기술을 결합합니다. 이 접근 방식은 도구가 최소한의 데이터로 악기의 톤을 학습할 수 있게 하여 모델을 훈련하는 데 약 10분의 녹음만 필요합니다. 훈련이 완료되면 모델은 몇 초 내에 다른 소리를 출력 악기로 변환할 수 있습니다.
더 읽기
톤 전이는 고품질의 표현력 있는 오디오 합성 모델을 생성하도록 설계되었습니다. 이 도구는 음높이, 톤 및 볼륨 간의 관계를 추출할 수 있어 사용자가 출력 악기에서 불가능한 멜로디를 연주할 수 있게 합니다. 예를 들어, 색소폰은 버튼에 존재하지 않는 음을 연주할 수 있고, 플루트는 새의 지저귐을 흉내낼 수 있습니다. 이 도구는 바이올린의 활 소리나 플루티스트의 숨소리와 같은 연주 세부 사항도 재합성합니다.
이 도구는 구글 리서치 프로젝트인 마젠타의 오픈 소스 DDSP 라이브러리를 기반으로 구축되었습니다. 장치 내 기계 학습을 지원하여 실시간 오디오 합성을 가능하게 합니다. 사용자는 인터랙티브 웹 경험을 통해 또는 디지털 오디오 워크스테이션을 위한 VST 플러그인으로 톤 전이를 경험할 수 있습니다. 이 프로젝트는 음악가, 연구원, 엔지니어 및 디자이너의 협력 노력으로, 창의적 과정을 확장하는 것을 목표로 하고 있습니다.
톤 전이는 새로운 소리와 작곡을 실험하고자 하는 음악가, 작곡가 및 사운드 디자이너에게 적합합니다. AI를 활용하여 전통적인 음악 제작의 경계를 넓히는 독특한 음악 창작 방법을 제공합니다.
- 카테고리AI 음악 생성기
- 요금제무료
- 배포클라우드
- 플랫폼웹
톤 전이의 핵심 기능
소리를 악기로 변환
미분 가능한 디지털 신호 처리(DDSP) 사용
훈련 데이터가 10분만 필요
실시간 오디오 합성
연주 세부 사항 재합성
오픈 소스 DDSP 라이브러리
장치 내 기계 학습 지원
인터랙티브 웹 경험 및 VST 플러그인
톤 전이 사용 방법은?
구성: 입력 및 출력 악기 선택
사용: 변환할 오디오 업로드
최적화: 음높이 및 볼륨 설정 조정
실험: 다양한 소리 변환 탐색
톤 전이의 사용 사례
- 소리 변환
- 음악 작곡
- 사운드 디자인
- 교육 도구
- 라이브 공연
