http://chineseinput.net/에서 pinyin(병음)방식으로 중국어를 변환할 수 있습니다.
변환된 중국어를 복사하여 사용하시면 됩니다.
DDSP 를 활용한 현대 악기 샘플을 기반 전통 악기의 음색 표현
권유상(Yousang Kwon),변종훈(Jonghoon Byun),김선욱(Seonuk Kim),고태영(Taeyoung Ko),윤주혁(Juhyeok Yoon),이경호(Kyungho Lee) 한국HCI학회 2024 한국HCI학회 학술대회 Vol.2024 No.1
2020 년 구글의 마젠타 팀은 기존의 디지털 신호처리과정(DSP)을 미분가능한 단위로 해석하고 표현해 고품질 오디오 분석 및 합성이 가능하게 하는 Differential DSP (DDSP)[1] 라이브러리를 발표하였다. 본 연구는 DDSP 를 이용해 서로 비슷한 음색을 가진 서양악기들이 아닌, 서양악기 샘플을 입력으로, 우리 전통악기 중 하나인 거문고 소리의 합성값을 출력으로 얼마나 잘 생성할 수 있는지에 관한 탐색적 연구를 진행하였다. 먼저, 2 시간 분량의 국립국악원 거문고의 음조와 음색 데이터를 DDSP 를 통해 학습시켰다. 이후, 39 가지 서양악기를 이용해 국악에서 널리 쓰이는 5 음계인 중,임,무,황,태 샘플들을 생성했다. 합성결과의 음악적 특성이 얼마나 원음과 유사한지 비교하기 위해 서울대학교 예술과학센터에서 실제 거문고 소리를 녹음해 만든 5 음계 샘플과 DDSP 를 통해 생성한 샘플 간의 품질차이를 분석하였다. 비교를 위해 MFCC 를 특징집합으로 한 39 개 서양악기의 5 음계 샘플과 거문고 원음의 5 음계샘플 간의 유클리드 거리를 계산하였다. 이를 통해 DDSP 가 거문고와 같은 전통악기의 음색 합성을 사용할 수 있는지, 가능하다면 어떤 조건에서 더 좋은 결과가 생성되는지를 분석하고 시사점을 논의하였다.