Fantastic AI Sinawi: 심층신경망 기반 국악 선율 작곡을 활용한 시나위 창작

Fantastic AI Sinawi: Composing Korean Traditional Music Using Deep Neural Networks
  • 박한나
  • 한단비내린
  • 오채령
  • 정다샘

초록

본 연구에서는 심층신경망을 이용하여 새로운 국악 선율을 생성하고 이를 활용해 인간과 인공지능 간의 합주 시나위를 완성하는 과정을 소개한다. 국악 선율 생성을 위해 시나위 악보 데이터셋을 수집하고 편집하였으며 이를 이용해 순환신경망 기반의 선율 생성 모델을 학습하였다. 학습 데이터의 부족함을 극복하기 위해 다른 단선율 데이터셋을 이용한 사전학습을 적용하였다. 학습된 모델이 생성한 선율들을 활용하여 하나의 시나위 악곡으로 구성하였고 가상악기를 활용하여 각 악기에 적합한 주법을 적용할 수 있도록 선율을 편집하였다. 이렇게 구성한 반주 파트에 해금 연주자가 선율을 모방하는 즉흥 연주를 함께하여 Fantastic AI Sinawi를 완성하였다. 작품의 시각적인 몰입을 돕기 위해 해금 연주 오디오를 입력으로 받는 실시간 인터랙티브 시각화를 함께 제안하였다.

키워드

국악딥러닝시나위음악 시각화음악 인공지능음악 정보 검색Korean traditional musicDeep learningSinawiMusic visualizationMusic AIMusic information retrieval
제목
Fantastic AI Sinawi: 심층신경망 기반 국악 선율 작곡을 활용한 시나위 창작
제목 (타언어)
Fantastic AI Sinawi: Composing Korean Traditional Music Using Deep Neural Networks
저자
박한나한단비내린오채령정다샘
발행일
2023-04
저널명
디지털컨텐츠학회논문지
24
4
페이지
785 ~ 796