감정 전이와 실시간 얼굴 표정 리타게팅 기술 기반 음악 감상 경험 증진에 관한 연구

초록

음악 청취 중 감정적 경험은 종종 사회적 환경에 의해 촉진된다. 집단 음악 감상에서 청중은 다른 청자의 얼굴 표정과 같은 단서를 기반으로 주위의 사람들과 자신의 감정을 수렴시키는 감정 전이 현상을 경험한다. 본 논문에서는 이러한 감정전이 현상과 실시간 얼굴 표정 리타게팅 기술을 활용한 새로운 음악 감상 시스템을 제안한다. 제안하는 시스템은 음악이 내포한 감정을 표정으로 연기하는 가상 캐릭터와 함께 음악을 감상하는 경험을 제공하는 것을 목적으로 한다. 시스템의 효과성을 검증하기 위하여 20대 대학생 100명을 대상으로 한 실험연구를 진행하였으며 제안하는 시스템이 음악 감상에서 청자에게 더 큰 감정을 유도하는 것으로 나타났다. 이 시스템은 라이브 음악 콘서트 등의 환경에서 실시간으로 상황, 청중에 맞춘 캐릭터 애니메이션을 생성하는 새로운 엔터테인먼트 경험 제공 목적 외에도 악곡 구조 이해를 돕거나 청각장애인들이 음악을 시각적으로 이해하도록 돕는 데 사용될 수 있다.

키워드