DOI QR코드

DOI QR Code

Design for Mood-Matched Music Based on Deep Learning Emotion Recognition

딥러닝 감정 인식 기반 배경음악 매칭 설계

  • Chung, Moonsik (Dept. of Convergence Engineering, Hoseo Graduate School of Venture) ;
  • Moon, Nammee (Dept. of Convergence Engineering, Hoseo Graduate School of Venture)
  • 정문식 (호서대학교 벤처대학원 융합공학과) ;
  • 문남미 (호서대학교 벤처대학원 융합공학과)
  • Published : 2021.11.04

Abstract

멀티모달 감정인식을 통해 사람의 감정을 정확하게 분류하고, 사람의 감정에 어울리는 음악을 매칭하는 시스템을 설계한다. 멀티모달 감정 인식 방법으로는 IEMOCAP(Interactive Emotional Dyadic Motion Capture) 데이터셋을 활용해 감정을 분류하고, 분류된 감정의 분위기에 맞는 음악을 매칭시키는 시스템을 구축하고자 한다. 유니모달 대비 멀티모달 감정인식의 정확도를 개선한 시스템을 통해 텍스트, 음성, 표정을 포함하고 있는 동영상의 감성 분위기에 적합한 음악 매칭 시스템을 연구한다.

Keywords

Acknowledgement

이 성과는 정부(과학기술정보통신부)의 재원으로 한국연구재단의 지원을 받아 수행된 연구임(No.2021R1A2C2011966).