DOI QR코드

DOI QR Code

Implementation of Dynamic Projection Mapping Framework based on Gesture Recognition for Stage Performance

무대 공연을 위한 제스처 인식 기반 동적 프로젝션 맵핑 프레임워크 구현

  • Koh, You-Jin (Dept. of Newmedia, Seoul Media Institute of Technology) ;
  • Kim, Tae-Won (Dept. of Newmedia, Seoul Media Institute of Technology) ;
  • Choi, Yoo-Joo (Dept. of Newmedia, Seoul Media Institute of Technology)
  • 고유진 (서울미디어대학원대학교 미디어공학과) ;
  • 김태원 (서울미디어대학원대학교 미디어공학과) ;
  • 최유주 (서울미디어대학원대학교 미디어공학과)
  • Published : 2020.05.29

Abstract

본 논문에서는 미디어영상을 기반한 무대 공연의 다양한 미디어 효과를 분석하고, 무대 공연을 위한 제스처 기반 동적 프로젝션 맵핑 프레임워크를 설계 구현한다. 이를 위하여, 동적 프로젝션 맵핑 기반 기존 공연에서 공연자의 제스처와 이에 따른 미디어 효과를 분석하고, 동적 프로젝션 맵핑기술을 효율적으로 구현하기 위하여 모션 히스토리 이미지를 이용한 CNN(Convolutional Neural Network) 기반의 제스처 인식 기술을 구현한다. 또한, 구현된 제스처인식 기술을 기반으로 공연자의 서로 다른 제스처와 미디어 효과를 매칭시킬 수 있는 프레임 워크 구현 내용을 소개한다.

Keywords