DOI QR코드

DOI QR Code

Keyboard Solo System using a Real Time Hand Recognition Method

실시간 손 인식 기법을 인용한 건반 연주 시스템

  • 이은경 (상명대학교 디지털미디어학부) ;
  • 하정희 (상명대학교 디지털미디어학부) ;
  • 서은성 (상명대학교 디지털미디어학부) ;
  • 박소영 (상명대학교 디지털미디어학부) ;
  • 김성훈 (경북대학교 컴퓨터정보학부)
  • Published : 2009.11.30

Abstract

As parents are interested in music education for infants in these days, they require systems to help these infants to actively play music. In this paper, we propose a keyboard solo system using a real time hand recognition method. In order to enable the infants to use the system easily, the proposed system plays some sounds whenever the infants move their fingers on a paper piano. For the purpose of minimizing cost to play music, the proposed system utilizes a general PC with only a paper piano, a web camera, and a speaker. With the aim of precisely and efficiently recognizing both a hand and each key on keyboard, the proposed system divides a recognition step into a hand recognition step and a keyboard recognition step. Also, the hand recognition step considers only skin color, and the keyboard recognition step considers only black and white without other colors.

요즘 부모들이 유아들의 음악 교육에 대해서 관심이 많아지면서, 유아들이 능동적으로 음악을 즐길 수 있도록 지원하는 시스템이 요구되고 있다. 따라서 본 논문에서는 실시간 손 인식 기법을 이용한 건반 연주 시스템을 제안한다. 제안하는 시스템은 유아들이 쉽게 사용할 수 있도록, 종이 건반위에서 손가락을 움직이기만 하면 음원이 재생되어 연주하는 환경을 제공한다. 그리고, 제안하는 시스템은 연주에 필요한 비용을 최소화하기 위해서, 보급형 컴퓨터와 종이건반, 웹 카메라, 스피커만을 이용한다. 또한, 효율적이고 정확하게 건반과 손가락을 인식하기 위해서, 건반 인식 단계와 손가락 인식 단계를 구분한다. 건반 인식 단계에서는 건반을 구성하는 검정색과 흰색만 고려하여 건반을 인식하고, 손가락 인식단계에서 는 피부색만 고려하여 손가락을 인식한다.

Keywords

References

  1. 안성옥, "멀티미디어 정보를 이용한 원격 아동용 음악교육 시스템 개발에 관한 연구", 정보통신 부 최종 연구개발결과보고서, 1998
  2. 유윤봉, 유재홍, 최문기, "디지털 환경 변화에 따른 온라인 음악 사업자 간 경쟁과 업 구조의 변화에 대한 연구", 한국경영정보학회 춘계학술대회 논문집, pp.715-722,2006
  3. 허준혁, 여근, 설창환, 원광연 ,"피아노 교사 시스템의 설계 및 구현", 한국정보과학회 가을 학술발표논문집, Vol.21, No.2, pp.799-802, 1994
  4. 송성훈, "유비쿼터스 컴퓨팅에 의한 유아 교육 환경 구축", 정보과학회논문지:기술교육, 제1권 제1호, pp.45-48, 2004
  5. 깅용우, 양상호, 이상열, 이규민, 이은주, 최미란, 황민철, "Table touch interface를 이용한 감각놀이 시스템 개발", 한국디자인학회, 대한인간공학회, 한국감성과학회 통합 국제학술대회, 2008년
  6. Dr.Gary Rost Bradski, Adrian kaehler, Learning OpenCV, O Reilly Media.Inc, 2008
  7. 강동중, 하은종, visual $C^{+}^{+}$을 이용한 디지털 영상처리, SciTechMcdia, 2003