DOI QR코드

DOI QR Code

A Implementation and Performance Analysis of Emotion Messenger Based on Dynamic Gesture Recognitions using WebCAM

웹캠을 이용한 동적 제스쳐 인식 기반의 감성 메신저 구현 및 성능 분석

  • 이원주 (인하공업전문대학 컴퓨터정보과)
  • Received : 2010.03.17
  • Accepted : 2010.04.02
  • Published : 2010.07.31

Abstract

In this paper, we propose an emotion messenger which recognizes face or hand gestures of a user using a WebCAM, converts recognized emotions (joy, anger, grief, happiness) to flash-cones, and transmits them to the counterpart. This messenger consists of face recognition module, hand gesture recognition module, and messenger module. In the face recognition module, it converts each region of the eye and the mouth to a binary image and recognizes wink, kiss, and yawn according to shape change of the eye and the mouth. In hand gesture recognition module, it recognizes gawi-bawi-bo according to the number of fingers it has recognized. In messenger module, it converts wink, kiss, and yawn recognized by the face recognition module and gawi-bawi-bo recognized by the hand gesture recognition module to flash-cones and transmits them to the counterpart. Through simulation, we confirmed that CPU share ratio of the emotion messenger is minimized. Moreover, with respect to recognition ratio, we show that the hand gesture recognition module performs better than the face recognition module.

본 논문에서는 웹캠을 이용하여 사용자의 안면 또는 손동작을 인식하고, 그 제스쳐가 나타내는 감성(희노애락)을 플래시 콘으로 표현하여 상대방에게 전송하는 감성 메신저를 구현한다. 이 메신저는 안면 인식 모듈과 손동작 인식 모듈, 메신저 모듈로 구성된다. 안면 인식 모듈에서는 눈, 입의 각 영역을 이진 영상으로 변환하여 눈과 입의 모양 변화에 따라 윙크, 입맞춤, 하품 등을 인식한다. 또한 손동작 인식 모듈에서는 인식한 손가락 수에 따라 가위-바위-보로 인식한다. 메신저 모듈은 안면 인식 모듈과 손동작 인식 모듈에서 인식한 윙크, 입맞춤, 하품과 가위-바위-보를 플래시 콘으로 표현하여 상대방에게 전달한다. 본 논문에서는 시뮬레이션을 통하여 감성 메신저의 CPU 점유율이 최소임을 검증한다. 또한 감성 메신저의 손동작 인식 모듈의 성능이 안면 인식 모듈에 비해 우수함을 보인다.

Keywords

References

  1. http://ko.wikipedia.org/wiki
  2. 고대식, 박준석, "인스턴트 메신저(Instant Messenger)의 원리 및 응용," 한국통신학회지(정보통신) 제 19권,제2호, 111-120쪽, 2002년 2월.
  3. 한국인터넷진흥원, "2006년 하반기 정보화 실태조사 요약보고서," 2007년 2월.
  4. 정성환, 이문호, "오픈소스 OpenCV를 이용한 컴퓨터 비전 실무 프로그래밍 기본편," 홍릉과학출판사, 2007.
  5. 김건우, 김창현, 이원주, 전창호, "제스쳐 인식 시스템 설계 및 구현(A Design and Implementation of Gesture Recognition System)," 한국컴퓨터정보학회 2008 하계학술발표논문집, 제 16권, 제 1호, 231-235쪽, 2008년 7월.
  6. 김건우, 이원주, 전창호, "웹캠을 이용한 손동작 인식 방법(A Hand Gesture Recognition Scheme using WebCAM)," 2008년도 대한전자공학회 하계종합학술대회 논문집, 제 31권, 제 1호, 619-620쪽, 2008년 6월.
  7. 이원주, 김규림, 최유리, 김민영, 가혜림, 손보라, "산업공정상의 유체 유동 모니터링 시스템 설계," 2010년도 한국컴퓨터정보학회 동계학술대회논문집, 제 18권, 제 1호, 367-370쪽, 2010년 1월.

Cited by

  1. 안전성 확보를 위한 손동작 전화 다이얼링 시스템 vol.13, pp.10, 2010, https://doi.org/10.5762/kais.2012.13.10.4801
  2. 손동작 인식을 이용한 마우스제어기법 vol.15, pp.11, 2010, https://doi.org/10.9717/kmms.2012.15.11.1377