DOI QR코드

DOI QR Code

A Sign Language Translator using Data Mining in Kinect Environment

키넥트 환경에서 데이터 마이닝을 이용한 수화 번역기

  • Lee, Sang-Jun (School of Computer Science & Engineering, Soong-Sil University) ;
  • Woo, Tea-Ho (School of Computer Science & Engineering, Soong-Sil University) ;
  • Kim, Jia (School of Computer Science & Engineering, Soong-Sil University) ;
  • Park, Seon-Yeong (School of Computer Science & Engineering, Soong-Sil University) ;
  • Lee, Soo-Won (School of Computer Science & Engineering, Soong-Sil University) ;
  • Kim, Gye-Young (School of Computer Science & Engineering, Soong-Sil University)
  • Published : 2012.11.22

Abstract

본 연구에서는 키넥트(Kinect) 센서를 통해 수화 동작에서 손의 좌표와 이동방향을 추출하여 속성으로 하고, 데이터 마이닝의 분류 기법을 통해 수화를 인식하여 그 결과를 한글 텍스트로 번역해주는 소프트웨어를 개발한다. 제안 방법의 1단계에서는 0.05초 단위로 추출한 손의 좌표만을 속성으로 한다. 2단계에서는 개개인의 특성 및 화면상의 위치와 같은 요소에 따라 좌표 값이 달라지기 때문에, 손의 움직임에서 변위를 추출하여 손이 움직이는 방향을 속성으로 한다. 하지만 비슷한 방향으로 움직이는 수화가 있을 경우 수화의 구분이 어려우므로 3단계에서는 손의 좌표, 방향 두 가지를 분류하는 속성으로 사용한다. 향후 연구 방향은 수화의 중요한 요소인 손의 위치를 속성으로 추가시키고, 데이터 마이닝의 부스팅(Boosting) 기법을 적용하여 인식률을 높이는 것이다.

Keywords