Implementation to human-computer interface system with motion tracking using OpenCV

OpenCV를 이용한 눈동자 모션인식을 통한 의사소통 시스템 구현

  • Heo, Seung Won (Dept. of Electrical, Electronic, Control Eng. and IITC, Hankyong National University) ;
  • Lee, Seung Jun (Dept. of Electrical, Electronic, Control Eng. and IITC, Hankyong National University) ;
  • Lee, Hee Bin (Dept. of Electrical, Electronic, Control Eng. and IITC, Hankyong National University) ;
  • Yu, Yun Seop (Dept. of Electrical, Electronic, Control Eng. and IITC, Hankyong National University)
  • 허승원 (한경대학교 전기전자제어공학과, IITC) ;
  • 이승준 (한경대학교 전기전자제어공학과, IITC) ;
  • 이희빈 (한경대학교 전기전자제어공학과, IITC) ;
  • 유윤섭 (한경대학교 전기전자제어공학과, IITC)
  • Published : 2018.05.31

Abstract

In this abstract, introduces a system that enables communication by tracking the pupils of Lou Gehrig's disease patients who are unable to move their bodies. Face and eye pupil tracking perform using OpenCV, and eye movement recognition and character selection by eye movement is obtained using Python. In this paper, you will use the webcams, track your eyes, determine eye movements based on the coordinates of your pupils, and print characters that meet your preferences. It can easily output text messages using Bluetooth.

본 논문은 OpenCV를 이용해서 몸을 움직이지 못하는 루게릭병 환자들을 위해 동공을 추적하여 의사소통하는 시스템을 소개한다. OpenCV를 이용한 얼굴 및 눈동자 추적과, Python환경에서 눈의 움직임 검출과 문자를 출력한다. 본 논문에서는 웹캠을 사용하고 눈동자를 추적하고 눈동자의 좌표 값에 따라 눈동자의 움직임을 파악하고 사용자의 의도에 맞는 문자를 출력한다. 누구나 쉽게 접근할 수 있는 블루투스를 이용하여 핸드폰으로 쉽게 문자를 출력할 수 있는 시스템을 제안한다.

Keywords