DOI QR코드

DOI QR Code

Sign Language Translation System Development Using MediaPipe

MediaPipe를 활용한 수어 번역 시스템 개발

  • Kim, Kyung-Min (School of Information and Communication Science, Semyung University) ;
  • Song, Mi-Hwa (School of Smart IT, Semyung University)
  • 김경민 (세명대학교 정보통신학부) ;
  • 송미화 (세명대학교 스마트IT학부)
  • Published : 2022.11.21

Abstract

다양한 언어로 소통하고 있는 우리는 다른 언어와 교류하기 위해 번역, 통역의 존재가 필수가 되기도 한다. 하지만 음성언어를 사용하지 않는 즉, 손으로 언어를 표현하는 수어를 번역하는 통역의 존재는 아직 실현되지 않았다. 이에 본 논문에서는 MediaPipe와 OpenCV 라이브러리를 이용하여 손의 형태를 인식하고 CNN 알고리즘을 통한 텍스트 데이터화 하여 수어 동작을 학습시켜 이를 번역시켜주는 시스템을 연구한다. 이를 통해 공공기관을 이용함에 불편함을 줄이고, 농인의 의사를 보다 빠르게 파악할 수 있도록 도와주는 번역 시스템 제작하는 것에 목적이 있다.

Keywords