Proceedings of the Korean Society of Computer Information Conference (한국컴퓨터정보학회:학술대회논문집)
- 2023.07a
- /
- Pages.453-454
- /
- 2023
Sign Language Translation Wearable Device Using Motion Recognition
모션 인식을 이용한 수화 번역 웨어러블 기기
- Jun-yeong Lee (School Of Software, Kyungwoon University) ;
- Hyeon-su Kang (School Of Software, Kyungwoon University) ;
- Sung-jun Kim (School Of Software, Kyungwoon University) ;
- Jun-ho Son (School Of Software, Kyungwoon University) ;
- Dong-jun Yoo (School Of Software, Kyungwoon University) ;
- Yang-woo Park (School Of Software, Kyungwoon University)
- 이준영 (경운대학교 소프트웨어학부) ;
- 강현수 (경운대학교 소프트웨어학부) ;
- 김성준 (경운대학교 소프트웨어학부) ;
- 손준호 (경운대학교 소프트웨어학부) ;
- 유동준 (경운대학교 소프트웨어학부) ;
- 박양우 (경운대학교 소프트웨어학부)
- Published : 2023.07.12
Abstract
현재 선천적인 청각장애인이나 언어 장애가 있는 사람은 다른 사람과의 대화에 많은 불편을 겪고 있다. 매장을 이용하기 어려움은 물론 언어전달 능력이 떨어지기 때문에 간단한 의사소통을 통한 서로 간의 교류 또한 불편함을 감수해야 한다. 현재는 따로 디스플레이가 내장된 장치를 이용하여 지정된 장소에서 수화를 번역해야 하는 불편함을 해당 문제 해결을 위해 본 연구에서는 딥러닝을 적용하여 수화를 인식하고 번역하여 디스플레이에 텍스트를 출력해주는 시스템을 개발하였다. AI 프레임워크 MediaPipe와 SVM 알고리즘을 라즈베리파이에 적용하여 구현하였다. 개발한 시스템은 제스처에 대한 번역 결과를 제공한다. 기존의 지정된 장소가 아닌 대화가 필요한 모든 장소에서 번역이 가능하도록 개선하여 청각장애인과 언어장애가 있는 사람들과 소통의 불편함을 줄일 수 있을 것으로 기대할 수 있다.