Acknowledgement
본 논문은 과학기술정보통신부 정보통신창의인재양성사업의 지원을 통해 수행한 ICT멘토링 프로젝트 결과물입니다
Proceedings of the Korea Information Processing Society Conference (한국정보처리학회:학술대회논문집)
- 2021.11a
- /
- Pages.1128-1131
- /
- 2021
- /
- 2005-0011(pISSN)
- /
- 2671-7298(eISSN)
DOI QR Code
Development of an interactive smart cooking service system using behavior and voice recognition
행동 및 음성인식 기술을 이용한 대화형 스마트 쿠킹 서비스 시스템 개발
- Moon, Yu-Gyeong (Dept. of Applied Statistics, Yonsei University) ;
- Kim, Ga-Yeon (Dept. of Applied Statistics, Yonsei University) ;
- Kim, Yoo-Ha (Dept. of Applied Statistics, Yonsei University) ;
- Park, Min-Ji (Dept. of Applied Statistics, Yonsei University) ;
- Seo, Min-Hyuk (Dept. of Computer Science, Yonsei University) ;
- Nah, Jeong-Eun (University College, Yonsei University)
- 문유경 (연세대학교 응용통계학과) ;
- 김가연 (연세대학교 응용통계학과) ;
- 김유하 (연세대학교 응용통계학과) ;
- 박민지 (연세대학교 응용통계학과) ;
- 서민혁 (연세대학교 컴퓨터과학과) ;
- 나정은 (연세대학교 학부대학)
- Published : 2021.11.04
Abstract
COVID-19로 인한 홈 쿠킹 시장 수요 증가로 사람들은 더 편리한 요리 보조 시스템을 필요로 하고 있다. 기존 요리 시스템은 휴대폰, 책을 통해 레시피를 일방적으로 제공하기 때문에 사용자가 요리과정을 중단하고 반복적으로 열람해야 한다는 한계점을 가진다. '대화형 스마트 쿠킹 서비스' 시스템은 요리 과정 전반에서 필요한 내용을 사용자와 상호작용하며 적절하게 인지하고 알려주는 인공지능 시스템이다. Google의 MediaPipe를 사용해 사용자의 관절을 인식하고 모델을 학습시켜 사용자의 요리 동작을 인식하도록 설계했으며, dialogflow를 이용한 챗봇 기능을 통해 필요한 재료, 다음 단계 등의 내용을 실시간으로 제시한다. 또한 실시간 행동 인식으로 요리과정 중 화재, 베임 사고 등의 위험 상황을 감지하여 사용자에게 정보를 전달해줌으로써 사고를 예방한다. 음성인식을 통해 시스템과 사용자 간의 쌍방향적 소통을 가능하게 했고, 음성으로 화면을 제어함으로써 요리과정에서의 불필요한 디스플레이 터치를 방지해 위생적인 요리 환경을 제공한다.
Keywords