DOI QR코드

DOI QR Code

Online Monitoring System based notifications on Mobile devices with Kinect V2

키넥트와 모바일 장치 알림 기반 온라인 모니터링 시스템

  • Received : 2016.05.19
  • Accepted : 2016.06.08
  • Published : 2016.06.30

Abstract

Kinect sensor version 2 is a kind of camera released by Microsoft as a computer vision and a natural user interface for game consoles like Xbox one. It allows acquiring color images, depth images, audio input and skeletal data with a high frame rate. In this paper, using depth image, we present a surveillance system of a certain area within Kinect's field of view. With computer vision library(Emgu CV), if an object is detected in the target area, it is tracked and kinect camera takes RGB image to send it in database server. Therefore, a mobile application on android platform was developed in order to notify the user that Kinect has sensed strange motion in the target region and display the RGB image of the scene. User gets the notification in real-time to react in the best way in the case of valuable things in monitored area or other cases related to a reserved zone.

키넥트 센서 버전 2는 컴퓨터 비전과 엑스 박스와 같은 엔유아이 인터페이스로 마이크로소프트에서 출시한 카메라의 일종이다. 이는 높은 프레임 속도로 컬러 영상과 깊이 영상, 오디오 입력 및 스켈레톤 데이터를 취득 할 수 있다. 이러한 다양한 타입의 데이터 정보를 제공해 주기 때문에 이것은 다른 범위의 연구자들을 위한 리소스가 된다. 본 논문에서는 깊이 이미지를 사용하여 우리는 키넥트 범위내에서 특정 영역을 감시하는 시스템을 제시한다. 타켓 영역은 깊이의 최소, 최대 값의 크기에 따라서 그 공간을 모니터링 할 수 있다. 컴퓨터 비전 라이브러리 (Emgu CV)를 사용해서 만약 어떤 오브젝트가 타겟 영역에서 검출된다면 그것을 추적하고 키넥트 카메라는 RGB 이미지를 데이터베이스 서버에 전송한다. 따라서 안드로이드 플랫폼 기반 모바일 애플리케이션을 통해 키넥트 타켓 지역에서 수상한 움직임이 감지되었음을 사용자에게 통지하고 그 장면의 RGB 영상을 표시하기 위해 개발되었다. 사용자는 모니터링 영역 또는 제한 구역과 관련된 다른 경우에서 가치 있는 물건의 대해 최선의 방법으로 반응하고 실시간 통지를 얻는다.

Keywords

References

  1. Security Camera & Video Surveillance Systems Experts. DVR (Digital video recorder) Management [internet]. Available: http://www.videosurveillance.com/cctv-technlogy/intro-to-cc tv.asp.
  2. SKJM, LLC. Icam Help: Overview on Icam [Internet]. Available: http://skjm.com/help
  3. D. Pagliari and L. Pinto.(2015, October). Calibration of kinect for Xbox One Comparison between the two Generations of Microsoft sensors. Sensors 2015[Online]. ISSN 1424-8220, pp.27569-27589. Available:www.mdpi.com/journal/sensors .
  4. H. Sarbolandi, D. Lefloch and A. Kolb.(2015, October). Kinect Range Sensing: Structured- Light versus Time-of-Flight kinect. Computer Vision and Image Understanding [Online]. vol. 139, pp.1-20. Available: http://www.sciencedirect.com/science/article/pii/S1077314215001071.
  5. D. Zoltowski. Creating Windows Application with Kinect Functionality [Internet]. Available: http//www.egr.msu.edu/classes/ece480/capstone/spring15/group02/assets/docs/dzappnote.pdf.
  6. L. Yang, L. Zhang, H. Dong, A. Alelaiwi and A. Saddik, "Evaluating and Improving the Depth Accuracy of Kinect for Windows v2," IEEE Sensor Journal, vol. 15, no. 8, pp. 4275-4285, Aug. 2015 . https://doi.org/10.1109/JSEN.2015.2416651
  7. H. A. ALABBASI, F. Moldovenau, A. Moldovenau and Z. Shhedi, "Facial Emotion Expressions Recognition With Brain Activities using Kinect sensor v2," International Research Journal of Engineering and Technology(IRJET), vol. 2, no. 2, pp.421-428, May 2015.
  8. E. Klimczak. Blob Tracking :Kinect+OpenCV+WPF [Internet]. Available: http://blogs.claritycon.com/blog/2012/11/blob-tracking-kinect-opencv-wpf/.
  9. R. Tamada. Android Push Notifications using Google Cloud Messaging (GCM), PHP and MySQL [Internet]. Available: http://www.androidhive.info/2012/10/android-push-notifications-using-google-cloud-messaging-gcm-php-and-mysql/.