3-D Facial Motion Estimation Using Iterative Extended Kalman Filter

반복적 확장 칼만 필터를 이용한 얼굴의 3차원 움직임량 추정

  • Published : 2001.02.01

Abstract

컴퓨터 시각 인식 방법을 이용하여 얼굴의 3차원 움직임 량을 추정하고자 하는 연구는 가상 현실 환경에서 얼굴 움직임에 의한 3차원 그래픽 화면 조정, 시뮬레이터에서의 훈련자 얼굴 움직임에 의한 화면 조정 및 모니터상의 시선 위치 파악 등을 위해 필수적으로 요구되는 기술로서 최근 활발히 연구되고 있다. 기존에 얼굴의 3차원 움직임 량을 추정하고자 하는 연구들은 대부분 확장 칼만 필터(extended kalman filter)를 이용하였으나, 이러한 방법은 필터의 초기 값을 정확하게 설정해야하는 제약 요소를 갖고 있으며, 또한 얼굴의 회전 방향 변화 시 이에 대처하지 못하는 경우 역시 종종 발생한다. 본 논문에서는 이러한 문제점을 해결하기 위하여 확장 칼만 필터의 변형 형태인 반복적 확장 칼만 필터를 이용하여 얼굴의 3차원 움직임 량을 추정하였다. 반복적 확장 칼만 필터에서는 확장 칼만 필터에서 계산되어 나오는 추정 오차 공분산 행렬 값이 미리 정해진 임계치보다 커지는 경우, 현재 얼굴의 움직임 량을 제대로 추정하지 못하고 있는 것으로 판단하여 칼만 필터에서 사용하는 회전 및 이동 속도, 그리고 회전 및 이동 각 속도를 변형함으로써 얼굴의 움직임 량을 정확하게 추정할 수 있도록 하는 방법이다. 실험 결과 반복적 확장 칼만 필터를 사용하였을 경우에 얼굴의 급격한 회전 방향 변화에도 얼굴의 3차원 움직임 량을 정확하게 추정할 수 있음을 알 수 있었다.

Keywords

References

  1. Jaihie Kim, Kang Ryoung Park, Jeoung Jun Lee, S.R.leClair, 'Intelligent Process Control via Gaze Detection Technology,' Engineering Applicatinons of Artificial Intelligence Vol.13, No.5 August 2000, pp.577-537 https://doi.org/10.1016/S0952-1976(00)00037-3
  2. Ming XU, Takao AKATSUKA, 'Detecting. Head Pose from Stereo Image Sequence for Active Face Recognition,' Proc. of International Conf. Automatic Face and Gesture Recognition, pp.82-87, 1998 https://doi.org/10.1109/AFGR.1998.670929
  3. T. Horprasert, Y. Yacoob, and L.S. Davis., 'Computing 3-D Head Orientation from a Monocular Image Sequence,' Proc. of International Conf. Automatic Face and Gesture Recognition, pp.242-247, 1996 https://doi.org/10.1109/AFGR.1996.557271
  4. T. Fukuhara, T. Murakami, '3D-motion estimation of human head for model-based image coding,' IEE Proc., Vol.140, No.1, pp.26-35, 1993
  5. Andrew Gee and Roberto Cipolla, 'Fast visual tracking by temporal consensus,' Image and Vision Computing, Vol.14, pp.105-114, 1996 https://doi.org/10.1016/0262-8856(95)01044-0
  6. Ted J. Broida and Rama Chellappa, 'Estimation of object motion parameters from noisy image,' IEEE Trans. Pattern Analysis and Machine Intelligence, 8(1) : 90-99, Jan 1986
  7. Ted J. Broida and Rema Chellappa, 'Estimating the kinematics and structures of a rigid object from a sequence of monocular images,' IEEE Trans. Pattern Analysis and Machine Intelligence, 8(1) : 90-99, Jan 1986
  8. Robert Grover Brown and Patric Y. C. Hwang, Introduction to Random Signal Analysis and Kalman Filtering, John Wiley & Sons, New York, 1997
  9. SimonHaykin, Adaptive filter theory, Prentice hall international editions 1996
  10. Mohinder S. Grewal Angus P. Andrews, Kalman Filtering Theory and practice, Prentice Hall Press 1993
  11. A. Azarbayeyani. T. Starner. B. Horowitz. A. Pentland, 'Visually Controlled Graphics,' IEEE Trans. Pattern Analysis and Machine Intelligence, Vol.15. No.6, pp.602-605, June 1993 https://doi.org/10.1109/34.216730
  12. Ali Azarbayejani and Alex P. Pentland, 'Recursive Estimation of Motion, Structure, and Focal Length,' IEEE Trans. Pattern Analysis and Machine Intelligence, Vol.17, No.6, June 1995 https://doi.org/10.1109/34.387503
  13. A. Azerbayejani, B. Horowitz, and Alex P. Pentland, 'Recursive Estimation of Structure and Motion using Relative Orientation Constraints,' 1993 IEEE Conf. on CVPR IEEE Computer Society Press, pp.294-299, June 1993 https://doi.org/10.1109/CVPR.1993.340966
  14. Ted J. Broida and Rama Chellappa, 'Recursive estimation of 3D motion from a monocular image sequence,' IEEE Trans. Aerospace and Electronics Systems, Vol.26, No.4, pp.639-656, July 1990 https://doi.org/10.1109/7.55557
  15. Maybeck, P. S., 'Stochastic Models, Estimation, and Control, Vol.2, New York : Academic Press, 1922
  16. Gem-sun J. Young and Rama Chellappa, '3-D Motion Estimation Using a Sequence of Noisy Stereo Images : Models, Estimation, and Uniqueness Results.s https://doi.org/10.1109/34.57666
  17. http://www.polhemus.com
  18. 박강령, '얼굴의 이차원 및 삼차원 움직임을 이용한 시선 위치 추적에 관한 연구', 연세대학교 대학원 전자공학과 박사학위논문, 2000년 2월
  19. Maybeck, P. S., 'Stochastic Models, Estimation, and Control, Vol.2, New York : Academic Press, 1982
  20. Yaakov Bar-Shalom and Xiao-Rong Li, Estimation and Tracking Principles, Techniques, and Software, Artech House Inc., 1993