3-D Object Tracking using 3-D Information and Optical Correlator in the Stereo Vision System

스테레오 비젼 시스템에서 3차원정보와 광 상관기를 이용한 3차원 물체추적 방법

  • Published : 2002.09.01

Abstract

In this paper, we proposed a new 3-dimensional(3-D) object-tracking algorithm that can control a stereo camera using a variable window mask supported by which uses ,B-D information and an optical BPEJTC. Hence, three-dimensional information characteristics of a stereo vision system, distance information from the stereo camera to the tracking object. can be easily acquired through the elements of a stereo vision system. and with this information, we can extract an area of the tracking object by varying window masks. This extractive area of the tracking object is used as the next updated reference image. furthermore, by carrying out an optical BPEJTC between a reference image and a stereo input image the coordinates of the tracking objects location can be acquired, and with this value a 3-D object tracking can be accomplished through manipulation of the convergence angie and a pan/tilt of a stereo camera. From the experimental results, the proposed algorithm was found to be able to the execute 3-D object tracking by extracting the area of the target object from an input image that is independent of the background noise in the stereo input image. Moreover a possible implementation of a 3-D tele-working or an adaptive 3-D object tracker, using the proposed algorithm is suggested.

본 논문에서는 스테레오 비젼 시스템의 3차원 정보에 의해 가변되는 윈도우 마스크와 광 BPEJTC(binary phase extraction joint transform correlator)를 이용하여 스테레오 카메라를 제어하는 새로운 3차원 물체추적 시스템을 제안하였다. 즉, 스테레오 비젼 시스템의 구성 요소에 의해 3차원 정보인 추적 물체까지의 거리 정보를 쉽게 구할 수 있고, 이 거리 정보로 윈도우 마스크를 가변 시켜 추적물체 영역을 추출할 수 있다. 이 추적물체 영역은 다음 기준영상으로 갱신하여 사용된다. 그리고 이 기준영상과 스테레오 입력 영상간에 광 BPEJTC를 실행하여 추적 물체의 위치 값을 구하고. 이 값으로 스테레오 카메라의 주시각과 팬/틸트를 제어하여 3차원 물체추적이 이루어진다. 실험 결과 제안한 알고리즘은 스테레오 입력 영상에서 배경잡음과 관계없이 추적 물체영역을 추출하여 3차원 물체추적이 가능하고, 이의 구현으로 3차원 원격작업 시스템이나 적응적인 3차원 물체 추적기 등의 구현 가능성을 제시하였다.

Keywords

References

  1. B. Javidi and F. Odeh, 'Multiple Object Identification by Bipolar Joint Transform Correlator,' Opt. Eng., Vol. 27, pp. 295-300, 1988
  2. C. Tam, T. S. Yu, A, Gregory and D. Juday, 'Autonomous real time object tracking with an adaptive JTC,' Opt. Eng., Vol. 29, No. 4, pp. 314-320, 1990 https://doi.org/10.1117/12.55602
  3. J. S. Lee, K. T. Kim, and E. S. Kim, 'Autonomous stereo object tracking using motion estimation and JTC,' SPIE, Vol. 4029, pp. 49-58, 2000
  4. J. S. Lee, J. H. Ko and E. S. Kim, 'Real-Time Stereo Object Tracking system by using Block Matching Algorithm and Optical binary phase extraction joint transform correlator,' Optics Communications, Vol. 191, pp. 191-202, 2001
  5. Yi-MO Zhang, Yu-Wen Qin, Bao-Zhen Ge, Zhan-Hua Huang and Xi-Ming Chen, 'Adaptive Moving Object Tracking Using Nonlinear JTC,' SPIE, Vol. 2778, pp. 457-458, 1996
  6. F. T. S. Yu, F. Cheng, T. Nagata and D. A. Gregory, 'Efforts of Fringe Binarization of Multiobject Joint Transform Correlator,' Appl. Opt., Vol. 28, pp. 2988-2990, 1989
  7. T. J. Olson and D. J. Coombs, 'Real-time vergence control for binocular robots,' Intl. J. of Computer Vision, Vol. 7, No. 1, pp. 67-89, 1991 https://doi.org/10.1007/BF00130490
  8. D. J. Coombs and C. M. Brown, 'Cooperative Gaze Holding in Binocular Vision,' IEEE Control System, pp. 24-33, 1991
  9. K. T. Kim, J. S. Lee, S.H. Kim, E. S. Kim, S. Y. Park and Y. B. Lee, 'Human-like stereo vision system based on optical JTC,' SPIE Optical Pattern Recognition, Vol. 3466, pp. 259-266, 1998
  10. C.M. Brown, 'Prediction and Cooperation in Gaze Control,' Bio. Cybern., Vol. 63, pp. 61-70, 1990
  11. S. Y. Yi, E. S. Kim and H. G. Yang, 'A BPEJTC-based Segmentation for a non-stationary Image,' Opt. Comm., Vol. 123, pp. 714-724, 1996
  12. F. T. S. Yu and T. Nagata, 'Binary Phase Only Joint Transform Correlator,' Microwave Opt. Tech. Lett., Vol. 2, pp. 15-19, 1989
  13. P. Willet. B. Javidi and M. Lops, 'Analysis of image detection based on Fourier plane nonlinear filtering in a joint transform correlator,' Appl. Opt. Vol. 37 No. 8, pp. 1329-1341, 1998