DOI QR코드

DOI QR Code

Moving Object Extraction and Relative Depth Estimation of Backgrould regions in Video Sequences

동영상에서 물체의 추출과 배경영역의 상대적인 깊이 추정

  • 박영민 (경운대학교 멀티미디어공학부) ;
  • 장주석 (경운대학교 멀티미디어공학부)
  • Published : 2005.06.01

Abstract

One of the classic research problems in computer vision is that of stereo, i.e., the reconstruction of three dimensional shape from two or more images. This paper deals with the problem of extracting depth information of non-rigid dynamic 3D scenes from general 2D video sequences taken by monocular camera, such as movies, documentaries, and dramas. Depth of the blocks are extracted from the resultant block motions throughout following two steps: (i) calculation of global parameters concerned with camera translations and focal length using the locations of blocks and their motions, (ii) calculation of each block depth relative to average image depth using the global parameters and the location of the block and its motion, Both singular and non-singular cases are experimented with various video sequences. The resultant relative depths and ego-motion object shapes are virtually identical to human vision.

컴퓨터 비젼에 관한 고전적인 연구 주제들 중의 하나는 두 개 이상의 이미지로부터 3차원 형상을 재구성하는 3차원 변환에 관한 것이다. 본 논문은 단안 카메라로 촬영한 일반적인 2차원 영상물에서 능동적으로 움직이는 3차원 영상의 깊이 정보를 추출하는 문제를 다룬다. 연속하는 프레임들간의 영상 블록의 움직임을 평가하여 카메라의 회전과 배율효과를 보상하고 다음과 같은 두 개의 단계에 걸쳐 블록의 움직임을 추출한다. (i) 블록의 위치와 움직임을 이용하여 카메라의 이동과 초점거리에 대한 전역 파라메타를 계산한다. (ii) 전역 파라메타, 블록의 위치와 움직임을 이용하여 평균 영상 깊이에 대한 상대적인 블록의 깊이를 계산한다. 다양한 동영상을 대상으로 특이점인 경우와 그렇지 않은 경우를 실험하였다. 결과로 얻어지는 상대적인 깊이 정보와 객체는 인간이 판단하는 경우와 동일함을 보였다.

Keywords

References

  1. Tony Jebara, Ali Azarbayejani, Alex Pentland, 3D Structure from 2D Motion, MIT Media Lab, Cambridge MA 02139, 1999
  2. Jae-Woong. Yi, Jun-Ho Oh, 'Estimation Of Depth And 3D Motion Parameter Of Moving Object With Multiple Stereo Images,' Image and Vision Computing 14, pp.501-516, Oct., 1996 https://doi.org/10.1016/0262-8856(95)01073-4
  3. ITU-T DRAFT H.263, 'Video Coding for Low Bitrate Communication,' ITU-T, Dec., 1993
  4. Borko Furht, Joshua Greenberg, Raymond Wet-water, Motion Estimation Algorithms For Video Compression, Kluwer Academic Publishers, 1997
  5. A. K. Jain, 'Image data compression: A review,' Proc. of IEEE, Vol.69, No.3, pp.349-389, Mar., 1981 https://doi.org/10.1109/PROC.1981.11971
  6. T. Koga, K. Iinuma, A. Hirano, Y. Iijima, and T. Ishiguro, 'Motion-Compensated Interframe Coding for Video Conferencing,' Proc. of NTC81, pp.G5.3.1-5.3.5, Nov., 1981
  7. W. Lee, Y. Kim, R. J. Gove, and C. J. Read, 'Media station 5000: Integrating video and audio,' IEEE Multimedia, Vol. 1, No.2, pp.1011-1014, Sep., 1985 https://doi.org/10.1109/93.311654
  8. Borko Furht, Joshua Greenberg, and Raymond Wetwater, 'Motion Estimation Algorithms for Video Compression,' KAP, 1997
  9. 박준호, '카메라 이동이 있는 단안 영상열에서 움직임 추정 기반의 깊이 정보 추출,' 영남대학교 박사학위논문, 2001. 12
  10. 편성원, '카메라 이동이 있는 단안 영상에서의 깊이 추정,' 영남대학교 석사학위 논문, 2002. 12
  11. Dae-Seong Jeoune, 'Global Motion Estimation for Panning, Tilting, and Zooming Parameters using the Geometry in Digital Video Sequence,' Yeungnam University Ph.D. Dissertation, Dec., 2001
  12. 문성헌, '동영상에서 배경의 세 대칭점을 이용한 카메라 움직임 추정,' 영남대학교 박사학위 논문, 2002. 12
  13. 유영준, '담수중 경사정보와 색차분산을 이용하여 병합하는 워터쉐드 방식의 영상분할,' 영남대학교 석사학위논문, 2002. 12