An Adaptive Colorimetry Analysis Method of Image using a CIS Transfer Characteristic and SGL Functions

CIS의 전달특성과 SGL 함수를 이용한 적응적인 영상의 Colorimetry 분석 기법

  • 이성학 (경북대학교 전자전기컴퓨터학부) ;
  • 이종협 (삼성전자 DMC 연구소) ;
  • 송규익 (경북대학교 전자전기컴퓨터학부)
  • Received : 2009.07.02
  • Accepted : 2010.01.20
  • Published : 2010.05.31

Abstract

Color image sensors (CIS) output color images through image sensors and image signal processing. Image sensors that convert light to electrical signal are divided into CMOS image sensor and CCD image sensor according to transferring method of signal charge. In general, a CIS has RGB output signals from tri-stimulus XYZ of the scene through image signal processing. This paper presents an adaptive colorimetric analysis method to obtain chromaticity and luminance using CIS under various environments. An image sensor for the use of colorimeter is characterized based on the CIE standard colorimetric observer. We use the method of least squares to derive a colorimetric characterization matrix between camera RGB output signals and CIE XYZ tristimulus values. We first survey the camera characterization in the standard environment then derive a SGL(shutter-gain-level) function which is relationship between luminance and auto exposure (AE) characteristic of CIS, and read the status of an AWB(auto white balance) function. Then we can apply CIS to measure luminance and chromaticity from camera outputs and AE resister values without any preprocessing. Camera RGB outputs, register values, and camera photoelectric characteristic are used to analyze the colorimetric results for real scenes such as chromaticity and luminance. Experimental results show that the proposed method is valid in the measuring performance. The proposed method can apply to various fields like surveillant systems of the display or security systems.

컬러 이미지 센서는 광전 변환을 일으키는 촬상 소자와 내부의 영상처리 과정을 거쳐서 컬러 이미지를 출력한다. 일반적으로 출력 영상은 원 피사체의 XYZ 3 자극치와 카메라 RGB 출력 신호 사이의 변환 관계인 카메라 전달 특성에 의해 결정된다. 본 논문에서는 컬러 이미지 센서의 내부 조정 항목인 노출-증폭-레벨(shutter-gain-level, SGL)의 특성함수와 자동 화이트 밸런스 상태를 이용한 카메라 전달 행렬을 이용하여 영상의 colorimetry(측색) 상태를 분석하는 기법을 제안한다. 제안 방법으로부터 실제 영상물의 색도와 휘도 등을 예측할 수 있다. 연구에 사용된 컬러 이미지 센서의 AE(auto exposure) 상태와 실제 휘도의 관계를 정량화하여 SGL 함수를 유도하여 영상의 휘도를 예측 한다. 그리고 영상의 색도는 최소 제곱 다항식 모델링 (polynomial modeling)을 이용하여 기준 환경에서 얻은 카메라 전달 행렬과 AWB(auto white balance) 상태를 통해 예측한다. 실험을 통해서 컬러 이미지 센서를 이용한 제안된 영상의 색도와 휘도 예측 기법의 성능이 우수함을 볼 수 있고, 예측된 결과는 실제 영상물 계측과 시청 환경 측정을 이용한 디스플레이 화질 설정 시스템, 보안 등의 다양한 분야에서 응용이 가능하다.

Keywords

References

  1. B. Grob, and C. E. Herndon, Basic Television and Video Systems, 6th Edition, 1999, Mc-Graw Hill, pp.70-71.
  2. Y. H. Jung, J. S. Kim, B. S. Hur, and M. G. Kang, "Design of real-time enhancement preprocessor for CMOS image sensor," IEEE Transactions on Consumer Electronics, Vol.46, No.1, pp. 184-185, Feb. 2000.
  3. H. S. Kim, "Digital signal processor with efficient RGB interpolation and histogram accumulation," IEEE Transactions on Consumer Electronics, Vol.46, pp. 1389-1395, 1998.
  4. G. Hong, M. R. Luo, and P. A. Rhodes, "A study of digital camera colorimetric characterization based on polynomial modeling," J. of Color Research and Application, Vol. 26, No.1, pp. 76-84, 2001. https://doi.org/10.1002/1520-6378(200102)26:1<76::AID-COL8>3.0.CO;2-3
  5. P. C. Hung, "Colorimetric calibration in electronic imaging devices using a look-up tables model and interpolations," Journal of Electronic Imaging, Vol.2, pp.53-61, 1993. https://doi.org/10.1117/12.132391
  6. P. C. Hung, "Colorimetric calibration for scanners and media," Proc. SPIE, Vol.1448, pp.164-174, 1991.
  7. H. R. Kang, "Colour scanner calibration," Journal of Imaging Science and Technology, Vol. 36, pp. 162-170, 1992.
  8. H. R. Kang and P.G. Anderson, "Neural network application to the colour scanner and printer calibration," Journal of Electronic Imaging, Vol.1, pp. 125-134, 1992. https://doi.org/10.1117/12.57526
  9. 김은수, 박종선, 장수욱, 한찬호, 송규익, "기준 백색 선택에 따른 비디오 카메라의 전달 특성" 대한전자공학회 논문지, 제41권, SP편, 제2호, pp.23-34, Mar. 2004.
  10. 김은수, 장수욱, 이성학, 한찬호, 정태영, 송규익, "휴대폰용 CIS 디지털 카메라의 컬러 보정법" 대한전자공학회 논문지, 제43권, SP편, 제4호, pp. 9-18, July. 2006.
  11. The ANSI Accredited Standards Committee IT8, "Graphic technology-Color reflection target for input scanner calibration," American National Standards Institute, 1999.
  12. J. Park, and K. Park, "Professional colour communicator-the definitive colour selector," Journal of the Society of Dyers and Colourist, Vol.111, pp. 56-57, 1995.