Journal of the Korea Institute of Information and Communication Engineering (한국정보통신학회논문지)

The Korea Institute of Information and Commucation Engineering (한국정보통신학회)
권호 표지
DOI QR코드

DOI QR Code

An Implementation of ISP for CMOS Image Sensor

CMOS 카메라 이미지 센서용 ISP 구현

  • 손승일 (한신대학교 정보통신학과) ;
  • 이동훈 (한신대학교 정보통신학과)
  • Published : 2007.03.31
Download PDF
⟨ Previous Next ⟩

Abstract

In order to display Bayer input stream received from CMOS image sensor to the display device, image signal processing must be performed. That is, the hardware performing the image signal processing for Bayer data is called ISP(Image Signal Processor). We can see real image through ISP processing. ISP executes functionalities for gamma correction, interpolation, color space conversion, image effect, image scale, AWB, AE and AF. In this paper, we obtained the optimum algorithm through software verification of ISP module for CMOS camera image sensor and described using VHDL and verified in ModelSim6.0a simulator. Also we downloaded into Xilinx XCV-1000e for the designed ISP module and completed the board level verification using PCI interface.

CMOS 이미지 센서로부터 수신한 베이어 입력 스트림을 디스플레이 장치로 보기위해서는 영상 신호처리를 수행해야 한다. 즉, 이러한 영상 신호처리를 수행한 부분을 ISP(Image Signal Processor)라 한다. ISP 처리를 통해서 실제 원본 이미지를 볼 수 있다. ISP는 감마교정, 인터폴레이션, 공간적 변환, 이미지 효과, 이미지 스케일, AWB, AE, AF 등과 같은 기능을 수행한다. 본 논문에서는 CMOS 카메라 이미지 센서용 ISP를 모델링하여 최적화 알고리즘을 소프트웨어 검증을 통해 도출하였으며, VHDL 언어를 이용하여 설계하고 ModelSim6.0a 시뮬레이터를 이용하여 검증하였다. 또한 보드 레벨의 검증을 위해 PCI 인터페이스를 이용하여 설계한 ISP 모듈을 자일링스 XCV-1000e에 다운로드하여 결과를 확인하였다.

Keywords

References

  1. Randy Crane, Hewlett-Packard Company. 'A Simplified Approach to Image Processing'. Prentice Hall PTR
  2. Rafael C. Gonalez, Richard E. Woods. 'Digital Image Processing'. Addison Wesley
  3. 엠텍비젼 - http://www.mtekvision.com/
  4. 코아로직 - http://www.corelogic.co.kr/
  5. Yun Ho Jung, Jae Seok Kim, Bong Soo Hur and Moon Gi Kang, 'Design of Real-Time Image Enhancement Preprocessor for CMOS Image Sensor', IEEE Trans, Consumer Electronics, Vol 46: No 1, 2. 2000
  6. 조태경, 홍재인 AMBA기반의 LCD컨트롤러 설계, 한국콘텐츠학회 논문지 '04 Vol. 4 No 4
  7. S. Ramachandran S.Srinivasan 'Design and FPGA Implementation of a Video Scaler with on-chip reduced memory utilization'. DSD'03. IEEE 2003
  8. June-Sok Lee You-Young Jung, Byung-Soo Kim, Sung-Jea Ko, 'An Advanced Video Camera System with Robust AF, AE, and AWB CONTROL', IEEE, Trans. vol, 47. No 3, 8. 2001
  9. 정영식, 최영철, 장영조, 'ISP를 위한 효율적인 White Balance 알고리즘', 한국기술교육대학교
  10. 이동훈, 손승일, 'CMOS 이미지 센서용 효과적인 인터폴레이션 구현', 해양 정보통신학회 춘계 학술발표회 논문집, Vol 9 : No 1, (5. 27, 2005), pp353-357
  11. 정형돈, 이동훈, 손승일, '이미지 센서용 효과적인 Effect 구현', 해양 정보통신학회 춘계 학술발표회 논문집, Vol 9 : No 1, (5. 27, 2005), pp1017-1021
  12. 이현정, 이동훈, 손승일, 'CMOS 이미지 센서용 감마교정 회로 설계', 해양 정보통신학회 춘계 학술발표회 논문집, Vol 9 : No 1, (5. 27, 2005), pp1008-1012
  13. 이동훈, 손승일, 'CMOS 이미지 센서용 AE의 설계', 한국 통신학회 춘계 학술 발표회 논문집, Vol 31, (6. 30, 2005), pp5C-119
  14. 정형돈, 이동훈, 손승일, 'CMOS 이미지 센서용 효과적인 White Balance 구현', 한국 해양 정보통신학회 추계 학술 발표회 논문집, Vol 9 : No 2, (10. 28, 2005), pp607-610
  15. 이동훈, 손승일, 'CMOS 이미지 센서용 효과적인 이미지 스케일 구현', 한국 해양 정보통신학회 추계 학술 발표회 논문집, Vol 9 : No 2, (10. 28, 2005), pp307-310
  16. PLX - http://www.plxtech.com/

Cited by

  1. 하드웨어와 소프트웨어의 역할 분담을 통해 칩 면적을 크게 줄인 Image Signal Processor의 설계 vol.14, pp.8, 2007, https://doi.org/10.6109/jkiice.2010.14.8.1737