DOI QR코드

DOI QR Code

딥러닝을 위한 모폴로지를 이용한 수중 영상의 세그먼테이션

Segmentation of underwater images using morphology for deep learning

  • 투고 : 2023.05.09
  • 심사 : 2023.07.17
  • 발행 : 2023.07.31

초록

수중영상은 수중 잡음과 낮은 해상도로 표적의 형상과 구분이 명확하지 않다. 그리고 딥러닝의 입력으로 수중영상은 전처리가 필요하며 Segmentation이 선행되어야 한다. 전처리를 하여도 표적은 명확하지 않으며 딥러닝에 의한 탐지, 식별의 성능도 높지 않을 수 있다. 따라서 표적을 구분하며 명확하게 하는 작업이 필요하다. 본 연구에서는 수중영상에서 표적 그림자의 중요성을 확인하고 그림자에 의한 물체 탐지 및 표적 영역 획득, 그리고 수중배경이 없는 표적과 그림자만의 형상이 담긴 데이터를 생성하며 더 나아가 픽셀값이 일정하지 않은 표적과 그림자 영상을 표적은 흰색, 그림자는 흑색, 그리고 배경은 회색의 3-모드의 영상으로 변환하는 과정을 제시한다. 이를 통해 딥러닝의 입력으로 명확히 전처리된 판별이 용이한 영상을 제공할 수 있다. 또한 처리는 Open Source Computer Vision(OpenCV)라이브러리의 영상처리 코드를 사용했으면 처리 속도도 역시 실시간 처리에 적합한 결과를 얻었다.

In the underwater image, it is not clear to distinguish the shape of the target due to underwater noise and low resolution. In addition, as an input of deep learning, underwater images require pre-processing and segmentation must be preceded. Even after pre-processing, the target is not clear, and the performance of detection and identification by deep learning may not be high. Therefore, it is necessary to distinguish and clarify the target. In this study, the importance of target shadows is confirmed in underwater images, object detection and target area acquisition by shadows, and data containing only the shape of targets and shadows without underwater background are generated. We present the process of converting the shadow image into a 3-mode image in which the target is white, the shadow is black, and the background is gray. Through this, it is possible to provide an image that is clearly pre-processed and easily discriminated as an input of deep learning. In addition, if the image processing code using Open Source Computer Vision (OpenCV)Library was used for processing, the processing speed was also suitable for real-time processing.

키워드

과제정보

본 논문은 2021년 방위사업청의 재원으로 국방과학연구소의 지원을 받아 수행된 연구입니다(UG210005DD).

참고문헌

  1. D. G, S. S, and M.V. Judy, "Survey on deep learning techniques used for classification of underwater sonar images," Proc. ISMAC-CVB, 53-58 (2020). 
  2. P. Soviany and R. T. Ionescu, "Optimizing the trade-off between single-stage and two-stage deep object detectors using image difficulty prediction," Proc. SYNASC, 1-6 (2018). 
  3. R. Girshick, J. Donahue, T. Darrell, and J. Malik. "Rich feature hierarchies for accurate object detection and semantic segmentation," Proc. IEEE Conf. CVPR, 580-587 (2014). 
  4. K. E. A. Sande, J. R. R. Uijlings, T. Gevers, and A. W. M. Smeulders, "Segmentation as selective search for object recognition," Proc. ICCV, 1879-1886 (2011). 
  5. H. Shi, H. Wang, C. Zhao, and Z. Shen, "Sonar image preprocessing based on morphological wavelet transform," Proc. ICIA, 1113-1117 (2010). 
  6. A. P. Leros and A. S. Andreatos, "Target detection in sonar images using morphological operations and empirical mode decomposition," J. Appl. Math. Bioinform. 6, 1-21 (2016). 
  7. H. Mao, H. Yan, L. Lin, W. Dong, Y. Li, Y. Liu, and J. Xue, "Fast segmentation method of sonar images for jacket installation environment," IASC, 36, 1671-1686 (2023).  https://doi.org/10.32604/iasc.2023.028819
  8. R. C. Gonzalez, Digital Image Processing 2nd Ed. (Prentice Hall, New Jersey, 2002), pp. 519-621. 
  9. J. E. Lee and T. B. Shim, "Research on segmentation for sidescan sonar image by morphological method" (in Korean), Journal of the Institute of Electronics and Information Engineers, 49, 143-148 (2012). https://doi.org/10.5573/ieek.2012.49.12.003