The Journal of the Korea Contents Association (한국콘텐츠학회논문지)

The Korea Contents Association (한국콘텐츠학회)
권호 표지
DOI QR코드

DOI QR Code

Decision-Tree Algorithm for Recognition of Music Score Images Obtained by Mobile Phone Camera

휴대폰 카메라로 촬영한 악보 영상 인식을 위한 의사트리 알고리즘

  • 박건희 (전남대학교 공과대학 전산학과) ;
  • 오성열 (전남대학교 공과대학 전산학과) ;
  • 손화정 (삼성전자 디지털 미디어 사업부) ;
  • 유재명 (전남대학교 공과대학 전산학과) ;
  • 김수형 (전남대학교 공과대학 전산학과) ;
  • 이귀상 (전남대학교 공과대학 전산학과)
  • Published : 2008.06.28
Download PDF
⟨ Previous Next ⟩

Abstract

Today, mobile phone is a necessity of modern life. For that reason, we suggest a particular system of a mobile phone which take a picture of music score image and automatically play it without any technical knowledges about the music score information. This experiment makes midi, acknowleging separate symbols via preprocessing to music score image taken. This paper utilizes 11 sorts of the score image taken by a mobile phone camera for this experiment. Through this method we suggest, as much as 98% on average takes place, which is very high recognizing ratio. Also, as we introduce this system in a mobile phone by porting, it takes 8.63 seconds on average to create midi following input of images.

현대 사회에서 빼놓을 수 없는 기기인 휴대폰 카메라를 통하여 획득한 악보를 인식함으로써 누구나 손쉽게 전문적인 악보에 대한 지식이 없어도 악보를 연주할 수 있는 시스템을 제안한다. 본 실험은 휴대폰 카메라를 이용하여 촬영한 악보 영상을 전처리과정을 통하여 분리된 심볼들을 인식한 후 미디를 구성한다. 본 논문에서는 실험을 위하여 휴대폰 카메라로 촬영한 임의의 악보 영상 11종을 사용하였다. 전처리 과정을 거친 심볼을 대상으로 제안한 방법을 통하여 인식한 결과 평균 98%의 높은 인식률을 보였다. 본 시스템을 휴대폰에 포팅하여 수행시간을 측정한 결과, 영상의 입력 후 미디 생성까지 걸리는 시간이 평균 8.63초가 소요됨을 알 수 있었다.

Keywords

References

  1. D. Bainbridge and T. C. Bell, "The Challenge of Optical Music Recognition," Computers and the Humanities, Vol.35. No.2, pp.95-121, 2001. https://doi.org/10.1023/A:1002485918032
  2. I. Fujinaga, "Optical Music Recognition Using Projections," Master's thesis, McGill University, Faculty of Music, Montreal, 1988.
  3. A. Argentini, C. Combi, G. L. Foresti, C. Mirolo, A. Montanari, and A. Peron, "A Multimedia System for Automatic Recognition, Indexing and Retrieval of Heterogeneous Music Documents," Proceedings of 13th Colloquium on Musical Informatics, Vol.2, No.5, pp.133-136. 2000.
  4. H. Kato and S. Inokuchi, "A Recognition System for Printed Piano Music Using Musical Knowledge and Constraints," Structured Document Image Analysis, H. Baird, H. Bunke and K. Yamamoto, Springer-Verlag, pp.435-455, 1992.
  5. H. Miyao and M. Okamoto, "Stave Extraction for Printed Music Scores Using DP Matching," Journal of Advanced Computational Intelligence and Intelligent Informatics, Vol.8, No.2, pp.208-215, 2004. https://doi.org/10.20965/jaciii.2004.p0208
  6. 박철우, 황인성, 정동석, "인쇄 악보의 자동 인식 및 연주를 위한 연구", 대한전자공학회 추계종합학술대회논문집, 제16권, 제2호, pp.653-656, 1993.
  7. 황영길, 김성천, "인쇄 악보의 인식과 병렬 알고리즘에 관한 연구", 한국통신학회논문집, 제19권, 제5호, pp.959-970, 1994.
  8. H. Miyao, Minoru, and Maruyama, "An online handwritten music symbol recognition system," International Journal on Document Analysis and Recognition, Vol.9, No.1, pp.49-58, 2007. https://doi.org/10.1007/s10032-006-0026-9
  9. 손화정, 김수형, 오성열, "카메라 기반 악보 영상 인식을 위한 오선 검출 및 삭제 알고리즘", 한국콘텐츠학회논문지, 제7권, 제11호, pp.34-42, 2007. https://doi.org/10.5392/JKCA.2007.7.11.034
  10. 유재명, T. Nguyen, 이귀상, "인쇄 악보 인식을 위해 적응적인 가중치를 이용한 효과적인 이진화 방법 연구", 정보통신분야 합동학술대회 논문집, 제14권, 제3호, pp.227-230, 2007.

Cited by

  1. Optical Music Score Recognition System for Smart Mobile Devices vol.10, pp.4, 2014, https://doi.org/10.5392/IJoC.2014.10.4.063