JOURNAL BROWSE
Search
Advanced SearchSearch Tips
Real-time Implementation of Sound into Color Conversion System Based on the Colored-hearing Synesthetic Perception
facebook(new window)  Pirnt(new window) E-mail(new window) Excel Download
 Title & Authors
Real-time Implementation of Sound into Color Conversion System Based on the Colored-hearing Synesthetic Perception
Bae, Myung-Jin; Kim, Sung-Ill;
  PDF(new window)
 Abstract
This paper presents a sound into color signal conversion using a colored-hearing synesthesia. The aim of the present paper is to implement a real-time conversion system which focuses on both hearing and sight which account for a great part of bodily senses. The proposed method of the real-time conversion of color into sound, in this paper, was simple and intuitive where scale, octave and velocity were extracted from MIDI input signals, which were converted into hue, intensity and saturation, respectively, as basic elements of HSI color model. In experiments, we implemented both the hardware system for delivering MIDI signals to PC and the VC++ based software system for monitoring both input and output signals, so we made certain that the conversion was correctly performed by the proposed method.
 Keywords
Coloered-hearing Synesthesia;Sound to Color Conversion;MIDI;Real Time Conversion;Color Model;
 Language
Korean
 Cited by
 References
1.
김용철, 공감각의 형성요인에 관한 연구, 홍익대학교 대학원 박사학위논문, 2005.

2.
유혜영, 색채의 공감각에 의한 색채인지 연구, 이화여자대학교 대학원 석사학위논문, 2010.

3.
전가영, 음과 색의 공감각적 표현, 이화여자대학교 대학원 석사학위논문, 2003.

4.
전한영, 공감각을 활용한 중학교 음악 감상 수업 지도방안 연구, 연세대학교 석사학위논문, 2014.

5.
최경미, 박영호, "감성 정보통신 기술 동향 분석," 한국정보처리학회 논문집, 제18권, 제1호, 2011.

6.
N. Osmanovic, N. Hrustemovic, and H. R. Myler, "A testbed for auralization of graphic art," IEEE Region 5, 2003 Annual Technical Conference, pp.45-49, 2003.

7.
S. Matta, D. K. Kumar, and X. H. Yu, "Discriminative analysis for image to sound mapping," Intelligent Sensing and Information Processing, pp.119-122, 2004.

8.
http://www.seeingwithsound.com/

9.
Peter B. L. Meijer, "An experimental system for auditory image representations," IEEE trans. on bio-medical engineering, Vol.39, No.2, pp.112-121, 1992. crossref(new window)

10.
김성일, "HSI 히스토그램에 기초한 이미지-사운드 변환," 한국음향학회지, 제30권, 제3호, pp.142-148, 2011.

11.
김길호, "화성법을 이용하여 색과 음을 상호변환하고 색채를 조화하는 방법 및 장치," 출원번호 10-99-34242, 1999.

12.
김길호, 백정기, 사운드컬러하모니즘: 음악이 흐르는 컬러 배색 사전, 임프레스, 2003.

13.
강건우, 김성일, "피치 기반 사운드-컬러이미지 변환에 관한 기초연구," 감성과학, 제15권, 제2호, pp.231-238, 2012.

14.
임윤정, 소리와 색채의 연관성에 관한 연구, 건국대학교 대학원 석사학위논문, 2013.

15.
임지혜, 음과 색채의 연관성 : 올리비에 메시앙의 오르간 작품 중심으로, 한양대학교대학원 석사학위논문, 2013.

16.
Evan Briggs, FPGA Digital Music Synthesizer, Diss. Worcester Polytechnic Institute, 2015.

17.
Guoming Zhao, "The Study on the Performance Characteristics of the Violin Tone in the Computer Music," International Conference on Education Technology, Management and Humanities Science, pp.44-47, 2015.

18.
http://www.midi.org

19.
황태영, 이미지 색상 정보 분석을 통한 음악적 정보 추출에 관한 연구, 중앙대학교 첨단영상 대학원 석사학위논문, 2008.

20.
http://picsynth.000space.com/midi.html

21.
http://www.fon.hum.uva.nl/praat/