작곡기법을 통한 영상정보의 청각화 연구
A Study on the Sonification of Video Information through the Compositional Techniques
- 주제(키워드) sonification , auditory display , music , Compositional Technique , 청각화 , 작곡기법
- 발행기관 서강대학교 영상대학원
- 지도교수 이상욱
- 발행년도 2011
- 학위수여년월 2011. 2
- 학위명 석사
- 학과 및 전공 영상대학원 예술공학
- 실제URI http://www.dcollection.net/handler/sogang/000000046694
- 저작권 서강대학교의 논문은 저작권 보호를 받습니다.
초록/요약
청각은 우리 몸의 감각기관 중에서도 예민하고 미세한 변화에도 민감한 특징을 가지고 있다. 그리고 이러한 청각의 특징을 이용하여 비 청각적 정보를 청각적 신호로 변환하여 보다 효율적인 정보전달, 혹은 새로운 감정을 일으킬 수 있게 하는 것이 청각화(sonification)의 핵심이다. 본 논문에서는 정보전달의 기능 뿐 아니라 음악적 요소로 사용될 청각화의 새로운 방향에 대하여 연구하였다. 일반적인 청각화는 단순 음악적 매핑 과정이나 정보전달을 위한 사운드 생성 과정을 거친다. 이 과정에서 음악적 기법들의 사용은 드물었으며 이러한 연구 분야는 아직 초기 단계에 있다. 본 연구에서는 음악 작곡에 전통적으로 사용되는 화성학, 그리고 현대음악에서 의도된 음계를 이용하여 체계적으로 음악을 구성하는 작곡기법인 12음기법(음렬기법)을 통하여 단순 음악적 매핑과정에서 생성되는 사운드보다 음악적 흐름에 집중 할 수 있는 방법들을 모색하였다. 비 청각 정보로는 서울시 내 고속도로에 설치되어 있는 CCTV로 들어오는 정보를 이용하였다. 영상 내에서 자동차의 수, 움직임, 이동방향 그리고 도로의 차선에서 나올 수 있는 정보들을 분석하여 음악적 흐름과 연결시킬 수 있도록 하였다. 본 연구의 수행을 통하여 비 청각 정보를 음악적, 예술적으로 청각화 할 수 있는 가능성과 기본적인 형식을 만들었다. 음악적 요소들과의 수치적인 매핑을 통해 비 청각 정보와의 연관성을 높이려 하였고 나열된 정보, 시간의 흐름이 있는 정보를 음악적 기법으로 접근하여 정보와의 연관성 뿐 아니라 작곡 기술적, 음악적, 그리고 정서적 요소까지 재현할 수 있었다. 향후과제로는 음색 변조나 물리적 효과들을 통한 음색 연구, 체계적인 음악 알고리즘 연구, 비 청각 정보와의 명확한 속성반영을 위한 방법 연구 등을 계획하고 있으며, 그러한 연구를 통하여 보다 체계적이고 직관적인, 새로운 음악을 생성하려 한다.
more초록/요약
The auditory sense is sensitive of the human senses and susceptible to even minute changes. The essence of sonification is to convert non-auditory information into auditory information with those characteristics of the auditory sense to provide more efficient information or stimulate new feelings. This study set out to investigate new directions in sonification to be used as a musical element as well as information delivery. General sonification involves a simple musical mapping process or a process of creating sound for information delivery. In such a process, musical techniques are hardly used, and concerned researches still remain in the early stage. The investigator explored ways to focus on musical flows rather than the sound produced in a simple musical mapping process through harmonics, which has been traditionally used in musical composition, and dodecaphony(the serial technique), which is to systematically construct music with the musical scale intended in modern music. The information inputs into the CCTVs installed along the highways within Seoul were used as non-auditory information. The information that could be derived from the number of cars, movements, moving directions and lanes was analyzed to be connected to musical flows. The study explored the possibility of the musical and artistic sonification of non-auditory information and built a basic format. Connections with non-auditory information were increased through numerical mapping with musical elements, and the enumerated information and the information containing time flows was approached in a musical technique to reproduce the compositional technical, musical, and emotional elements as well as connections with information. In future, the investigator plans to study tone quality through tone alteration and physical effects, systematic musical algorithm, and a way to accurately reflect the attributes of non-auditory information in order to create more systematic and intuitive new music through such research efforts.
more