소리 시각화를 응용한 실시간 공연영상 시스템에 관한 연구 (Real-time Performance Moving Image System by Sound Visualization)

서지정보

· 발행기관 : 한국디지털디자인학회
· 수록지 정보 : 디지털디자인학연구 / 9권 / 4호 / 55 ~ 64페이지
· 저자명 : 장은선, 박진완, 홍성대

초록

공연예술은 관객의 복합적인 요구와 급속한 첨단 기술의
발전이 반영되어 새로운 결합 양상이 나타났다. 여기에
공연예술이 가지는 시공간 및 연출의 제약을 넘어서기
위해 공연영상이 도입되었고, 공연영상은 기존의 공연예
술과는 차별되는 또 다른 예술 장르로 거듭나고 있다.
본 논문은 공연의 구성 요소인 소리를 활용하여 실시간
소리 시각화(Real-time sound visualization)를 실험하
고자 한다. 우선 공연영상에 적합한 시스템 환경을 구축
하여 무대에서 발생한 소리를 실시간으로 입력받는다.
입력받은 소리를 맥스엠에스피/지터(MaxMSP/Jitter) 환
경을 이용하여 음량 및 주파수 데이터를 추출하고 소리
에 반응하는 영상을 제작한다. 영상은 도형 형태의 그래
픽 영상과 소리에 반응하는 디지털 효과를 중심으로 제
작한다. 제작한 영상을 영상 연출자가 공연 현장에서 제
어하도록 기기를 응용하여 컨트롤러 시스템을 구축한다.
이 과정에서 독주·합주·디지털악기 연주 등에 의해 생겨
난 다양한 소리에 따른 입력 방법도 실험한다. 마지막으
로 실시간 소리의 물리적인 속성을 토대로 실시간 공연
영상을 구현한다.
본 실험으로써 소리 시각화를 개인 및 다수를 고려한 즉
흥적인 공연예술에 활용하고자 한다.

영어초록

Performing arts is reflected by the audiences
complex demands and rapid high technology
therefore results in a new fusion phase.
Performance moving image is introduced to leap
over the limits of time, space and presentation.
It has formed a new genre of art which is
distinguished from other performing arts.
This paper intends to experiment Real time sound
visualization using the composition element of
performing arts. First, construct a system
surrounding suitable for the performance image
and then receive real time input of the sound
produced from the stage. Abstract sound decibel
or frequency data using MaxMSP/Jitter
surrounding and produce image that reacts to the
sound. Image should be produced focused on
figural form of graphic image and digital effect
that reacts to sound. In this process, also test
the other input methods of various sounds that
come from solo instrument, ensemble and digital
instrument. Finally, materialize the performance
image in real time according to the material
characteristics of real time sound.
Through this experiment, we plan to apply sound
visualization on individual or a number of
performing arts.

참고자료

· 없음