소리 시각화를 응용한 실시간 공연영상 시스템에 관한 연구

Abstract

공연예술은 관객의 복합적인 요구와 급속한 첨단 기술의 발전이 반영되어 새로운 결합 양상이 나타났다. 여기에 공연예술이 가지는 시공간 및 연출의 제약을 넘어서기 위해 공연영상이 도입되었고, 공연영상은 기존의 공연예 술과는 차별되는 또 다른 예술 장르로 거듭나고 있다. 본 논문은 공연의 구성 요소인 소리를 활용하여 실시간 소리 시각화(Real-time sound visualization)를 실험하 고자 한다. 우선 공연영상에 적합한 시스템 환경을 구축 하여 무대에서 발생한 소리를 실시간으로 입력받는다. 입력받은 소리를 맥스엠에스피/지터(MaxMSP/Jitter) 환 경을 이용하여 음량 및 주파수 데이터를 추출하고 소리 에 반응하는 영상을 제작한다. 영상은 도형 형태의 그래 픽 영상과 소리에 반응하는 디지털 효과를 중심으로 제 작한다. 제작한 영상을 영상 연출자가 공연 현장에서 제 어하도록 기기를 응용하여 컨트롤러 시스템을 구축한다. 이 과정에서 독주·합주·디지털악기 연주 등에 의해 생겨 난 다양한 소리에 따른 입력 방법도 실험한다. 마지막으 로 실시간 소리의 물리적인 속성을 토대로 실시간 공연 영상을 구현한다. 본 실험으로써 소리 시각화를 개인 및 다수를 고려한 즉 흥적인 공연예술에 활용하고자 한다.