X-Pers: 타악 공연에서 뉴미디어 기술을 활용한 동작 인식 및 공간 연출 연구 (X-Pers: A Study on Motion Recognition and Spatial Staging in Percussion Performances Using New Media Technology)

서지정보

· 발행기관 : 한국산학기술학회
· 수록지 정보 : 한국산학기술학회논문지 / 24권 / 11호 / 288 ~ 295페이지
· 저자명 : 설호종, 이제형, 권두영

초록

본 연구는 타악 공연에 특별히 초점을 맞추어 뉴미디어 기술의 적용 가능성을 깊게 탐구하였다. 연구의 목적은단순히 타악 연주를 멀티모달적으로 확장하는 것이 아니라, 공연 공간을 다이나믹하게 연출하고, 관객과의 상호작용을새롭게 개발하는 것이다. 이를 위해 본 연구에서는 타악기와 연주자의 전반적인 움직임, 더 나아가 세부적인 터치까지정밀하게 감지하는 제스처 모듈을 개발하였다. 이 모듈은 바디 센서와 비주얼 센서를 통합적으로 활용하여 연주자의 다양한 움직임과 감정 표현을 실시간으로 분석하고 데이터화하였다. 또한, 추출된 움직임 데이터와 연주 데이터를 오픈소스 비주얼 프로그래밍 언어인 프로세싱(Processing)을 사용하여 시각화하는 새로운 기법도 개발하였다. 이를 통해설계 및 개발된 프로토타입 시스템 "엑스퍼스(X-pers)"는 연주자와 함께 무대 위에서 다이나믹한 예술적 영상을 생동감있게 표현할 수 있게 만들었다. 본 연구는 타악기 연주의 본질적 표현력과 뉴미디어의 독창적 시각화가 조화롭게 결합됨으로써, 관객에게 새로운 예술적 경험을 선사하는 것을 목표로 하였다. 이러한 과정과 결과를 통해 뉴미디어 기술이 현대공연에 어떠한 혁신적 변화를 가져올 수 있는지를 명확히 확인하였다.

영어초록

This study focused on percussion performances to explore the potential applications of new media technologies. The research aimed to extend the performance of percussion instruments in a multimodal fashion, dynamically stage the performance space, and develop new forms of interactions with the audience. This study developed a gesture module that precisely detects the broad and subtle movements of percussion instruments and performers. This module integrates body sensors and visual sensors to analyze various movements and emotional expressions of the performer in real time. A new technique was developed to visualize the extracted movement and performance data using the open-source visual programming language, Processing. This led to the design and development of a prototype system called "X-pers," which enables dynamic artistic imaging on stage in collaboration with the performer. The study offers a new artistic experience to the audience by harmoniously combining the intrinsic expressiveness of percussion performance with the unique visualizations of new media.
These processes and results confirmed that new media technology could bring innovative changes in modern performances.

참고자료

· 없음