VR 콘서트의 시청각적 단서가 사용자의 주의집중에 미치는 영향 (Effects of Audiovisual Cues in VR Concerts on Users' Attention)

서지정보

· 발행기관 : 한국공간디자인학회
· 수록지 정보 : 한국공간디자인학회 논문집 / 20권 / 1호 / 413 ~ 424페이지
· 저자명 : 이소원, 이강현

초록

(연구배경 및 목적) 가상현실(VR) 기술이 음악 산업에서 새로운 공연 형태로 부각되면서 VR 콘서트의 시청각적 요소가 사용자 경험에 미치는 영향에 대한 실증적 연구의 필요성이 증가하고 있다. 그러나 기존 연구들이 영화나 게임 분야에 집중되어 있어, VR 콘서트 환경에서의 시청각적 요소에 대한 실증적 연구는 부족한 실정이다. 따라서 본 연구는 가상 환경 콘서트의 시청각적 단서에 대한 사용자의 주의집중도와 감정 반응에 미치는 영향을 체계적으로 분석하고자 한다. (연구방법) 본 연구는 실험연구와 컴퓨터 비전 분석을 결합한 다층적 분석 방법을 채택하였다. VR 콘텐츠 체험 경험이 있는 20-30대 참가자 30명을 대상으로 3분 13초 길이의 VR 콘서트 관람 중 무선 뇌파측정기(NeuroNicle FX2)를 통해 뇌파(RBA)를 측정하고, Self-Assessment Manikin(SAM) 설문을 실시하였다. 수집된 데이터 중 유효한 23명의 데이터를 분석하여, 주의집중도가 최고조에 달한 두 구간(중기: 71.84-83.83초, RBA 130,140, 후기: 144.70-154.69초, RBA 150)을 도출하였다. SAM 문항의 응답자의 88%가 앞서 언급한 두 구간을 긍정적 감정이라 답했다. 따라서 이 구간들의 시청각적 특성을 OpenCV와 K-means 클러스터링, YOLOv8, Librosa를 활용하여 정량적으로 분석하였다. (결과) 시각적 단서 분석 결과, 두 구간 모두에서 100 이상의 고휘도가 지속적으로 유지되었으며, Blue 채널이 우세한 가운데 Yellow(R+G)와 Purple(R+B) 계열과의 급격한 전환이 발생했다. 중기 구간에서는 아티스트가 화면의 10% 이하를 차지하며 불꽃, 레이저, 홀로그램 등 다양한 특수효과와 상호작용한 반면, 후기 구간에서는 아바타 관객이 70-85%의 화면을 점유하며 안정적 구성을 유지하며 배경 효과를 포함한 특수효과의 변화를 주었다. 카메라 샷 분석에서는 중기가 미디엄 샷, 미디엄 롱 샷과 익스트림 롱 샷의 다채로운 전환을, 후기는 미디엄 샷과 익스트림 롱 샷의 단순 구성을 보였다. 청각적 분석에서는 중기가 진폭 상승과 고주파 대역 강화를 통한 역동적 특성을, 후기는 일정한 비트 패턴과 저주파 대역 강조를 통한 안정적 패턴을 보였다. (결론) 본 연구는 VR 콘서트에서 시청각적 요소들이 상호보완적으로 작용하여 사용자의 주의집중과 감정 반응을 조절함을 실증적으로 규명하였다. 특히 고휘도 유지와 색상 전환, 특수효과의 복합적 활용, 그리고 이에 조응하는 음향 패턴이 주의집중도 향상에 기여함을 확인하였다. 이러한 결과는 실감형 콘텐츠 제작을 위한 구체적 가이드라인으로 활용될 수 있으며, 향후 VR 공연 제작의 질적 향상에 기여할 것으로 기대된다.

영어초록

(Background and Purpose) As virtual reality (VR) technology has emerged as a novel performance mode in the music industry, there is a growing need for empirical research on the impact of the audiovisual elements of VR concerts on user experience. However, empirical research on such audiovisual elements is lacking as most existing studies have focused on these elements in movies and games. Therefore, this study aimed to systematically analyze the effects of audiovisual cues in virtual concert environments on users’ attention and emotional responses.
(Method) This study adopted a multilayered analysis method that combines experimental research and computer vision analysis. Thirty participants in their 20s and 30s who had experience with VR content were asked to complete the Self-Assessment Manikin questionnaire while watching a 3-minute, 13-second VR concert using a wireless electroencephalograph (NeuroNicle FX2) to measure their brain waves (RBA). From the collected data, we analyzed the data of 23 valid participants. We identified two peak periods of attention (mid: 71.84–83.83 seconds, RBA 130, 140; late: 144.70–154.69 seconds, RBA 150). Because 88% of the respondents reported positive emotions in the two intervals, the audiovisual characteristics of these intervals were quantitatively analyzed using OpenCV, K-means clustering, YOLOv8, and Librosa. (Results) The analysis of visual cues revealed that a luminance of over 100 nm was consistently maintained in both segments, with the blue channel dominating and a sharp transition to the yellow (R + G) and purple (R + B) color families. In the mid-period, the artist occupied less than 10% of the screen and interacted with several special effects, including pyrotechnics, lasers, and holograms. In the late period, the avatar audience occupied 70%–85% of the screen, maintaining a stable composition and varying the special effects, including the background effects. Regarding the camera shot analysis, the mid-period showed a colorful transition between medium shots, medium -long shots, and extremely long shots, whereas the late period showed a simple composition of medium and extremely long shots. In the auditory analysis, the middle period exhibited dynamic characteristics with rising amplitudes and high-frequency band reinforcement, whereas the latter period exhibited a stable pattern with a constant beat pattern and low-frequency band emphasis. (Conclusions) This study empirically demonstrated that audiovisual elements in VR concerts act complementarily to modulate users’ attention and emotional responses. In particular, we found that maintaining a high brightness, color transitions, special effects, and matching sound patterns contributed to enhancing attention. These results can be used as specific guidelines for producing immersive content and are expected to contribute to improvements in the quality of VR performance production in the future.

참고자료

· 없음