시각장애인 꿈의 비시각 감각 시각화를 통한 예술성 연구 -교차감각적 대응과 초정상자극의 확장- (Exploring the Artistic Potential of Visualizing Non-Visual Senses in the Dreams of the Visually Impaired -Expansion of Cross-Modal Correspondence and Supernormal Stimuli-)

서지정보

· 발행기관 : 한국공간디자인학회
· 수록지 정보 : 한국공간디자인학회 논문집 / 20권 / 1호 / 217 ~ 232페이지
· 저자명 : 김진경, 조택연

초록

(연구배경 및 목적) 시각장애인의 꿈은 청각, 촉각, 후각, 미각 등 비시각적 감각 경험이 심화된다는 점에서, 그 설명 언어 또한 독창적인 상징과 과장을 포함할 가능성이 높다. 본 연구는 시각장애인의 꿈 설명 언어 속 비시각 감각 정보를 교차감각적 대응 이론에 따라 시각화하고, 그 결과물이 초정상 자극으로 작용하는지를 분석함으로써, 시각장애인도 언어를 매개로 시각예술을 창작할 수 있음을 학술적으로 검증하는 것을 목표로 한다. 이 연구는 시각 중심적 예술 패러다임을 확장하여 다감각 예술에 대한 학술적 근거를 마련하고, 시각장애인의 예술 활동 가능성을 새롭게 제시하는 데 의의가 있다. 특히, 시각장애인의 ‘비시각 감각’이라는 특수한 신체적·인지적 경험을 예술로 전환하는 과정은, 장애인 예술 연구 및 인지과학적 예술 분석의 새로운 방법론으로 평가될 수 있으며, 나아가 포용적(inclusive) 예술 생태계 구축과 예술 창작의 다양성 확대에 기여할 수 있다. (연구방법) 본 연구는 DREAMBANK 데이터에서 추출한 137개의 선천적 시각장애인의 꿈 설명 언어를 대상으로 청각, 촉각, 후각, 미각 등의 감각적 표현이 포함된 문장을 선별한 후, 교차감각대응 이론에 따라 색상, 형태, 질감 등의 시각언어로 환원하는 매핑 규칙을 적용하였다. 환원된 언어는 인공지능(AI)을 활용하여 이미지로 생성하고 예술성을 평가하였다. 평가는 색채, 형태, 질감 등 외형적 요소를 기반으로 한 시각적 평가, 작품의 상징성과 맥락적 의미를 해석하여 감상자의 경험과 연결하는 인지적 평가, 그리고 작품과 감상자 사이의 심미적 상호작용을 통한 인식적 평가로 진행되었다. 또한, 70명의 응답자를 대상으로 설문조사를 실시하여 시각장애인의 언어를 통한 시각예술 가능성과 감각적 표현의 예술적 가치를 다각도로 분석하여 연구 결과의 신뢰성을 강화하였다. (결과) 그 결과, 연구자와 설문 응답자 모두 교차감각 대응으로 환원된 이미지가 원래 꿈 이미지보다 더 높은 예술적 가치를 지닌다고 평가하였다. 환원된 이미지는 감각적 선명도와 직관성 측면에서 우위를 보였으며, 설문 응답자의 92.9%가 이러한 이미지가 새로운 예술 창작의 가능성을 열 수 있다고 응답하였다. 다만, 내러티브 요소에 대한 평가는 연구자와 설문조사에서 차이를 보였다. 연구자 평가는 원래 꿈 이미지가 교차감각 대응으로 환원된 이미지보다 이야기 전달력에서 강점을 갖는다고 평가하였다. 이는 교차감각 대응 이미지가 초정상 자극으로 작용하여 감각적 요소는 강화하였으나, 내러티브 전달력에서는 원래 꿈의 이야기 구조와 정서적 연속성이 다소 희석된 것으로 해석된다. 그러나 설문조사 정답률 분석에서는 두 이미지 모두 맥락을 효과적으로 유지하고 있음을 보여주었다. (결론) 본 연구는 시각장애인의 꿈 설명 언어가 교차감각적 대응 이론을 통해 시각화될 때, 초정상 자극 개념에 부합하는 높은 감각적 선명도와 정서적 반응을 유발함을 실증적으로 확인하였다. 이 연구는 시각장애인도 언어를 매개로 시각예술을 창작할 수 있음을 뒷받침하는 중요한 증거이며, 다감각 예술 표현의 지평을 넓히는 학술적 시사점을 제공한다. 그러나, 연구 결과에 따르면 지각 층위에서는 직관적이고 집중도를 높이는 시각 자극이 제공되었으나, 인지 층위에서는 꿈의 복합적 내러티브와 정서를 온전히 전달하지 못하는 한계를 보였다. 이는 감각적 환원만으로는 꿈이 지니는 전체적 맥락과 정서를 모두 포착하기 어렵다는 점을 시사한다. 향후 연구에서는 꿈 설명 언어에 담긴 정서적·맥락적 요소를 보다 정교하게 반영하는 환원 기법을 개발함으로써, 시각장애인의 예술 창작 활동이 더욱 다양하고 깊이 있게 확장될 것으로 기대된다.

영어초록

(Background and Purpose) Individuals with visual impairments experience heightened non-visual sensory inputs, including auditory, tactile, olfactory, and gustatory sensations, leading their dream descriptions to exhibit unique symbolism and exaggeration. This study applies cross-modal correspondence theory to visualize non-visual information, demonstrating that the resulting images can function as supernormal stimuli. Thus, we aim to provide scholarly evidence that individuals with visual impairments can create visual art through language. This objective expands the conventional visual arts paradigm, establishes a theoretical foundation for multi-sensory art, and suggests new creative opportunities for visually impaired artists. Furthermore, transforming bodily and cognitive experiences of non-visual sensation into art introduces a novel methodology in disability art research and cognitive-scientific art analysis, while fostering inclusivity and diversity in artistic creation. (Method) From the DREAMBANK dataset, this study collected dream descriptions from 137 individuals with congenital visual impairments. We identified sentences containing auditory, tactile, olfactory, or gustatory expressions and mapped them to visual elements (color, shape, texture) based on cross-modal correspondence. Next, these linguistic contents were converted into images using artificial intelligence (AI), and their artistic merits were evaluated. The evaluation encompassed three dimensions: (1) Visual Assessment, examining external elements such as color, form, and texture; (2) Cognitive Assessment, interpreting symbolic and contextual meaning; and (3) Recognition-based Assessment, focusing on aesthetic interactions between artwork and viewer. A survey of 70 participants was conducted to verify the artistic potential of visually impaired individuals’ linguistic expressions and the value of their sensory descriptions. (Results) Both the researchers and survey participants found that cross-modally generated images exhibited higher artistic value than the original dream imagery. These images demonstrated greater sensory vividness and intuitive appeal, with 92.9% of respondents affirming their potential to expand creative possibilities. However, discrepancies were observed in narrative evaluation: while researchers concluded that the original dream images had stronger storytelling capacity, the converted images, though functioning as supernormal stimuli, diminished the continuity of the dream’s structure and emotional flow. Nevertheless, survey results confirmed that both types maintained contextual coherence effectively. (Conclusions) By empirically verifying that dream descriptions of visually impaired individuals, when visualized through cross-modal correspondence, can function as potent supernormal stimuli, this study underscores the possibility of visual art creation through language. While sensory clarity and intensity were enhanced, the complex narratives and emotional subtleties inherent in the original dreams were not fully conveyed. These findings suggest that sensory translation alone may be insufficient to capture the complete emotional and contextual landscape of the original dream. Future research should refine methods for integrating emotional and contextual elements into the translation process, paving the way for richer and more diverse artistic expressions for visually impaired individuals.

참고자료

· 없음