고이해득실상황에서 나타나는 거짓말의 단서로서 얼굴 표정 분석: 정서적 얼굴 표정과 미소의 표정을 중심으로 (Deception detection through emotional facial expression analysis in high-stakes situations: Focusing on emotional facial expressions and smiles)

서지정보

· 발행기관 : 부산울산경남언론학회
· 수록지 정보 : 지역과 커뮤니케이션 / 28권 / 3호 / 36 ~ 66페이지
· 저자명 : 김대중, 박지혜

초록

본 연구는 정서적 얼굴 표정에 의한 거짓말 탐지 가능성을 고이해득실상황으로 설계된 모의절도 실험을 통해 살펴보고자 했다. 특히 본 연구에서는 정서표현규칙이 작동되는 심문이라는 특수한 대인커뮤니케이션에서 나타나는 다양한 형태의 미소가 거짓말의 단서가 되는지를 주목했다. 실험에는 전체 120명이 참여했고 최종 분석에는 118명의 자료가 활용되었다. 실험은 정해진 시나리오에 따라 진행되었다. 실험참여자에게는 할당된 조건에 따라 20만원을 절취하거나 혹은 절취하지 않을 수 있는 기회가 제공된다. 이어서 현금 절취 행위에 대한 면대면 심문을 받게 되는데, 실험참여자는 현금 절취 여부에 관계없이 현금을 훔치지 않았다고 진술하게 된다. 따라서 현금을 절취했으면 거짓을, 절취하지 않았으면 진실을 진술하게 된다. 얼굴 표정 코딩을 위해 심문이 진행되는 동안 실험참여자의 얼굴은 녹화되었다. 실험참여자의 얼굴표정은 보편적 정서인 기쁨, 놀람, 슬픔, 분노, 공포, 혐오, 경멸을 대상으로 정서적 얼굴변화부호체계를 사용해 코딩되었다. 이중 기쁨의 얼굴표정은 즐거운 미소, 꾸민 미소, 유쾌한 미소, 억제된 미소로 세분화되어 코딩되었다. 주요 연구 결과는 다음과 같이 나타났다. 먼저 정서적 얼굴 표정은 기쁨이 다른 정서보다 높게 나타났다. 둘째, 성별에 따른 미소의 차이가 나타났는데, 남자들은 즐거운 미소를 여자들은 유쾌한 미소를 보이는 경향이 나타났다. 마지막으로 진실성에 따른 차이는 여자 집단 내에서 유쾌한 미소와 억제된 미소에서만 나타났는데, 거짓을 말할 때 다른 미소에 비해 유쾌한 미소와 억제된 미소의 비중이 높게 나타났다. 이러한 연구결과를 종합하면, 정서적 얼굴 표정 분석을 통한 거짓말 탐지는 어려움이 있으며, 특히 각 문화마다 고유하게 존재하는 정서표현규칙의 작동이 거짓말 탐지의 장애 요인이 된다고 볼 수 있다.

영어초록

The study aimed to investigate the possibility of detecting lies through emotional facial expressions in a simulated theft scenario. Specifically, the study focused on various forms of smiles observed in interpersonal communication, particularly within the context of face-to-face interviews related to cash theft. A total of 120 people participated in the experiment, but data from 118 participants (51 male, 67 female) were used in the final analysis. The experiment was conducted according to a predetermined scenario. Participants were given the opportunity to steal or not steal 200,000 Korean won. Subsequently, they underwent face-to-face questioning about their involvement in the theft, regardless of whether they actually stole the money. Participants were instructed to state whether they stole the money (lie) or did not steal it (truth). Facial expressions were recorded during the interviews for emotion coding. The study coded facial expressions related to universal emotions such as joy, surprise, sadness, anger, fear, disgust, and contempt. Specifically, joyful expressions were further categorized into Duchenne smile, posed smile, controlled smile, amusement smile. The findings are summarized as follows. First, the facial expressions of joy showed more frequently compared to other emotional facial expressions. Second, gender differences in smiles were found, with males displaying more Duchenne smile and females showing more amusement smile. Last, differences by veracity were found only within the female group, where a higher proportion of amusement and controlled smiles were present when telling lies compared to other smiles. Taken together, these research findings suggest that detecting deception through emotional facial expression analysis is challenging, particularly due to the operation of emotional display rules that exist within each culture, which can hinder accurate deception detection.

참고자료

· 없음