공문을 보내면 네이버는 검색 알고리즘을 바꾸는가? 알고리즘 책무성 관련 증거 기반 논의 (Does Naver Alter Search Results upon Request? Transparency and Accountability of Algorithms)

서지정보

· 발행기관 : 한국언론학회
· 수록지 정보 : 커뮤니케이션 이론 / 19권 / 2호 / 55 ~ 105페이지
· 저자명 : 윤호영, 진보래

초록

본 연구는 알고리즘의 편향성 또는 공정성 문제와 관련하여, 알고리즘 운영 결과를바탕으로 검증하는 책무성 기반 검증의 필요성을 제기한다. 근간에 사회적으로 주목받았던 알고리즘 검증 관련 이슈들을 살펴보면, 운영 기관이 알고리즘의 내용을 설명하는 투명성을 추구하면서 알고리즘이 특정한 결과를 유도하지 않는다는 방식의 해명이 주를 이루고 있다. 그리고 이 과정에서 투명성과 책무성을 실천하기 위해 노력했음을 역설하기도 한다. 그러나, 본 연구에서는 알고리즘의 내용이 특별한 설명없이 조용히 변경되어 운영된 사례를 실제 데이터를 통해 살펴보면서 알고리즘 검증은 투명성 설명으로만은 부족하며 알고리즘 적용 후 나타나는 결과 및 알고리즘 변경에 대한 끊임없는 설명이 동반되는 책무성 기반 논의가 중요하다는 점을 논증했다. 최근 네이버는 한 시민단체의 문제제기 이후 선택적으로 이미지 검색 결과를 변경하였는데, 변경 내용이나 이유에 대해 아무런 설명을 제공하지 않고 있다. 이에 본 연구에서는 알고리즘 변경 전후의 이미지 검색 결과를 수집하여 알고리즘이 어떤방식으로 변경되었는지 추정하였다. 분석 결과, 이미지 검색 알고리즘이 개선된 것이 아닌, 문제가 된 항목들의 일부만 ‘복합어 검색 결과로의 결과 교체’, ‘유사어 검색 결과로의 대체’, 그리고 ‘자동완성 검색어로의 대체’가 이루어진 것을 확인했다. 이 결과는 알고리즘 자체 투명성 기반 검증만으로는 알고리즘의 편향성 검증은 불충분하다는 점을 보여줌과 동시에 이와 관련된 사회적 논의의 필요성을 제기하고 있다. 본 연구는 향후 알고리즘 검증이 투명성 중심이 아닌 책무성을 기반으로 하여 알고리즘이 작동한 결과를 평가하고 모니터링하는 방식으로 이루어져야 할 필요성을 실제 데이터를 통해 확인했다는 데 의의가 있다.

영어초록

The growing concerns about bias or the fairness of algorithms have sparked intense debates and controversies surrounding the transparency and accountability of algorithmic systems. In this study, we present compelling evidence of algorithm alteration by the platform company, NAVER. In mid-2022, a non-profit organization brought attention to the appearance of sexually objectified images of women appearing in image search results on portal sites for unrelated search queries. The organization publicly disclosed 33 problematic words. Due to our pre-existing interest in this matter, we closely monitored the responses from the companies involved. Promptly, Naver adjusted its image search results. We conducted a comparative analysis, presenting the image search results before and after the modifications for the words mentioned in the organization’s announcement. Our findings shed light on several critical concerns regarding Naver’s algorithm operation.
Primarily, the algorithm alterations seemed arbitrary, with problematic search words being replaced by other relevant words or autocomplete suggestions. Also, Naver selectively addressed only a portion of the 33 words, and further, Naver did not offer any explanations or responses to the organization or its users. These observations raise questions about the transparency and accountability of algorithms employed by the platform. We argue that platform companies should not only clarify the functioning of their algorithms but also disclose instances and methods of algorithm moderation. Furthermore, we emphasize the urgent need for an ethical framework that holds platform companies responsible and accountable throughout the entire process of algorithm development, implementation, and the resulting consequences.

참고자료

· 없음