개체명 분석 및 개체 연결 말뭉치 구축의 현황과 문제점 (Current Status and Outstanding Problems in Named-Entity Analysis and Entity Linking)

서지정보

· 발행기관 : 한림대학교 한림과학원
· 수록지 정보 : 개념과 소통 / 30호 / 377 ~ 415페이지
· 저자명 : 신서인, 이수현, 박진현, 김나현

초록

개체명 분석은 텍스트에서 개체명을 탐색해 일정한 하위 부류로 분류하고 적절한 태그를 부착하는 것으로, 자연언어처리를 이용한 정보 검색, 문서 요약, 자동 질의응답 시스템 구축, 지식베이스 구축 등의 다양한 목적으로 활용될 수 있다. 개체 연결은 분석된 개체명에 위키피디아와 같은 지식베이스 문서를 연결하는 것으로, 사용자에게 사전적 의미를 넘어서는 다양한 정보를 제공할 수 있다. 언어학뿐만 아니라 산업 전반에 걸친 이러한 활용도를 고려하면, 보다 양질의 데이터를 구축할 필요가 있음이 분명하다. 이를 위해 이 논문은 개체명 분석 말뭉치 및 개체 연결 말뭉치 구축 과정에서 발생한 문제들을 논의하고 해결 방안을 모색하고자 했다. 먼저 개체명 분석 말뭉치 구축 과정에서는 개체명 분석 대상 결정의 문제, 개체명 분석 단위 결정의 문제, 개체명 분석 표지 부착의 문제 등이 있음을 논의하고 이 문제들에 대한 대안을 제시했 다. 다음으로 개체 연결 말뭉치 구축 과정에서는 개체 연결 단위의 문제, 지식베이스 자체가 갖는 문제, 동일한 언어 표현의 개체명이 여러 위키피디아 문서에 대응하는 문제 등이 있음을 논의하고 이 문제들에 대한 대안을 제시했다. 마지막으로 개체명 사전 구축 과정에서 발생하는 문제를 살펴보고 이를 극복하는 방안을 제시했다. 이논문에서 제시한 문제점을 극복한다면 개체명 분석 단계에서 명확성과 일관성을 확보해 양질의 데이터를 구축할 수 있을 것이다. 또한 개체 연결 단계에서 체계성 및 일관성을 제고해 활용 목적에 알맞은 정보를 제공할 수 있을 것이다.

영어초록

Named-entity analysis searches for a named-entity in texts, classifying the occurrences into specified subclasses, and attaching appropriate tags.
Named-entity corpora derived from this process can be used for various purposes, such as information retrieval, document summarization, automatic question-answering system construction, and knowledge base construction.
Entity linking connects a named-entity to a knowledge base document such as Wikipedia. Entity linking corpora can be used to differentiate the meanings of named-entities. This paper discusses and seeks solutions to some problems encountered in the process of constructing named-entity corpora and entity linking corpora.
First, for named-entity corpora, the choice of analysis target, analysis unit, and named-entity tag is discussed, and alternatives approaches considered. Next, there is a discussion of entity linking corpus construction, problems with the entity linking unit, with the knowledge base itself, and with a named-entity corresponding to multiple Wikipedia documents: again alternative approaches are suggested. Lastly, problems which occur in the construction of a named-entity dictionary are examined, and ways to overcome them are presented. The problems identified in this paper and the solutions proposed contribute towards building high-quality data by securing clarity and consistency in name-entity analysis. Ultimately, by improving the consistency of the entity linking and making it more systematic, it should be possible to provide information suitable for easier and more widespread utilization.

참고자료

· 없음