중국학 데이터 크롤링 전략과 시각화 플랫폼 분석 (Analysis of Chinese Studies Data Crawling Strategy and Visualization Platform)

서지정보

· 발행기관 : 한국외국어대학교 중국연구소
· 수록지 정보 : 중국연구 / 84권 / 65 ~ 96페이지
· 저자명 : 박정원

초록

온라인에는 많은 정보가 존재하고 많은 사용자가 공동으로 구축한 다양한 데이터가 존재한다. 이러한 데이터를 활용함으로써 그동안 연구자나 교육자들이 도달할 수 없었던 방향으로 연구와 교육의 영역을 확장할 수 있다.
첫째, 중국학 연구의 측면에서 보면 연구자의 시각에서 텍스트를 분석하고 해석하여 자신의 논리를 전개하는 주제 중심의 연구도 유의미하지만, 커넥트 시대에 온라인(웹, 앱)에 존재하는 데이터를 수집하여 그 의미를 분석하고 해석하는 것도 유의미한 연구라 할 수 있다. 특히 온라인에서 실시간으로 방대하게 축적되는 데이터를 위법하지 않는 범위내에서 웹 크롤링(web crawling) 기법으로 수집하고 데이터 시각화툴로 표현한다면 그동안 분석할 수 없었던 상황이나 경향을 분석할 수 있을 것이다.
둘째, 중국학 교육의 측면에서 보면, 그동안 종이나 웹에 평면적으로, 분석적으로 존재하는 다양한 데이터를 수집하여 통일성있게 정리하고 그래프, 지도 등으로 표현함으로써 데이터를 상호비교하고, 직관적으로 인식하게 하며, 변화추이 등을 입체적으로 보여줄 수 있는 점은 강점이라 할 수 있다. 또한 이러한 데이터 시각화 결과물을 웹퍼블리싱을 수행한다면 그 효과는 극대화될 것이다.
즉 살아있는 데이터를 실시간으로 수집하고 데이터 시각화툴과 결합하여 표현력을 극대화하고 반응형, 개방형 웹아카이브에 서비스를 한다면 모든 사람이 수월하게 접근할 수 있는 살아 숨쉬는 데이터를 구현할 수 있을 것이다. 방대한 양의 데이터는 데이터의 정밀성은 강화할 수 있으며, 크롤링 기법을 이용하여 간단하게 데이터를 수집하고 정제하여 시각화한다면 연구와 교육의 경쟁력을 강화할 수 있을 것이다. 또한 그동안 수동작업으로 도달할 수 있는 연구와 교육의 영역을 확장시킬 수 있을 것이다.

영어초록

There is a lot of information online and a variety of data that many users jointly build. By utilizing these data, the scope of research and education can be extended in a way that researchers or educators have not been able to reach.
First, from the point of view of Chinese studies, the subject-centered study of analyzing and interpreting text from the researcher's point of view to develop one's own logic is also significant, but it is also a significant study to analyze and interpret the meaning of data existing online (web, app) in the era of Connect. In particular, if the vast amount of data accumulated online in real time is collected in web crawling techniques and expressed in a data visualization tool to the extent that it is not illegal, it will be possible to analyze situations or trends that have not been analyzed before.
Second, from the perspective of Chinese studies education, the strength is that data can be compared, intuitively recognized, and shown in three dimensions by collecting various data that exist on paper or the web in a flat and analytical manner, and expressing it in a graph, map, etc. Web publishing of these data visualizations will also maximize their effectiveness.
Collect live data in real time and combine it with data visualization tools to maximize expressiveness and provide services to reactive, open Web archive so that everyone can easily access live data. The vast amount of data can enhance the precision of the data, and simply collect, refine and visualize the data using crawling techniques will enhance the competitiveness of research and education. Through this study, the general researchers hope to perform data crawling and visualization as a basis for application to the study.

참고자료

· 없음