앙상블 기후 시뮬레이션 지원을 위한 데이터팜 시스템 설계 (Design of Datafarm System for Supporting an Ensemble based Climate Simulation)

서지정보

· 발행기관 : 한국정보기술학회
· 수록지 정보 : 한국정보기술학회논문지 / 11권 / 1호 / 159 ~ 167페이지
· 저자명 : 강윤희, 궁상환, 강경우, 김백민, 장행진, 유성윤

초록

과학기술분야에서 시뮬레이션 기반의 과학데이터 실험을 통해 축적되는 데이터양은 고성능 컴퓨팅 자원과 대용량 저장장치의 보급으로 크게 증가되고 있다. 과학기술분야 시뮬레이션을 위해서는 대부분 실험용 대용량 데이터의 전처리 및 후처리가 요구된다. 전처리와 후처리를 위한 작업은 시뮬레이션이 수행되는 자원과는 다른 환경에서 수행된다. 이 때문에 전처리 및 후처리 작업을 위해서는 WAN 환경에서의 대용량 데이터의 전송이 필수적이다. 논문의 응용분야인 기후 시뮬레이션분야도 결과 데이터를 시뮬레이션이 이루어진 데이터팜에서 데이터 분석을 위한 연구자의 작업환경으로 전송하는 작업이 반복적으로 수행된다. 이러한 반복적 과정은 많은 작업시간을 초래한다. 이 논문에서는 기후 모델링 시뮬레이션 지원을 위한 데이터팜 시스템의 설계를 기술한다. 설계된 데이터팜 시스템은 기후 예측을 위한 앙상블(Ensemble) 시뮬레이션을 지원하며 자료의 이동을 위해 OODT의 pushpull 프레임워크를 이용하여 처리한다.

영어초록

In the science and technology research area, the volume of data has been growing according to data accumulated by simulation based scientific data experiments which are carried out under HPC resources and stored large scale storage systems. Most of those simulations require pre-processing and post-processing of large scale data. These processes are running on the other side of which the simulation is proceeded. In this reason a data delivery for pre- and post-processing should be done between the simulation place and the researcher' work place in a WAN environment. In the science area of climate simulation, data delivery from a data farm to researchers' workspace for analyzing input data is occurred repeatedly. This data movement has characteristics of time consuming and routinely occurring. In this paper we describe the design of data farm system to support Ensemble based climate simulation that is used for predicting the future climate environment. In order for efficient data movement in the designed data farm system we use the pushpull framework provided by OODT.

참고자료

· 없음