KMTNet Real-Time Data Processing Status

  • Published : 2018.05.08

Abstract

외계행성 탐색시스템으로 관측한 영상은 한국천문연구원 본원에 있는 자료처리 시스템으로 실시간 전송된다. 이를 위해 한국과학기술정보연구원이 운영 중인 첨단망과 UDP 전송 프로그램을 활용하고 있으며 연간 약 140TB의 관측 영상을 칠레 55Mbps, 남아공 39Mbps, 호주 410Mbps의 속도로 전송하고 있다. 관측 영상이 전송되면 MEF 포맷으로 구조화 하고 bias, flat, crosstalk 보정과 bad pixel masking 등의 전처리 과정을 거쳐 각 연구과제별로 실시간 배포하고 있다. 중력렌즈 연구를 위한 우리 은하 중심부 관측영상은 차감영상 기법을 사용하여 약 3억 개의 별에 대해 측광하고 있으며, $18K{\times}18K$ 크기의 대용량 관측 영상을 빠르고 효율적으로 처리하기 위해 256개로 분할하여 분산처리하고 있다. 2014년부터 자료처리를 위한 시스템을 구축하고 증설하였으며 현재 11대의 서버(212Core)와 2.7PB의 NAS 스토리지를 운영하며 연간 700TB이상의 자료를 처리하고 있다. 우리은하 중심부 측광자료에서 검출된 변광 현상을 정리하여 측광데이터베이스를 구축하였다. 본 발표에서는 KMTNet 실시간 자료처리 과정에 대한 상세한 내용과 향후 자료처리 시스템 개선방향에 대해 소개한다.

Keywords