• Title/Summary/Keyword: 자료 전처리

Search Result 472, Processing Time 0.036 seconds

A Research Trend of Pretreatment in Bioethanol Production Process with Lignocellulosic Biomass: A Literature Review (목질계 바이오에탄올 생산의 전처리 기술에 관한 연구동향)

  • Kim, Yeong-Suk
    • Journal of the Korean Wood Science and Technology
    • /
    • v.37 no.3
    • /
    • pp.274-286
    • /
    • 2009
  • Lignocellulosic biomass is the most abundant raw material for bioconversion in many country. However the high costs for pretreatment and enzymatic hydrolysis currently deter commercialization of lignocellulosic biomass, especially wood biomass which is considered as the most recalcitrant material for enzymatic hydrolysis mainly due to the high lignified structure and the nature of the lignin component. Therefore, overcoming recalcitrance of lignocellulosic biomass for converting carbohydrates into intermediates that can subsequently be converted into biobased fuels and biobased products is the primary technical and economic challenge for bioconversion process. This study was mainly reviewed on the research trend of pretreatment with lignocellulosic biomass in bioethanol production process.

Flood Monitoring Using Satellite Images and Digital Map Data (위성영상과 수치지도자료를 이용한 홍수지역 현황 분석)

  • 손홍규;장훈성;송영선
    • Proceedings of the Korean Association of Geographic Inforamtion Studies Conference
    • /
    • 2003.04a
    • /
    • pp.35-39
    • /
    • 2003
  • 본 연구에서는 1998년 8월 12일 홍수가 발생했을때 충청북도 옥천, 보은 지역을 촬영 한 RADARSAT 위성영상을 이용하여 수계지역 추출 및 홍수지역 모니터링을 수행하였다. 이를 위해서 RADARSAT 영상에 대해 전처리를 수행하고, 전처리된 영상과 수치고도모형으로부터 생성된 경사도 자료를 이용하여 홍수발생시 수계영역을 추출하였다. 추출된 수계영역과 기존의 토지이용 현황도를 이용하여 침수지역의 현황을 분석하고, 토지이용별 침수면적을 산정하였다. 나아가 수치고도모형과 홍수시 수계를 이용하여 금강권 유역의 호우로 인해 증가된 유량을 간접적으로 산정하였다.

  • PDF

Pre-screening technique for MT and GDS data processing based on the spectral power of Electromagnetic field (전자기장의 분광 에너지에 기반한 MT 및 GDS 자료의 전처리 기법 연구)

  • Yang, Jun-Mo;Kwon, Byung-Doo
    • 한국지구물리탐사학회:학술대회논문집
    • /
    • 2006.06a
    • /
    • pp.253-258
    • /
    • 2006
  • The Korean peninsula has been known to be very difficult to acquire clean MT and GDS data due to its highly industrialization and civilization. In this environment, a pre-screening step selecting data segments with a proper S/N ration is an essential one. This study modified the automatic pre-screening step based on the spectral power of electromagnetic field (RMP) taking account of the situation of the Korean Peninsula. The modified RMP technique was applied to MT data measured at seven sites located in middle part of the peninsula. In the whole sense, the RMP technique considerably improved the connectivity of apparent resistivity and phase curves around the period of 10 sec. In addition, the results processed by the RMP technique showed a very little difference with those derived from manual editing, and the superior performance of it is found especially in the connectivity of apparent resistivity curve.

  • PDF

A Study on data pre-processing for rainfall estimation from CCTV videos (CCTV 영상 기반 강수량 산정을 위한 데이터 전처리 방안 연구)

  • Byun, Jongyun;Jun, Changhyun;Lee, Jinwook;Kim, Hyeonjun;Cha, Hoyoung
    • Proceedings of the Korea Water Resources Association Conference
    • /
    • 2022.05a
    • /
    • pp.167-167
    • /
    • 2022
  • 최근 빅데이터에 관련된 연구에 있어 데이터의 품질관리에 대한 논의가 꾸준히 이뤄져 오고 있다. 특히 이미지 처리 및 분석에 활용되어온 딥러닝 기술의 경우, 분류 작업 및 패턴인식 등으로부터 데이터의 특징을 추출함으로써 비지도학습(Unsupervised Learning)을 가능하게 한다는 장점이 있음에도 불구하고 빅데이터를 다루는 과정에 있어 용량, 다양성, 속도 및 신뢰성 측면에서의 한계가 있었다. 본 연구에서는 CCTV 영상을 활용한 강수량 산정 모델 개발에 있어 예측 정확도 향상 및 성능 개선을 도모할 수 있는 데이터 전처리 방법을 제안하였다. 서울 근린 AWS 4개소 지역(김포장기, 하남덕풍, 강동, 성남) 및 중앙대학교 지점 내 CCTV를 설치한 후, 최대 9개월의 영상을 확보하여 강수량 산정을 위한 딥러닝 모델을 개발하였다. 배경분리, 조도조정, 영역설정, 데이터증진, 이상데이터 분류 등이 가능한 알고리즘을 개발함으로써 데이터셋 자체에 대한 전처리 작업을 수행한 후, 이에 대한 결과를 기존 관측자료와 비교·분석하였다. 본 연구에서 제안한 전처리 방법들을 적용한 결과, 강수량 산정 모델의 예측 정확도를 평가하는 지표로 선정한 평균 제곱근 편차(Root Mean Square Error; RMSE)가 약 30% 감소함을 확인하였다. 본 연구의 결과로부터 CCTV 영상 데이터를 활용한 강수량 산정의 가능성을 확인할 수 있었으며 특히, 딥러닝 모델 개발시 필요한 적정 전처리 방법들에 대한 기준을 제시할 수 있을 것으로 판단된다.

  • PDF

Integeation Test of Coms Image Data Acquisition and Control System (통신해양기상위성 송수신자료전처리시스템 통합 시험)

  • Lim, Hyun-Su;Ahn, Sang-Il;Park, Durk-Jong
    • Journal of Astronomy and Space Sciences
    • /
    • v.25 no.4
    • /
    • pp.471-480
    • /
    • 2008
  • COMS Image Data Acquisition and Control System (IDACS) plays a key role in real time ground processing of Meteorological and Ocean observation data. Beyond processing, it serves processed image data and additional data to end users through the spacecraft in the internationally recommended format. The IDACS will be installed at three location (MSC, KOSC, and SOC) and automatically operated 24h/365days. After the IDACS subsystem tests and inter -subsystem interface tests had been completed in the first half of 2008, the acceptance test which was a comprehensive test performed as an integrated form to verify function performance and operational requirements. This paper introduces test objective, preparation, and major result of the COMS IDACS acceptance test.

Imaging Fractures by using VSP Data on Geothermal Site (지열지대 VSP 자료를 이용한 파쇄대 영상화 연구)

  • Lee, Sang-Min;Byun, Joong-Moo;Song, Ho-Cheol;Park, Kwon-Gyu;Lee, Tae-Jong
    • Geophysics and Geophysical Exploration
    • /
    • v.14 no.3
    • /
    • pp.227-233
    • /
    • 2011
  • Attention has been focused on geothermal energy as an alternative energy because it is continuously operable without external supply. Most of geothermal anomalies in Korea are related to deep circulation of groundwater through a fracture system in granite area. Therefore it is very important to understand the distribution of the fracture system which is the main channel of ground water. In this research, we constructed the velocity models with a fracture system and the layered sediments, respectively, and generated synthetic data sets with them to verify the presented vertical seismic profiling (VSP) preprocessing scheme. We compared the results from conventional VSP preprocessing flow to those from VSP preprocessing flow considering fracture system. We noticed that the preprocessing flow considering fracture system retains more sufficient signal including down-going wave than conventional preprocessing. In addition, we applied 3D VSP prestack phase screen migration to the preprocessed reversed VSP (RVSP) data from Seokmo Island so that we were able to image fracture structure of the geothermal site in Seokmo Island.

Evaluating Spectral Preprocessing Methods for Visible and Near Infrared Reflectance Spectroscopy to Predict Soil Carbon and Nitrogen in Mountainous Areas (산지토양의 탄소와 질소 예측을 위한 가시 근적외선 분광반사특성 분석의 전처리 방법 비교)

  • Jeong, Gwanyong
    • Journal of the Korean Geographical Society
    • /
    • v.51 no.4
    • /
    • pp.509-523
    • /
    • 2016
  • The soil prediction can provide quantitative soil information for sustainable mountainous ecosystem management. Visible near infrared spectroscopy, one of soil prediction methods, has been applied to predict several soil properties with effective costs, rapid and nondesctructive analysis, and satisfactory accuracy. Spectral preprocessing is a essential procedure to correct noisy spectra for visible near infrared spectroscopy. However, there are no attempts to evaluate various spectral preprocessing methods. We tested 5 different pretreatments, namely continuum removal, Savitzky-Golay filter, discrete wavelet transform, 1st derivative, and 2nd derivative to predict soil carbon(C) and nitrogen(N). Partial least squares regression was used for the prediction method. The total of 153 soil samples was split into 122 samples for calibration and 31 samples for validation. In the all range, absorption was increased with increasing C contents. Specifically, the visible region (650nm and 700nm) showed high values of the correlation coefficient with soil C and N contents. For spectral preprocessing methods, continuum removal had the highest prediction accuracy(Root Mean Square Error) for C(9.53mg/g) and N(0.79mg/g). Therefore, continuum removal was selected as the best preprocessing method. Additionally, there were no distinct differences between Savitzky-Golay filter and discrete wavelet transform for visual assessment and the methods showed similar validation results. According to the results, we also recommended Savitzky-Golay filter that is a simple pre-treatment with continuum removal.

  • PDF

Development of satellite precipitation process module based on QGIS (QGIS 기반 위성강수 처리 모듈 개발)

  • Kim, Joo Hun;Kim, Kyeong Tak;Jo, Minhye
    • Proceedings of the Korea Water Resources Association Conference
    • /
    • 2019.05a
    • /
    • pp.60-60
    • /
    • 2019
  • OECD 발표에 의하면 물산업 관련 인프라 투자 전망은 전세계 GDP 대비 2010~2020년 약 1.01%에서 2020~2030년 약 1.03%로 확대될 전망으로 다른 통신, 전력, 철도 인프라 투자수요보다 많을 것으로 전망하고 있다(파이넨셜 뉴스, 2013.3.21.). 우리나라는 2005년 베트남 홍강종합개발사업을 시작으로 2015년 기준으로 세계 35개국에 진출하고 있다. 그러나 대부분의 물 산업 진출 대상 국가는 미계측 유역이 많고 지상에서 계측된 수문 자료가 부족한 실정이다. Namgung and Lee(2014)에 의하면 네팔의 수력발전소 건설에 관측된 강우량 자료가 없어 발전소 하류 10km 지점의 유하량 자료를 이용하여 자료의 정확도 검증을 대신하여 적용한 바 있다. 이와 같이 계측자료가 없거나 부족한 지역에 대하여 기상 위성을 이용하여 추정된 강수량 자료가 해당 지역의 강수 특성을 파악하는데 중요한 자료로 이용될 수 있다. 글로벌 위성 기반의 강수량 관측에 대한 역사는 1979년에 IR방법에 의해 위성으로부터 강우자료를 유도하는 개념이 도입된 이후 1987년 다중 채널의 마이크로파(MW) 복사계를 이용한 방법, 이후 두 IR과 MW를 혼합한 방법에서, 1997년 TRMM위성의 PR(Precpipitation Radar)의 레이더를 이용하는 방법, 그리고 2014년 GPM 핵심 위성(GPM Core Observatory)에 탑재된 Dual PR에 의한 방법으로 위성강수의 정확도를 매우 높여가고 있다. 본 연구는 대표적인 위성강수인 IMERG(Integrated MultisatellitE Retrievals for GPM)의 활용성을 높이기 위해 QGIS 기반의 위성강수 전처리 모듈을 개발하는 것을 목적으로 하고 있다. 위성강수를 활용하기 위해서는 위성강수의 정확도 평가가 선행되어야 한다. 본 연구를 통해 2017년 7월 중부지방 및 충청도 지방에 내린 강수자료를 비교한 결과 상관계수가 약 0.7정도로 상관성이 높은 것으로 분석되었고, 2018년 8월 9호 태풍 솔릭(Solik)에 대한 1시간의 시간해상도 분석 결과 상관계수 0.624로 위성강수의 활용성이 있음을 입증하였다. IMERG 위성강수의 활용성을 높이기 위하여 HDF5 포맷의 원시자료를 활용이 용이한 Tiff 로 변환하는 기능에서부터 특정범위 및 특정지점 추출 기능, Resampling 기능 등을 포함하는 전처리 모듈을 개발하였다.

  • PDF

A Study on Development of the Meteorological Data Preprocessing Program for Air Pollution Modeling (대기오염 모델링을 위한 기상자료 전처리 프로그램 개발에 관한 연구)

  • Lim, Ik-Hyun;Bae, Sung-Hwan
    • The Journal of the Korea institute of electronic communication sciences
    • /
    • v.10 no.1
    • /
    • pp.47-54
    • /
    • 2015
  • Recently, rapid urbanization and industrialization had increased the air pollution in major cities by increasing the fuel consumption. Air pollution models have been widely used for air quality management in many countries. Also, a lot of related studies have been conducted using air dispersion models. In this study, The meteorological preprocessing program was developed to convert the korea meteorological data to the U.S. meteorological data and to expand the usability of air dispersion models of U.S. EPA. In addition, the usability evaluation was carried out through a case study. In the results of the evaluation of the program, this program was accurately convert the Korea meteorological data to the U.S. meteorological data, and the prediction was carried out without a error in air quality modeling. Therefore, the program showed a high utilization as meteorological data pre-processing tool.

Time Series Analysis of Agricultural Reservoir Water Level Data for Abnormal Behavior Detection (농업용 저수지 이상거동 탐지를 위한 시계열 수위자료 특성 분석)

  • Lee, Sung Hack;Lee, Sang Hyun;Hong, Min Ki;Cho, Jin Young
    • Proceedings of the Korea Water Resources Association Conference
    • /
    • 2015.05a
    • /
    • pp.275-275
    • /
    • 2015
  • 최근 기후변화에 따른 극한 강우사상의 증가로 인하여 농업용 저수지의 재해 위험도가 증가하고 있는 추세이며, 사고가 발생할 때 마다 파손/붕괴된 시설물을 보수하는 대응형 유지관리체계에서 벗어나 기반시설의 성능과 생애주기 등을 고려하여 재해 발생을 사전에 예보 및 경보를 알릴 수 있는 예방적 관리체계로의 전환이 필요하다. 한국농어촌공사는 전국 1,500개 저수지에서 10분 단위 수위자료를 측정하고 있으며, 이를 분석하여 재해예방에 활용할 수 있는 기반이 조성되어 있으나 이에 대한 관리가 이루어지지 않고 있고 수집된 자료를 활용하여 재해 징후를 분석할 수 있는 재해 예방적 분석기술이 마련되어 있지 않은 실정이다. 본 연구에서는 농업용 저수지 수위자료를 이용한 저수지 이상거동을 판별하기 위하여 전국 34개 한국농어촌공사 관할 저수의 시계열 수위자료의 특성(Feature)을 분석하고자 한다. 시계열 자료의 시계열 특성을 분석하기 위하여 한국농어촌공사 관할의 전국 34개 저수지를 선정하여 분석을 실시하였다. 대상저수지는 지역별, 저수용량, 안정등급, 붕괴발생, 1개 지사관할 저수지로 각각 구분하여 선정하였으며, 각 저수지의 수위 측정기간(최소 5개년)에 대한 자료를 수집하였다. 농업용 저수지의 시계열 수위 자료의 특성을 분석하기 위하여 자료의 전처리를 수행하였다. 자료의 전처리는 시계열 수위자료의 잡음 특성, 기상자료 관련 변동특성 등 분류(Classification)에 영향을 미치는 노이즈 요소를 제거하는 과정이다. 전처리과정을 거친 자료는 특징(Feature) 추출 과정을 거치게 되고, 추출된 특징의 적합성에 따라 분류 알고리듬 성능에 많은 영향을 미친다. 따라서 시계열 자료의 특성을 파악하고 특징을 추출하는 것은 이상치 탐지에 있어 매우 중요한 과정이다. 본 연구에서는 시계열 자료 특징 추출 방법으로 물리적인 한계치, 확률적인 문턱값(Threshold), 시계열 패턴, 주변 저수지와의 시계열 상관분석 등을 적용하였으며, 이를 데이터베이스로 구축하여 이후 분류알고리듬 학습에 적용하여 정상치와 이상치를 판별하는데 이용될 수 있도록 하였다. 따라서 본 연구에서 제시되는 농업용 저수지의 시계열 특성은 다양한 분류알고리듬에 적용할 수 있으며, 이를 통하여 저수지 이상거동 판별을 위한 최적을 분류알고리듬의 선택에 도움이 될 것이다.

  • PDF