• Title/Summary/Keyword: 전처리방법

Search Result 2,576, Processing Time 0.036 seconds

Big Data Preprocessing for Predicting Box Office Success (영화 흥행 실적 예측을 위한 빅데이터 전처리)

  • Jun, Hee-Gook;Hyun, Geun-Soo;Lim, Kyung-Bin;Lee, Woo-Hyun;Kim, Hyoung-Joo
    • KIISE Transactions on Computing Practices
    • /
    • v.20 no.12
    • /
    • pp.615-622
    • /
    • 2014
  • The Korean film market has rapidly achieved an international scale, and this has led to a need for decision-making based on analytical methods that are more precise and appropriate. In this modern era, a highly advanced information environment can provide an overwhelming amount of data that is generated in real time, and this data must be properly handled and analyzed in order to extract useful information. In particular, the preprocessing of large data, which is the most time-consuming step, should be done in a reasonable amount of time. In this paper, we investigated a big data preprocessing method for predicting movie box office success. We analyzed the movie data characteristics for specialized preprocessing methods, and used the Hadoop MapReduce framework. The experimental results showed that the preprocessing methods using big data techniques are more effective than existing methods.

Line Detection in the Image of a Wireless Mobile Robot using an Efficient Preprocessing and Improved Hough Transform (효율적인 전처리와 개선된 하프변환을 이용한 무선 이동로봇 영상에서 직선검출)

  • Cho, Bo-Ho;Jung, Sung-Hwan
    • Journal of Korea Multimedia Society
    • /
    • v.14 no.6
    • /
    • pp.719-729
    • /
    • 2011
  • This paper presents a research on the fast and accurate method of line detection in the image of a wireless mobile robot (WMR). For the improvement of the processing time to detect lines, the characteristics of the transmitted image from the WMR was analyzed, and the efficient preprocessing method among the existing preprocessing methods was selected. And for the improvement of the accuracy to detect lines, the selection method of local maximum value at the Hough array (HA) which has the result of Hough transform was improved by designing a mask and applying it to HA. The experiment was performed with acquired images from the WMR, and the proposed method outperformed the existing methods in terms of processing time and line detection.

A Method Processing Missing Values for Data Mining based on Artificial Neural Network (데이터 마이닝을 위한 신경망 이용 결측 값 처리 방법)

  • 성지애;류정우;김명원
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2003.04c
    • /
    • pp.446-448
    • /
    • 2003
  • 실세계의 많은 데이터는 결측 값들을 포항하고 있기 때문에 데이터 마이닝 시스템에 완벽한 데이터를 제공하기는 불가능하다. 또한 결측 값이 존재하는 대용량의 데이터를 추천시스템에 적용하여 분석하고자 할 경우, 정확성이 떨어지는 결과를 초래할 수 있다. 따라서 데이터에 결측 값이 존재할 경우 입력 데이터를 사전에 보간하는 전처리 방법이 필요하다. 이러한 기존의 보간 전처리 방법에는 결측 값 속성을 삭제하거나 대치하는 방범이 대표적이나. 삭제 방법은 결측 값이 존재하는 데이터를 제거하는 방법으로 중요속성 삭제 및 데이터 손실을 유발하는 단점이 있어 일반적으로 결측 값을 다른 값으로 처리하는 대치 방범이 널리 사용된다. 본 논문에서는 전처리 방법 중 결측 값을 처리하는 가장 일반적인 대치 방법과 신경망을 이용한 평가 예측 처리 방법을 소개한다. 또한 신경망을 이용 결측 값을 대치하는 새로운 모델을 제안하고, 각각의 결측 값 처리방법을 비교 분석한다.

  • PDF

Preprocessing of lossless 16-bit color image compressions for mobile terminal GUI (16비트 칼라 LCD를 장착한 휴대단말기의 GUI용 비손실 영상 압축 효율을 위한 전처리)

  • Oh Hwang-Seok
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2006.06d
    • /
    • pp.304-306
    • /
    • 2006
  • 본 논문은 16비트 칼라 LCD 디스플레이 장치를 갖는 휴대용 단말기에 영상을 이용한 그래픽 사용자 인터페이스(Graphic User Interface : GUI)를 제공함에 있어 단말기의 저장 공간을 효율적으로 사용하기 위하여 대부분 비손실 영상 압축 기법을 사용하는데, 이들 압축 기법의 압축 효과를 높이기 위한 전처리 과정 방법에 대하여 기술한다. 전처리 과정은 일반적인 칼라 영상의 각 8비트로 구성된 R, G, B 컴포넌트를 16비트로 구성된 RGB 비트 수에 맞도록 원 영상의 칼라를 조정, 16비트로 축소된 칼라 영상에서 사용된 칼라 수를 계산하는 단계 칼라 수가 사용자가 입력한 칼라수의 임계값 보다 작은 경우 인덱스 칼라 이미지를 만드는 단계, 인덱스화된 영상과 칼라 수가 임계값 보다 큰 경우 16비트 칼라 영상을 대상으로 영상을 겹치지 않게 분할하는 단계 분할된 영상의 각 블록 단위로 Run의 평균 개수가 가장 많은 스캐닝 방법을 결정하는 단계 그리고 스케닝 순서에 따른 기존의 비손실 압축 기법을 적용의 순으로 이루어진다. 본 논문에서 기술한 전처리 단계를 거친 영상을 JPEG-LS에 적용하였을 경우 동일한 영상에서 약 $10{\sim}20%$의 압축 효율을 얻을 수 있었다.

  • PDF

A Preprocessing Method for Pulmonary Nodule Detection from CT Images (CT영상에서 폐암 인식을 위한 전처리 기법)

  • Park, Sang-Cheol;Kim, Soo-Hyung;Lee, Guee-Sang;Hong, Sung-Hoon
    • Annual Conference of KIPS
    • /
    • 2004.05a
    • /
    • pp.749-752
    • /
    • 2004
  • CT 영상에서 폐암 추출을 위한 컴퓨터지원진단시스템(CAD)에서 전처리 시스템은 매우 중요한 역할을 담당한다. 본 논문에서는 CT 영상에서 폐암 추출을 위한 전처리 기법을 소개한다. CT 영상에서 폐 영역 추출 과정에서 가장 먼저 수행되는 이진화를 위해 k-means 클러스터링 알고리즘을 이용하고, 비관심 영역 제거 방법으로 연결요소를 분석하고, 이진화 과정에서 발생한 폐 외곽 분실을 재구성하기 위해 Rolling Ball 알고리즘을 수행한다. 또한 분할된 폐 영역에서 폐암 후보자를 선출하기 위해 분할과정에서 수행하였던 이진화 방법을 폐 영역에 다시 한번 적용하고 잡음제거를 위해 모폴러지 기법을 사용한 전처리 기법을 제안한다.

  • PDF

Preprocessing Methods for Action Recognition Model in 360-degree ERP Video (360 도 ERP 영상에서 행동 인식 모델 성능 향상을 위한 전처리 기법)

  • Park, Eun-Soo;Ryu, Jaesung;Kim, Seunghwan;Ryu, Eun-Seok
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2019.11a
    • /
    • pp.252-255
    • /
    • 2019
  • 본 논문에서 Equirectangular projection(ERP) 영상을 행동 인식 모델에 입력하기전 제안하는 전처리를 통하여 성능을 향상시키는 것을 보인다. ERP 영상의 특성상 행동 인식을 하는데 불필요한 영역이 일반적인 2D 카메라로 촬영한 영상보다 많다. 또한 행동 인식은 사람이 Object of Interest(OOI)이다. 따라서 객체 인식모델로 인간 객체를 인식한 후 Region of Interest(ROI)를 추출하여 불필요한 영역을 없애고, 왜곡 또한 줄어든다. 본 논문에서 제안하는 기법으로 전처리 후 CNN-LSTM 모델로 성능을 테스트했다. 제안하는 방법으로 전처리를 한 데이터와 하지 않은 데이터로 행동 인식을 한 정확도로 비교하였으며 제안하는 기법으로 전처리 한 데이터로 행동 인식을 한 경우 데이터의 특성에 따라 다르지만, 최대 61%까지 성능향상을 보였다.

  • PDF

ECR plasma pretreatment of the TiN films for $RuO_2$ MOCVD ($RuO_2$ MOCVD를 위한 TiN막의 ECR plasma 전처리)

  • 이종무;김대교;엄태종;홍현석
    • Proceedings of the Materials Research Society of Korea Conference
    • /
    • 2003.11a
    • /
    • pp.163-163
    • /
    • 2003
  • TiN barrier막 위에 metal organic chemical deposition(MOCVD)법으로 RuO$_2$ 를 증착시 TiN막 표면을 세정처리하지 않을 경우 RuO$_2$의 핵생성이 어렵고, 그로 인해 RuO$_2$ 연속막이 형성되기 힘들다. 그러므로 RuO$_2$의 핵생성을 향상시키기 위해 TiN막에 대한 전처리 세정이 필수적이다. TiN막의 전처리 세정방법으로 ECR plasma 세정법을 사용하였으며, $O_2$ plasma와 H$_2$ plasma 그리고 Ai plasma를 이용해 각각의 exposure time을 변화시키며 전처리 세정을 실시하였다. H$_2$ plasma와Ar plasma의 exposure time이 증가됨에 따라 RuO$_2$의 핵생성이 향상되었다. 본 연구에서는 scanning electron microscopy(SEM), Auger electron emission spectrometry(AES), Atomic Force Microscope(AFM), X-ray diffraction (XRD) 등의 분석을 통해 TiN막 표면에 대한 ECR plasma 전처리 세정 이 RuO$_2$의 핵생성과 연속막 성장에 미치는 효과에 대해 조사하였다.

  • PDF

Investigation of SO2 Adsorption Capacity of the Activated Carbon with O2-NH3 Treatment (O2-NH3 처리로 인한 활성탄의 SO2 흡착능 조사)

  • 고윤희;서경원;박달근
    • Journal of Energy Engineering
    • /
    • v.4 no.1
    • /
    • pp.76-84
    • /
    • 1995
  • 본 연구에서는 코코넛 껍질로부터 제조한 활성탄을 열 및 산소-암모니아의 혼합가스로 전처리하여 표면의 특성 변화와 이산화황 흡착능에 미치는 영향을 살펴보았다. 전처리한 활성탄으로 이산화황 흡착실험을 수행한 결과, 전처리한 활성탄은 기본 활성탄 시료보다 높은 흡착능력을 보였다. 본 연구의 전처리 실험에서는 산소와 암모니아를 주입하여 활성점을 제공하는 산소와 환원성 분위기를 조성하는 질소관능기를 도입하였다. 전처리 조건은 0∼25%의 암모니아와 473∼1273K의 온도이며 처리조건을 변화시킴으로써 표면 기능의 척도가 되는 세공구조와 원소조성 및 표면 관능기 등에 직접적인 영향을 주었다. 흡착능력은 고정층 반응기에서 전자 비틀림 저울로 이산화황 흡착량을 측정하여 비교하였고, 이 과정 중의 활성탄 표면의 특성변화를 원소분석, 승온탈착법, 산-염기 적정법, 주사현미경법 등의 분석 방법을 통해서 알아보았다. 그 결과, 이산화황의 최대 흡착 능력은 온도조건 973∼1173K에서 나타났다. 또한, 암모니아로 처리하지 않은 활성탄에 비하여 암모니아로 처리한 활성탄은 그 주입농도에 관계없이 이산화황의 흡착제거율을 약 48% 정도 향상시켰다.

  • PDF

Data preprocessing for efficient machine learning (효율적인 기계학습을 위한 데이터 전처리)

  • Kim, Dong-Hyun;Yoo, Seung-Eon;Lee, Byung-Jun;Kim, Kyung-Tae;Youn, Hee-Yong
    • Proceedings of the Korean Society of Computer Information Conference
    • /
    • 2019.01a
    • /
    • pp.49-50
    • /
    • 2019
  • 데이터를 기반으로 한 기계학습은 데이터의 양, 학습 모델, 그리고 데이터의 특징 등 다양한 환경에 민감한 특징을 지니고 있어, 보다 효율적인 기계학습을 위해 데이터의 전처리 과정을 필요로 한다. 데이터의 전처리 과정이란 특징 선택(Feature selection), 노이즈 데이터의 제거, 차원 감소(Demension reduction), 클러스터링(Clustering) 등 보다 효율적인 기계학습을 위한 방법이다. 따라서 본 논문에서는 다양한 환경에서 보다 효율적인 기계학습을 위한 데이터 전처리 기술의 종류 및 간단한 특징에 대해 서술한다.

  • PDF

Effects of diverse Pre-treatment methods on the sludge digestion and methane production in combined mesophilic anaerobic and thermophilic aerobic sludge digestion process (다양한 전처리에 따른 중온혐기-고온호기 복합 슬러지 처리공정의 슬러지 처리효율 및 메탄 생성량 변화)

  • Ha, Jeong Hyub;Park, Jong Moon;Park, Sang Kyu;Cho, Hyun Uk;Jang, Hyun Min;Choi, Suk Soon
    • Journal of the Korea Organic Resources Recycling Association
    • /
    • v.21 no.3
    • /
    • pp.43-52
    • /
    • 2013
  • In this study, various influent sludge pre-treatment methods were adopted to investigate their effects on the sludge digestion and methane production in combined mesophilic anaerobic and thermophilic aerobic sludge digestion process. A lab-scale sewage sludge digestion process was operated during 4 phases using different feed sludge pre-treatment strategies. In phase 1, feed sludge was supplied without any pre-treatment. In contrast, in phases 2, 3 and 4, thermal, thermal-alkaline and long time alkaline treatment (7 days) were applied to influent sludge, respectively. With sludge pre-treatment, TCOD removal was drastically increased from 44% to 76% from phases 1 to 4, respectively. Also, pre-treatment of feed sludge significantly improved the methane production rate of MAD, showing an increment from 101 to 165-256mL/L/day. Meanwhile, TCOD removal and methane production at phase 4 were not increased, compared to those at phase 3. Based on the experimental results, it was concluded that pre-treatment of feed sludge significantly increases the efficiency of sludge digestion and thermal-alkaline method was the most effective method among the pre-treatment methods examined.