• Title/Summary/Keyword: Distributed Data Analysis

검색결과 2,350건 처리시간 0.033초

분산 실시간 트랜잭션 처리 시스템의 동시 실행 제어와 원자적 종료를 위한 시간 구동형 스케쥴징 기법 연구 (A Study for Time-Driven Scheduling for Concurrency Control and Atomic Commitment of Distributed Real-Time Transaction Processing Systems)

  • 김진환
    • 한국정보처리학회논문지
    • /
    • 제3권6호
    • /
    • pp.1418-1432
    • /
    • 1996
  • 분산 실시간 트랜잭션 처리 시스템에서 데이타의 복제는 유용성의 향상 및 여러 노드에서 발생한 트랜잭션들을 병행적으로 처리할 수 있기 때문에 성능을 향상시킬 수 있다. 데이타의 일관성과 실시간적 제약성을 충족하기 위해서 동시실행 제어 및 원자적 종료 프로토콜이 시간 구동형 스케쥴링 과정에 통합될 필요가 있다. 기존의 동시실행 제어 프로토콜들에게 발생하는 중단 현상은 트랜잭션들의 종료시한을 만족 할 수 있는 스케쥴링이 어렵기 때문에 시간 구동형 스케쥴링에 적합하지 않다. 복제 된 데이타의 일관성 유지 그리고 스케쥴링 가능성 및 예측가능성을 향상시키기 위하 여 제시된 시간 구동형 스케쥴링 기법은 중단 시간을 최소화하고 우선순위에 따른 직 렬가능성 순서를 생성하는 낙관적 동시실행 제어 프로토콜을 통합하였다. 분산 환경 에서 트랜잭션의 성공적인 종류를 보장하는 원자성도 유지된다. 시간 구동형 스케쥴 링 기법의 성능 분석 결과 및 구체적인 과정들이 기술된다.

  • PDF

맵리듀스 기반 DFP-Tree를 이용한 클러스터링 알고리즘 (Clustering Algorithm using the DFP-Tree based on the MapReduce)

  • 서영원;김창수
    • 인터넷정보학회논문지
    • /
    • 제16권6호
    • /
    • pp.23-30
    • /
    • 2015
  • 빅 데이터가 이슈화됨에 따라 데이터 분석의 결과를 기반으로 동작하는 많은 응용들이연구되고 왔고, 대표적인 응용들은 전자상거래 시스템의 상품 추천 서비스, 검색 엔진에서의 검색 서비스, 소셜 네트워크 서비스에서의 친구 추천 서비스 등이 있다. 본 논문은 기존의 데이터 마이닝 기법 중 데이터 집합에서 나타나는 유사한 패턴들을 마이닝하는 빈발 패턴 트리와 컴퓨터 과학의 이론에 기초한 결정트리를 결합하여 결정 빈발 트리 알고리즘을 제안한다. 이는 기존의 빈발 패턴 트리 알고리즘은 패튼 트리에서 패턴 생성에 대한 정확성은 보장되나 소셜 데이터처럼 다양한 패턴이 나타는 데이터에 대해서는 많은 수의 패턴들을 생성시켜 분석에 대한 어려움이 있어, 서브트리들과의 수렴 여부를 판단하는 모델로 변형시켜 문제를 개선한다. 또한 맵리듀스로 모델링하여 분산처리를 통한 고속 처리 알고리즘을 제시한다.

다중최적화기법을 이용한 분포형 수문모형의 최적 분포형 선택 (The Selection of Optimal Distributions for Distributed Hydrological Models using Multi-criteria Calibration Techniques)

  • 김연수;김태균
    • 한국습지학회지
    • /
    • 제22권1호
    • /
    • pp.15-23
    • /
    • 2020
  • 본 연구에서는 다중최적화기법을 이용하여 분포형 수문모형의 매개변수 보정 과정에서 분포형의 정도가 융설과 유량의 최적화에 어떠한 영향을 미치고 있는 가를 연구하였다. 분포형 수문모형으로는 HL-RDHM를 이용하였고, 분포형 정도에 따라 집중형, 준분포형, 완전분포형 등 3개의 모형을 구성하여 최적 매개변수를 산정하였다. 유역은 108개의 격자로 구성되며, 격자별로 융설과 관련하여 15개, 유출량 관련 13개의 매개변수를 다중최적화기법인 MOSCEM를 이용하여 최적화하였다. 최적 매개변수 산정을 위하여 2004-2005년의 기상학적 자료와 융설량과 유출량 관측자료가 이용되었고, 최적화된 매개변수를 2001-2004년의 자료를 이용하여 검증하였다. 다중최적화기법 적용 결과 집중형의 경우, 초기 값에 의한 결과로 부터 RMSE 값이 융설량은 평균 35%, 유출량은 약 42% 개선되었고, 준분포형과 완전분포형의 경우는 융설량은 평균 40%, 유출량은 약 43% 정도의 RSME 값이 향상되었다. 전반적으로 집중형보다는 분포형 모형이 최적화 과정에서 융설과 유출량 예측에 더 나은 성과를 보여주었지만, 준포형과 완전분포형의 경우 최적화 성과에서 큰 차이를 보이지 않았고, 유출보다는 융설에서 분포형 정도에 따른 모형의 민감도가 더 높은 것을 확인되었다.

자료동화 기법을 이용한 위성영상 추출 토양수분 자료 개선 (Improving Satellite Derived Soil Moisture Data Using Data Assimilation Methods)

  • Hwang, Soonho;Ryu, Jeong Hoon;Kang, Moon Seong
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2018년도 학술발표회
    • /
    • pp.152-152
    • /
    • 2018
  • Soil moisture is a important factor in hydrologic analysis. So, if we have spatially distributed soil moisture data, it can help to study much research in a various field. Recently, there are a lot of satellite derived soil moisture data, and it can be served through web freely. Especially, NASA (National Aeronautics and Space Administration) launched the Soil Moisture Aperture Passive (SMAP) satellite for mapping global soil moisture on 31 January 2015. SMAP data have many advantages for study, for example, SMAP data has higher spatial resolution than other satellited derived data. However, becuase many satellited derived soil moisture data have a limitation to data accuracy, if we have ancillary materials for improving data accuracy, it can be used. So, in this study, after applying the alogorithm, which is data assimilation methods, applicability of satellite derived soil moisture data was analyzed. Among the various data assimilation methods, in this study, Model Output Statistics (MOS) technique was used for improving satellite derived soil moisture data. Model Output Statistics (MOS) is a type of statistical post-processing, a class of techniques used to improve numerical weather models' ability to forecast by relating model outputs to observational or additional model data.

  • PDF

패션상품 소비자가 인식하는 상표관계본질(BRQ: Brand Relationship Quality) 규명 (제2보) (The BRQ(Brand Relation Quality) Construct Perceived by Fashion Product Consumers (Part 2))

  • 채진미;이은영
    • 한국의류학회지
    • /
    • 제31권8호
    • /
    • pp.1168-1179
    • /
    • 2007
  • The objective of this research is to validate the BRQ(Brand Relationship Quality) Construct perceived by fashion product consumers. In order to establish and verify the BRQ scale, qualitative survey and quantitative survey were conducted together. 1592 copies of questionnaire were distributed to women in their 20s to 40s living in Seoul and other metropolitan areas from Dec. 26, 2005 to Jan. 8, 2006, and 723 copies of them were used for statistical data. Samplel(n=482)was used for empirical analysis, and sample2(n=241) was used for cross validity test. The data was analyzed using Exploratory Factor Analysis, Confirmatory Factor Analysis, and Pearson's Correlation Analysis. BRQ emerged from exploratory factor analysis as the hierarchical construct composed of six facets including 'self-connective attachment', 'symbol/mystery', 'trust', 'nostalgia', 'intimacy', and 'knowledge'. As the fit of this structural model was not good as a result of Confirmatory Factor Analysis, it was revised to have better fitting. Finally, empirical survey results indicate the hierarchical construct consisting of eight distinct BRQ facets including 'love/commitment', 'self-connection', 'symbol', 'mystery', 'trust', 'nostalgia', 'intimacy', and 'knowledge' as best representing the final 39item BRQ Scale. Reliability, construct validity, and cross validity of the construct were verified.

클라우드 컴퓨팅에서의 대규모 데이터를 위한 분산 병렬 처리 기법의 성능분석 (Performance Analysis of Distributed Parallel Processing Schemes for Large Data in Cloud Computing)

  • 홍승태;장재우
    • 한국GIS학회:학술대회논문집
    • /
    • 한국GIS학회 2010년도 추계학술대회
    • /
    • pp.111-118
    • /
    • 2010
  • 최근 IT 분야에서 인터넷을 기반으로 IT 자원들을 서비스 형태로 제공하는 클라우드 컴퓨팅에 대한 연구가 활발히 진행되고 있다. 한편, 효율적인 클라우드 컴퓨팅을 제공하기 위해서는, 막대한 양의 데이터를 수많은 서버들에 분산 처장하고 관리하기 위한 분산 데이터 처장 기법 빛 분산 병렬 처리 기법에 대한 연구가 필수적이다. 이를 위해 본 논문에서는 대표적인 분산 병렬 처리 기법에 대해 살펴보고, 이를 비교 분석한다. 마지막으로 Hadoop 기반 클러스터를 구축하고 이를 통해서 대규모 데이터를 위한 분산 병렬 처리 기법에 대한 성능평가를 수행한다.

  • PDF

적합직교분해법을 이용한 복잡한 동적응답의 선형화 모델링 기법 (Linearized Modeling Technique for Complex Dynamic Responses Using Proper Orthogonal Decomposition)

  • 이수일;홍상혁
    • 한국소음진동공학회:학술대회논문집
    • /
    • 한국소음진동공학회 2008년도 춘계학술대회논문집
    • /
    • pp.156-159
    • /
    • 2008
  • Proper orthogonal decomposition is a statistical pattern analysis technique for finding the dominant components, called the proper orthogonal modes, in ensembles of spatially distributed data. We present recent ideas based on proper orthogonal decomposition (POD) and detailed experiments that yield new perspectives into the microscale structures. The linearized modeling technique based on POD is very useful to show the principal characteristics of the complex dynamic responses.

  • PDF

효율적인 네트워크 관리를 위한 SNMP와 이동 에이전트의 성능 분석 및 평가 (Performance Analysis and Evaluation of SNMP and Mobile Agent for Efficient Network Management)

  • 이정우;정진하;윤완오;최상방
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2002년도 하계종합학술대회 논문집(1)
    • /
    • pp.105-108
    • /
    • 2002
  • This paper analytical models of a centralized approach based on SNMP Protocol, distributed approach based on mobile agent, and mixed model which is tile existing mobile agent model in order to overcome large communication numbers of SNMP and accumulated data of mobile agent. And then, we compare and analyze these analytical models. Performance evaluation results show that performance of mobile agent and the mixed model is less sensitive to the network traffic and more profitable for complex network environment than that of SNMP.

  • PDF

눈괴불주머니 지상부의 Isoquinoline alkaloid성분 (Isoquinoline Alkaloids from the Aerial Parts of Corydalis ochotensis)

  • 이기택;엄상섭;은재순;신태용;임종필
    • 약학회지
    • /
    • 제45권5호
    • /
    • pp.442-447
    • /
    • 2001
  • Aerial parts of Corydalis ochotensis Turcz. (Papaveraceae) has been used as a folk medicine in China for its antipyretic, analgesic and diuretic properties, which is widely distributed in Korea. Phytochemical study of the aerial parts of C. ochotensis led to the isolation of three isoquinoline alkaloids, (+)adlumidine, govadine and (-)severtzine, together with quercetin, rutin and tridecanoic acid. These compounds were established by conventional methods of analysis and identified by $^{1}$H,$^{13}$ C-NMR, and MS data.

  • PDF

Physical interpretation on eigen-parameters of polarimetric SAR data for microwave scattering from leaf

  • Park, Sang-Eun;Moon, Wooil M.
    • 대한원격탐사학회:학술대회논문집
    • /
    • 대한원격탐사학회 2003년도 Proceedings of ACRS 2003 ISRS
    • /
    • pp.316-318
    • /
    • 2003
  • An eigen-analysis of the coherency matrix provides the polarimetric scattering mechanisms with the matrix characterizing parameters. In this paper, the coherency matrices of deciduous and coniferous vegetation are calculated using the analytical method. The Generalized Rayleigh-Gans approximation is used to model backscattering from distributed coniferous and deciduous leaves. The characteristics of eigen-parameters of simulated coherency matrix for deciduous and coniferous leaves with respect to the leaf shapes and orientations are illustrated.

  • PDF