• 제목/요약/키워드: 분산 컴퓨팅 시스템

검색결과 762건 처리시간 0.046초

대용량 로그 데이터 처리를 위한 분산 실시간 자가 진단 시스템 (A Distributed Real-time Self-Diagnosis System for Processing Large Amounts of Log Data)

  • 손시운;김다솔;문양세;최형진
    • 데이타베이스연구회지:데이타베이스연구
    • /
    • 제34권3호
    • /
    • pp.58-68
    • /
    • 2018
  • 분산 컴퓨팅이란 다수의 서버로 구성된 분산 시스템에서 데이터를 효율적으로 저장 및 처리하는 기술이다. 따라서 분산 시스템을 구성하는 서버의 상태에 따라 분산 컴퓨팅의 성능에 큰 영향을 미친다. 본 논문은 분산 시스템에서 실시간으로 발생하는 시스템 자원의 로그 데이터를 수집하고 이상을 탐지하여 결과를 시각화하는 자가 진단 시스템을 제안한다. 먼저, 자가 진단 과정을 수집, 전달, 분석, 저장, 시각화의 다섯 단계로 구분한다. 다음으로, 자가 진단 과정이 실시간성, 확장성, 고가용성의 목표를 만족하도록 실시간 자가 진단 시스템을 설계한다. 본 시스템은 대표적인 실시간 분산 기술인 Apache Flume, Apache Kafka, Apache Storm을 기반으로 구현되어 실시간성, 확장성, 고가용성의 세 가지 목표를 만족할 수 있다. 또한, 자가 진단 과정에서 로그 데이터 처리의 지연을 최소화하도록 간단하지만 효과적인 이동 평균 및 3-시그마 기반 이상 탐지 기법을 사용한다. 본 논문의 결과를 통해, 분산 시스템 내에서 서버 상태를 실시간으로 진단할 수 있는 분산 실시간 자가 진단 시스템을 구축할 수 있다.

GLORY-FS: 대규모 인터넷 서비스를 위한 분산 파일 시스템

  • 김홍연;진기성;차명훈;이상민;이상민;김영철;김영균
    • 정보와 통신
    • /
    • 제30권4호
    • /
    • pp.16-22
    • /
    • 2013
  • 본고에서는 분산 파일 시스템 기술의 현황 및 최근 이슈를 다룬다. 먼저 클라우드 컴퓨팅 및 빅데이터 분석 분야에서 산업체 표준으로 간주되고 있는 Hadoop의 분산 파일 시스템을 위주로 현황과 한계에 대해 다루고, 국내에서 개발된 유사한 구조의 분산 파일시스템인 GLORY-FS를 Hadoop 파일 시스템과 대비하여 국내 활용 사례를 기반으로 유사성 및 차이점을 비교한다.

분산 컴퓨팅 환경에서 HLA를 이용한 이기종 시뮬레이터 통합 (A Integration of Heterogeneous Sim에ator based on Distributed Computing Environment Using HLA)

  • 황재준;이규영;최재영
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2005년도 가을 학술발표논문집 Vol.32 No.2 (1)
    • /
    • pp.754-756
    • /
    • 2005
  • 현대는 실제와 같은 환경을 재현할 수 있도록 제작된 시뮬레이터를 사용하여 실제 훈련을 대체하고 있다. 그러나 많은 사용자들은 이미 개발된 이종의 시뮬레이터들을 하나로 묶어 연동할 필요성을 느끼게 되었고, 이에 따라 다양한 형태의 상호작용이 수반되는 시뮬레이션에 대한 요구를 만족하는 대규모 분산가상환경(large-scaled distributed virtual environment)을 개발하려는 움직임이 크게 늘게 되었다. 이러한 요구를 바탕으로 등장한 것들 중 하나가 HLA이다. High Level Architecture (HLA)는 미국방성에서 모델과 시뮬레이션에 공통의 구조와 인터페이스를 제공하기 위해 개발된 통합 구조이다. HLA는 분산 컴퓨팅 환경에서 각각의 시뮬레이터들이 정보를 교환 할 수 있게 해줌으로써 하나의 통합 시뮬레이션 시스템을 구축하게 해준다. HLA는 크게 Object Model Template (OMT)와 Run-Time Infrastructure (RTI)로 구성되어 있으며, 이를 통하여 공통된 구조와 상호 작용 환경을 제공한다. 각각의 시뮬레이터들은 RTI를 통하여 Federation에 참여하고 선별적으로 원하는 정보를 주고받으며 하나의 통합 시뮬레이션을 이루게 된다. 본 논문에서는 분산 컴퓨팅 환경에서 이기종의 3차원 영상 시뮬레이터들에 HLA 인터페이스를 삽입하고 3차원 영상 시뮬레이션에 적합하게 개발된 공통 구조인 FOM 제공하여 하나의 통합 가상훈련 시스템을 구축하였다. 이 시스템은 현재 KA-32 헬기 시뮬레이터 영상 프로그램 제작에 적용되어있다.

  • PDF

협업 기반의 유비쿼터스 컴퓨팅 시스템을 위한 추상화 모델 및 응용 시스템의 개발 (Abstraction Model and Application Development Process for Cooperative Ubiquitous Computing Systems)

  • 정유나;이정태;김민구
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2006년도 가을 학술발표논문집 Vol.33 No.2 (C)
    • /
    • pp.472-476
    • /
    • 2006
  • 유비쿼터스 컴퓨팅 시스템을 설계하고 개발하기 위한 방법들 중 하나로서, 최근 다중 에이전트 모델을 이용하는 방식이 연구되었다. 다중 에이전트 모델을 이용함으로써 얻을 수 있는 장점도 있지만, 다중 에이전트 모델로는 유비쿼터스 컴퓨팅 시스템이 가지는 고유한 특성을 완벽히 기술하기는 부족한 면이 있다. 예를 들어, 유비쿼터스 컴퓨팅 시스템에서 어떤 서비스를 제공하기 위하여 여러 컴퓨팅 요소들이 협업을 해야 할 때, 이러한 협업 조직을 효과적으로 표현하기 어렵다. 즉, 다중 에이전트 모델에서는 이러한 협업 조직의 동적인 생성과 소멸, 그리고 동적인 조직의 구성방식과 서비스를 제공하기 위한 조직 내에서의 또한 조직들 간의 협업 방식을 기술하기가 쉽지 않다는 것이다. 게다가 대부분의 다중 에이전트 모델들은 시스템을 설계하는 것만을 고려할 뿐 시스템의 개발은 개발자에게 전가하고 있다. 그러나, 유비쿼터스 컴퓨팅 시스템처럼 다양한 기종이 복잡하게 분산되어 있는 경우에는 설계만으로 실제 시스템을 개발을 하는 것은 쉬운 일이 아니다. 따라서 본 논문에서는 컴퓨팅 요소들의 협업 조직을 커뮤니티라 하고, 유비쿼터스 컴퓨팅 시스템을 그러한 커뮤니티에 기반하여 기술하는 고 수준의 추상화 모델을 제시하였다. 또한 이러한 고수준의 추상화 모델로부터 실제 시스템 개발을 이끌어 낼 수 있도록 하기 위하여 Model driven architecture 방식을 적용하여, 유비쿼터스 컴퓨팅 시스템의 개발 과정을 정의하였다.

  • PDF

인트라넷에서 자바 객체의 이동시스템 설계 및 구현 (Design and Implementation of a Mobile System for Java Objects on the Intranet)

  • 전병국;최영근
    • 한국정보과학회논문지:컴퓨팅의 실제 및 레터
    • /
    • 제5권2호
    • /
    • pp.168-175
    • /
    • 1999
  • 본 논문은 클라이언트/서버 모델을 기반으로 한 분산 시스템(Distributed System)의문제들을 해결하기 위해 자바(Java)객체를 위한 이동 시스템을 설계 구현한다. 이를 위해, 자바 객체가 이동 객체 모델이 되기 위한 특성을 제시한다. 그리고 , 제안된 이동 시스템은 이동 객체들이 인트라넷(Intranet)상의 노드 등으로 이동되었을 때 해당 객체들을 수용할 뿐 아니라 자율적으로 실행할수 있는 가상 장소를 제공하는 환경이다. 따라서, 자바 객체에 대해 객체 이동 및 이동 투명성을 제공할 뿐만 아니라 이동 객체로서 분산 처리가 가능한 컴퓨팅 환경을 제공하므로, 기존 분산 시스템 구조로 인한 성능 및 통신 오버헤드(Overhead)문제등을 효율적으로 개선한다.

분산 환경에서 클러스터 노드 할당 시스템을 위한 유전자 기반 최적화 모델 (A Genetic-Based Optimization Model for Clustered Node Allocation System in a Distributed Environment)

  • 박경모
    • 정보처리학회논문지A
    • /
    • 제10A권1호
    • /
    • pp.15-24
    • /
    • 2003
  • 본 논문에서는 분산 컴퓨팅 환경에서 클러스터 노드 할당 시스템에 대한 최적화 모델을 제시한다. 분산 파일 시스템 구조를 지닌 제시 모델에서는 시간에 따른 시스템의 역동적인 움직임을 면밀하게 고려하여 클러스터 노드 할당 세트가 타당한지를 조사하는 클러스터 모니터 노드의 기능이 주어진다. 노드 할당 시스템의 클러스터 모니터 노드는 병렬 모듈들을 클러스터 노드들에 분산시키면서 유전 알고리즘을 이용하여 좋은 할당 솔루션을 제공한다. 실험적 연구의 일환으로 코딩 기법, 교배, 돌연변이, 개체집단 크기 같은 다양한 유전 인자 파라미터와 노드 모듈개수에 따른 솔루션 품질 및 계산 시간에 관한 비교 실험 결과를 발표한다.

MAHA-FS : 고성능 메타데이터 처리 및 랜덤 입출력을 위한 분산 파일 시스템 (MAHA-FS : A Distributed File System for High Performance Metadata Processing and Random IO)

  • 김영창;김동오;김홍연;김영균;최완
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제2권2호
    • /
    • pp.91-96
    • /
    • 2013
  • 바이오 응용과 같은 대용량 데이터 처리와 고성능 계산을 동시에 지원하는 발판으로 슈퍼컴퓨팅 시스템의 활용 분야가 변화하고 있다. 이러한 응용에서는 발생하는 대용량의 데이터를 고속으로 처리하고 효율적으로 저장 관리하기 위한 고성능의 분산 파일 시스템이 요구된다. 본 논문에서는 대용량의 데이터 처리와 고성능 계산을 동시에 지원하는 슈퍼컴퓨팅 시스템을 위해 우수한 메타데이터 연산 성능 및 입출력 성능을 제공하는 MAHA-FS를 소개한다. 아울러 성능 분석을 통해 MAHA-FS가 메타데이터 연산 처리 성능 및 random 입출력 성능이 우수함을 보인다.

CORBA를 기반으로 한 분산 다중 에이전트 서비스 계층 설계 (Designing A Distributed Multi-Agent Service Layer Based on CORBA)

  • 최형은;김태형
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2005년도 한국컴퓨터종합학술대회 논문집 Vol.32 No.1 (A)
    • /
    • pp.292-294
    • /
    • 2005
  • 유비쿼터스 컴퓨팅과 같이 서비스 지향적인 환경에서 에이전트 기술은 효과적인 시스템 구축 방법이다. 그러나 오늘날과 같이 이기종 분산 시스템에서 에이전트 시스템을 구축하기 위해선 분산 시스템의 투명성을 제공하는 분산 객체 기술이 필요하며 이에 CORSA를 기반으로 하는 에이전트 서비스 계층을 설계한다.

  • PDF

Learning Record-XML Format

  • 성진우;이영주;장지훈;김중권
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2004년도 춘계학술발표대회
    • /
    • pp.961-964
    • /
    • 2004
  • 우리는 가정이나 직장 등에서 PC를 이용하여 인터넷에 쉽게 접근할 수 있게 되었다. 많은 수의 분산된 PC를 활용하여 의미가 있는 일을 하고자 하는 노력이 시도되고 있으며, 교육 분야에서도 정보통신기술(ICT)을 활용한 교육에 많은 연구가 이루어지고 있다. 본 논문에서는 웹 기반의 문제풀이형 학습 시스템을 위해 통일된 XML 데이터 구조를 정의하였다. 웹상에서 학습정보를 XML로 저장하고 교환함으로써 수정없이 재사용할 수 있게 되었다. 분산된 다수의 서버들이 표준화된 학습정보문서의 체계에 따라 학습 정보를 제공한다면, 쉽게 대규모의 가상 학습시스템의 구축이 가능하다.

  • PDF

Context-aware Wearable Computing을 위한 서비스 모델 설계 (A Design of the Service Model for Context-aware Wearable Computing)

  • 최인선;오남호;조기환
    • 한국정보과학회:학술대회논문집
    • /
    • 한국정보과학회 2001년도 봄 학술발표논문집 Vol.28 No.1 (A)
    • /
    • pp.286-288
    • /
    • 2001
  • 인터넷의 급격한 성장과 더불어 이동 컴퓨팅과 무선 네트워크의 발전과 같은 요즘의 컴퓨팅 경향은 분산 시스템을 사용하는 새로운 컴퓨팅 방법론을 제시하고 있다. 이러한 컴퓨팅 환경에서 사용자들은 사용자 중심의 효과적인 서비스를 제공받기 위해 변화하는 환경에 적응적인 시스템을 요구한다. 본 논문에서는 사용자들에게 보다 유용한 정보와 서비스를 제공하기 위해 컴퓨터와 환경의 상호작용 메커니즘을 토대로 Wearable Computing을 위한 Context-aware 서비스 모델을 제안함으로써 사용자의 현재 상황에 최적인 서비스를 제공하는 프레임워크를 제시하고자 한다.