• 제목/요약/키워드: Distributed Data Analysis

검색결과 2,350건 처리시간 0.03초

분산구조해석을 이용한 구조설계최적화 (Structural Design Optimization using Distributed Structural Analysis)

  • 박종희;정진덕;전한규;황진하
    • 한국전산구조공학회:학술대회논문집
    • /
    • 한국전산구조공학회 2000년도 가을 학술발표회논문집
    • /
    • pp.124-132
    • /
    • 2000
  • Distributed processing approach for structural optimization is presented in this study. It is implemented on network of personal computers. The validity and efficiency of this approach are demonstrated and verified by test model of truss. Repeated structural analysis algorithm, which spend a lot of overall structural optimization processes, are based on substructuring scheme with domain-wise parallelism and converted to be adapted to hardware and software environments. The design information data are modularized and assigned to each computer in order to minize the communication cost. The communications between nodes are limited to static condensation and constraint-related data collection.

  • PDF

원자력 발전소 디지털 제어 시스템을 위한 네트워크의 실시간 특성 해석 (Real-Time Characteristic Analysis of a DCS Communication Network for Nuclear Power Plants)

  • 이성우;김석곤;송성일
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 2003년도 학술회의 논문집 정보 및 제어부문 B
    • /
    • pp.797-801
    • /
    • 2003
  • In this paper, a real-time communication method using a PICNET-NP (Plant Instrumentation and Control Network for Nuclear Power plant) is proposed with an analysis of the control network requirements of DCS (Distributed Control System) in nuclear power plants. The method satisfies deadline in case of worst data traffics by considering aperiodic and periodic real-time data and others.

  • PDF

실시간 제어 데이터통신을 위한 IEEE-1394용 수정 TCP/IP의 성능분석 (Performance Analysis of Modified TCP/IP for Realtime Control Data Transmission over IEEE-1394 Network)

  • 윤기중;박재현;염복진
    • 제어로봇시스템학회논문지
    • /
    • 제10권2호
    • /
    • pp.197-203
    • /
    • 2004
  • A real-time network in a distributed control system plays an important role for the reliable data transmission. Compared to the field-buses used in the past, TCP/IP protocol on the top of Ethered provides a compatibility between applications as well as an economical method to develop softwares. This paper proposes a modified TCP/IP structure for IEEE-1394 network, with which asynchronous and isochronous data transmission is selectively used for the real-time data transmission in a distributed control system. This paper also shows the performance of the proposed protocol by experiments.

An Attack-based Filtering Scheme for Slow Rate Denial-of-Service Attack Detection in Cloud Environment

  • Gutierrez, Janitza Nicole Punto;Lee, Kilhung
    • Journal of Multimedia Information System
    • /
    • 제7권2호
    • /
    • pp.125-136
    • /
    • 2020
  • Nowadays, cloud computing is becoming more popular among companies. However, the characteristics of cloud computing such as a virtualized environment, constantly changing, possible to modify easily and multi-tenancy with a distributed nature, it is difficult to perform attack detection with traditional tools. This work proposes a solution which aims to collect traffic packets data by using Flume and filter them with Spark Streaming so it is possible to only consider suspicious data related to HTTP Slow Rate Denial-of-Service attacks and reduce the data that will be stored in Hadoop Distributed File System for analysis with the FP-Growth algorithm. With the proposed system, we also aim to address the difficulties in attack detection in cloud environment, facilitating the data collection, reducing detection time and enabling an almost real-time attack detection.

HEC-HMS를 이용한 농업소유역에서의 홍수량 추정 (Estimation of Flood runoff using HEC-HMS at agricultural small watershed)

  • 김상민;박승우
    • 한국농공학회:학술대회논문집
    • /
    • 한국농공학회 2002년도 학술발표회 발표논문집
    • /
    • pp.281-284
    • /
    • 2002
  • Geographic Information System (GIS) has advantage of analyzing spatial distributed data and handling spatial data for hydrologic analysis. Hydrologic Engineering Center's Hydrologic Modeling System(HEC-HMS) with HEC-GeoHMS was used to analyze flood runoff at agricultural small watershed. HEC-GeoHMS, which is an ArcView GIS extension designed to process geospatial data for HEC-HMS, is a useful tool for storing, managing, analyzing, and displaying spatially distributed data. Hydroligical component including peak discharge, time to peak, direct runoff, baseflow for Balhan study watershed, which is located in Whasung city, Kyunggi province, having an area of $29.79km^2$, were calculated using the HEC-HMS model with HEC-GeoHMS.

  • PDF

GIS를 이용한 침수모의모형의 적용 (Application of Inundation Simulation Model using GIS)

  • 김상민;박승우
    • 한국농공학회:학술대회논문집
    • /
    • 한국농공학회 2001년도 학술발표회 발표논문집
    • /
    • pp.314-318
    • /
    • 2001
  • The analysis of the spatial extent of flood inundation is important for flood mitigation. Geographic Information System (GIS) has advantage of analyzing spatial distributed data. Hydrologic Engineering Center's River Analsysis System(HEC-RAS) with HEC-GeoRAS was used to analyze flood inundation. HEC-GeoRAS, which is an ArcView GIS extension designed to process geospatial data for HEC-RAS, is a useful tool for storing, managing, analyzing, and displaying spatially distributed data. Rational formula and 24-hr duration probability precipitation data of Suwon meteorological station were used to estimate the flood runoff. And water profiles were calculated using the HEC-RAS model with HEC-GeoRAS. The flooded region is 8.24ha when 50-yr probability precipitation was applied and 8.8ha when 100-yr was applied to Bahlan study watershed which is located in Whasung county, Kyunggi province, having an area of $29.79km^{2}$.

  • PDF

High Rate Denial-of-Service Attack Detection System for Cloud Environment Using Flume and Spark

  • Gutierrez, Janitza Punto;Lee, Kilhung
    • Journal of Information Processing Systems
    • /
    • 제17권4호
    • /
    • pp.675-689
    • /
    • 2021
  • Nowadays, cloud computing is being adopted for more organizations. However, since cloud computing has a virtualized, volatile, scalable and multi-tenancy distributed nature, it is challenging task to perform attack detection in the cloud following conventional processes. This work proposes a solution which aims to collect web server logs by using Flume and filter them through Spark Streaming in order to only consider suspicious data or data related to denial-of-service attacks and reduce the data that will be stored in Hadoop Distributed File System for posterior analysis with the frequent pattern (FP)-Growth algorithm. With the proposed system, we can address some of the difficulties in security for cloud environment, facilitating the data collection, reducing detection time and consequently enabling an almost real-time attack detection.

식이 데이터 분석을 위한 분산 컴퓨팅 문제풀이환경 설계 (A Design of a Distributed Computing Problem Solving Environment for Dietary Data Analysis)

  • 최지은;안윤선;김윤희
    • 정보과학회 논문지
    • /
    • 제42권7호
    • /
    • pp.834-839
    • /
    • 2015
  • 개인의 건강과 삶의 질의 향상을 위해 웰니스에 대한 사람들의 관심이 증가하고 있다. 개인의 건강 데이터 분석을 위해 체중, BMI, 혈압과 같은 신체 측정 데이터를 사용하거나 일상생활의 식사 기록이나 운동량 기록으로 축적된 데이터를 사용한다. 축적된 건강 데이터는 개인이 가진 잠재적인 질병을 예측하거나 식사 또는 운동 패턴의 분석이 가능하다. 식품 영양학 분야에서는 여러 명의 식이 데이터와 건강정보를 설문을 통해 수집하여 입력 데이터에 대한 하나의 가설을 세우고 여러 통계 분석을 통해 가설을 검증하는 방식으로 데이터 분석 실험을 진행한다. 한편, 과학자들의 실험의 편리성을 위한 문제풀이환경에 대한 연구가 활발히 진행되고 있다. 본 논문에서는 식품 영양학적으로 식이 데이터 분석의 효율적인 실험환경을 위한 문제풀이환경을 설계한다. 제안된 문제풀이 환경은 반복적인 실험 단계를 자동화하고 순차적인 작업을 병렬 수행 가능하도록 분산 컴퓨팅 환경에 배치하여 전체 실험의 속도를 높인다.

상관계수의 안전한 다자간 계산 (Secure Multi-Party Computation of Correlation Coefficients)

  • 홍선경;김상필;임효상;문양세
    • 정보과학회 논문지
    • /
    • 제41권10호
    • /
    • pp.799-809
    • /
    • 2014
  • 본 논문에서는 분산 컴퓨팅 환경에서 데이터 제공자들이 각자 소유한 데이터의 프라이버시는 보호하면서도 피어슨(Pearson) 상관계수와 스피어만(Spearman)의 순위상관계수를 안전하게 계산하는 해결책을 각각 제안한다. 분산 컴퓨팅 환경에서 마이닝(또는 데이터 분석)을 수행하기 위해서는 원본 데이터를 상대방에게 제공해야 한다. 그러나, 원본 데이터는 민감한 정보를 포함하는 경우가 많고, 이때 데이터 제공자(소유자)는 프라이버시 보호를 이유로 정확한 값을 직접 노출하기를 원하지 않는다. 본 논문에서는 분산 컴퓨팅 환경의 데이터 제공자들이 각자 소유한 데이터는 상대방에게 공개하지 않으면서 상관관계를 계산하는 문제, 즉 안전한 상관관계 계산(SCC: Secure Correlation Computation) 문제를 정형적으로 정의한다. 그리고, 임의 행렬 기반 안전한 스칼라 곱을 사용하여 피어슨 상관계수와 순위상관계수에 대한 SCC 문제를 해결하는 방법을 각각 제안한다. 제안한 해결책이 바르게 수행함을 보이기 위해, 정확성과 안전성을 정리로 제시하고 증명한다. 또한, 실험을 통해 제안한 기법이 수행 시간 측면에서도 실용적인 방법임을 보인다.

OSMU N-스크린 서비스를 위한 WiMedia D-MAC에서 멀티캐스트 릴레이 전송 기술의 성능 분석 (Performance Analysis of Multicast Relay Transmissions in WiMedia D-MAC for OSMU N-Screen Services)

  • 허경
    • 한국정보통신학회논문지
    • /
    • 제20권12호
    • /
    • pp.2267-2273
    • /
    • 2016
  • 본 논문에서는 OSMU (One Source Multi Use) N-스크린 멀티캐스트 서비스를 위한 무선 통신 MAC 구조로서, WiMedia Distributed-MAC 프로토콜을 적용하였다. 그러나, 채널 에러율이 가변적인 무선 통신환경을 고려하면, N-스크린 고속 데이터가 손실될 가능성이 높다고 할 수 있다. 이러한 문제에 대해, WiMedia Distributed-MAC 프로토콜을 분석하여, 멀티캐스트 릴레이 기술을 제안하였다. 제안하는 멀티캐스트 릴레이 기술은 Multicast-free DRP Availability IE 기술과 결합되어, 멀티캐스트 통신에 대해 릴레이노드를 선정하고 에러율이 높은 채널을 회피하여 통신할 수 있다. 시뮬레이션을 통해 제안하는 멀티캐스트 릴레이 기술과 기존 WiMedia Distributed-MAC 멀티캐스트 기술을 멀티캐스트 노드 수에 따라 수율과 에너지 소모량을 비교 하였고, 다양한 BER (Bit Error Rate) 채널 환경에서 수율 성능을 비교하였다. 이를 통해, OSMU N-스크린 멀티캐스트 서비스에서 멀티캐스트 릴레이 기술이 적용되어야 함을 설명하였다.