• 제목/요약/키워드: 실시간 데이터 분석

검색결과 2,581건 처리시간 0.073초

PCA와 SOM을 이용한 자동 군집화 에이전트 (Automatic Clustering Agent using PCA and SOM)

  • 박정은;김병진;오경환
    • 한국지능시스템학회:학술대회논문집
    • /
    • 한국퍼지및지능시스템학회 2003년도 추계 학술대회 학술발표 논문집
    • /
    • pp.67-70
    • /
    • 2003
  • 인터넷의 정보 홍수 속에서 원하는 정보를 정확하게 제시간에 얻기란 쉬운 일이 아니며, 따라서 이러한 작업을 대신해주는 에이전트의 역할이 점점 커지고 있다. 대부분의 이벤트들이 실시간에 발생되고 처리되어야 하는 인터넷 환경에서는 분석가가 군집화의 방법과 결과 해석에 지속적으로 관여하기 어렵기 때문에 이러한 분석가의 업무를 대신하는 지능화된 에이전트가 필요하게 된다. 본 논문에서는 특히 자율학습 군집화에 대한 자동화된 시스템으로서 자동 군집화 에이전트를 제안하며 이 시스템은 군집화 수행 에이전트와 군집화 성능 평가 에이전트로 이루어져 있다. 두 개의 에이전트가 서로 정보를 교환하면서 자동적으로 최적의 군집화를 수행한다. 군집화 과정에서는 데이터를 분석하는 분석가가 군집화의 방법과 결과 해석에 실시간으로 관여하기 어렵기 때문에 이러한 작업을 담당하는 지능화된 에이전트가 자동화된 군집화를 담당하면 효과적인 군집화 전략이 될 수 있다. 또한 UCI Machine Repository의 IRIS 데이터와 Microsoft Web Log Data를 이용한 실험을 통해 제안 시스템의 성능 평가를 수행하였다.

  • PDF

모바일 환경에서 DGPS 및 RTK 보정 데이터 실시간 장거리 전송 시스템의 구현 및 성능 분석 (Implementation and Performance Analysis of Real-Time DGPS & RTK Error Correction Data Transmission System for Long-Distance in Mobile Environments)

  • 조익성;임재홍
    • 대한원격탐사학회지
    • /
    • 제18권6호
    • /
    • pp.345-358
    • /
    • 2002
  • DGPS(Differential Global Positioning System)와 RTK(Real time Kinematic)를 이용한 측위는 현재 가장 널리 쓰이는 측위 기법이다. 하지만 자체의 구조적 한계 때문에 정밀 측위에 있어서는 기준점으로부터의 거리 제한과 실시간으로 데이터 처리를 전산화하기 힘든 문제점을 내제하고 있다. 따라서 본 논문에서는 이러한 문제점을 해결하기 위해 인터넷과 PSTN(Public Switched Telephony Network)망을 통한 DGPS 및 RTK 보정 데이터 서비스를 제안한다. 이를 위하여 모바일 사용자를 위한 DGPS 및 RTK 보정 데이터 실시간 장거리 전송 시스템을 구현하였다. 이는 데이터 전송거리가 제한되는 기존의 실시간 이동 측위 기법의 문제를 해결하기 위하여 인터넷과 PSTN 망을 사용함으로써 이동국 사용자에게 DGPS와 RTK 위치 정보 데이터의 전송을 가능하게 한다. 또한 제안한 방법대로 거리와 시간에 따른 인터넷망과 PSTN망을 통한 DGPS와 RTK의 성능을 비교 분석한다.

IoT 환경에서 모바일 기반 빅데이터 처리 및 모니터링 기술 (Mobile-based Big Data Processing and Monitoring Technology in IoT Environment)

  • 이승해;김주호;신동윤;신동진;박정민;김정준
    • 한국인터넷방송통신학회논문지
    • /
    • 제18권6호
    • /
    • pp.1-9
    • /
    • 2018
  • 현재 이슈가 되고 있는 4차 산업혁명에서 다양한 빅데이터 기술들을 통하여 기존의 느린 속도 보다 빠른 분석 결과를 즉각적으로 받아 볼 수 있고, 모바일과 웹에서 실시간 모니터링을 하는 연구를 진행하였다. 먼저 IoT 기기인 Raspberry Pi를 이용하여 다양한 비정형 센서 데이터를 생성하고 센서 데이터를 실시간 수집하고, 수집한 데이터를 여러 개의 노드를 이용해 분산 저장한 뒤 저장된 센서 데이터를 가공, 정제 처리하여 분석 모델 및 알고리즘을 통해 분석 결과를 시각화하여 출력한다. 이러한 방법들을 이용한 진행은 IoT를 이용한 빅데이터 및 모바일 관련 분야에서 필요한 고급 인력을 양성 및 데이터를 효율적이고 빠르게 처리할 수 있다. 또한, 실시간 모니터링을 통하여 연구결과의 신뢰성을 확인할 수 있는 정보를 제공하고자 한다.

계층적 블록매칭 알고리즘을 위한 파이프라인식 VLSI 아키텍쳐 (Pipelined VLSI Architectures for the Hierarchical Block-Matching Algorithm)

  • 김형철;맹승렬
    • 한국정보처리학회논문지
    • /
    • 제5권7호
    • /
    • pp.1691-1716
    • /
    • 1998
  • 본 논문에서는 계층적 블록매칭 알고리즘(HBMA)을 위한 두 가지 병렬 VLSI 아키텍쳐를 제안한다. HBMA는 계층에 따른 반복수행과 공간 인터폴레이션을 기반으로 수행되며, 이러한 수행 특성은 병렬처리의 장애요소인 데이터 종속성을 내재하고 있다. 제안된 아키텍쳐는 HBMA의 계층간 데이터 종속성을 해결하기 위하여 기본적으로 파이프라인 구조를 채택하고 있으며, HBMA에서 주어진 매개변수에 따라 세 단계의 스테이지로 구성된다. 제안된 아키텍쳐는 입력 프레임 데이터의 흐름을 제어하는 방식에 따라 두 가지 종류로 구분된다. U-Architecture는 단방향 스캔 순서를 따르도록 설계되었으며, B-Architecture는 양방향 스캔 수서를 따르도록 설계되었다. 각 아키텍쳐의 내부 메모리와 인터폴레이션 모듈은 해당 스캔 순서에 따라 동기적으로 동작할 수 있는 구조를 가진다. 성능분석의 결과로서 본 논문에서 제안한 두 가지 아키텍쳐가 모두 방송용 비디오 포맷을 실시간으로 처리할 수 있음을 보이고, HDTV 포맷은 가까운 장래의 VLSI 기술로 실시간 성능을 얻을 수 있음을 보였다. 또한, B-Architecture는 공간 연결성 내부 메모리 구조를 채택함으로써 입력 데이터의 재활용도를 높이고, 이에 따라 Q-Architecture에 비해서 데이터 입출력 핀의 개수를 약 반정도 줄일 수 있는 특성을 보이고 있다.

  • PDF

단거리전용통신(DSRC) 상에서의 효율적 데이터서비스 제공을 위한 이동에이전트 아키텍처 연구 (A Study on Mobile Agent Architecture for Data-Service over Dedicated Short Range Communication)

  • 신종회;김태윤
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2002년도 춘계학술발표논문집 (하)
    • /
    • pp.1435-1438
    • /
    • 2002
  • 미래의 산업으로 부각되고 있는 지능형교통시스템(ITS: Intelligent Transport Systems)은 실시간 데이터의 원활한 전송을 위하여 차량과 노변장치 간의 고속 무선통신 방식인 단거리전용통신(DSRC) 방식을 적용하고 있다. 그러나, DSRC 방식은 실시간 환경에 적합한 축약된 3계층(물리, 데이터링크, 응용계층) 구조로 이뤄져 있으며, 통신영역간에 로밍이나 핸드오프 기능이 결여되어 있어 일반적인 데이터서비스를 제공하기에는 여러 가지 문제점을 안고 있다. 이에, 본 연구에서는 이러한 문제점을 분석하고, DSRC 상에서 효율적인 데이터서비스를 제공할 수 있는 이동에이전트 아키텍처를 제안하였다.

  • PDF

트위터 분석을 이용한 카테고리별 실시간 트렌드 추출 기법 (Real-time Category Trend Extraction Scheme based on Twitter Analysis)

  • 나병진;김용성;황인준
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2015년도 추계학술발표대회
    • /
    • pp.1581-1584
    • /
    • 2015
  • 최근 소셜 네트워크 서비스상의 데이터를 실시간으로 분석하여 의미있는 정보를 찾아내기 위한 연구가 활발하게 진행되고 있다. 특히, 스마트폰과 같은 스마트 디바이스를 이용하는 많은 사용자들이 실시간으로 발생하는 이벤트를 소셜 네트워크상에 게재하고 서로 공유하면서, 대중들이 관심을 가지는 토픽의 경우 굉장히 빠르게 확산되는 경향을 보이고 있다. 본 논문에서는 이러한 SNS의 특성을 토대로 트위터상의 트윗을 분석하여 여러 분야의 토픽들을 카테고리별로 분류하고, 카테고리별 트렌드를 추출하여 실시간으로 시각화하는 기법을 제안한다. 이를 위해, 트위터를 기반으로 SVM 분류 알고리즘과 Twitter-LDA를 통하여 트윗을 분야별로 분류하고, 각각의 트렌드를 이루는 대표적인 키워드를 선출하여 이를 기반으로 실시간 트렌드를 추출한다. 제안하는 기법의 성능을 평가하기 위해, 분류 특징 선택의 신뢰도를 측정한다.

실시간 파일 복사 유출 방지 시스템에 관한 연구 (A Study on the Real-Time File Copy Leakage Prevention System)

  • 김호윤;김효종;이준연;신승수
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2021년도 추계학술대회
    • /
    • pp.217-219
    • /
    • 2021
  • ICT의 발달과 함께 데이터의 양은 증가하고, 저장하고 처리하는 기술은 중요해지고 있다. 본 연구에서는 기업, 공공장소 등에서 중요 데이터 유출 방지를 위하여 실시간 파일 복사 유출 방지 시스템에 관해 연구한다. 연구 방법으로는 데이터 유출 사례와 문제점을 분석한 뒤 데이터 유출 방지를 위해 실시간으로 이벤트를 감지하는 시스템을 제안한다. 파일 유출 방지 시스템은 기존 EDLP 시스템과 비교 분석하며 제안하는 시스템은 부하를 줄이며 이벤트를 탐지한다. 향후 연구로는 네트워크 및 다양한 경로를 통한 유출 방지에 대한 연구가 필요하다.

  • PDF

실시간 현장관측과 기계학습을 이용한 토양수분 예측기술의 개발 및 적용 (Development and application of soil moisture prediction using real-time in-situ observation and machine learning)

  • 우현아;이예원;김민영;노성진
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2023년도 학술발표회
    • /
    • pp.286-286
    • /
    • 2023
  • 물의 전체 순환 구조에서 토양수분이 차지하는 정량적 비중은 상대적으로 작지만, 강우-유출 과정의 비선형에 영향을 미치는 지배적 요인 중 하나이고, 토양 침식과 산사태, 농업생산량, 기후 변화 대응 등 광범위한 주제와 연관되어 있어, 토양수분의 물리과정에 대한 이해 증진과 예측 기술의 지속적인 개선이 필요하다. 본 연구에서는 금오공과대학교 유역 내에서 토양수분과 기상 요소를 실시간 관측하고, 기계학습 기법을 이용하여 토양수분을 단기 예측하는 기술을 개발하고 평가한다. 구체적으로는, 토양 관측 장비인 TEROS를 사용하여 표층 지점의 10cm, 심층 지점의 40cm에서의 토양수분, 토양장력과 토양온도를, 기상 관측 장비인 ATMOS를 사용하여 태양복사, 강수량, 기온, 풍속, 대기압 등 다양한 기상 요소를, 실시간 클라우드 방식으로 1여 년간 수집한 데이터를 활용한다. 또한, 과거 및 실시간 데이터를 기반으로 LSTM(Long-Short Term Memory) 기법을 사용하여 토양수분 예측 모형을 구축하고, 선행 예측 시간에 따른 모의 정확도를 평가한다. 기상 요소의 누적 등 자료 분석 방법이 표층 및 심층 토양수분 예측에 미치는 영향, 그리고 예측 모형 개선 방향에 대해 토의한다. 실시간 현장 관측 자료 및 인공지능 기반 단기 토양수분 예측 모의 기술은 소규모 유역의 수문순환 분석 및 물리기반 모형의 개선 등 다양한 분야에서 활용할 수 있을 것으로 기대된다.

  • PDF

부분방전 예방진단 시스템의 로컬유닛 기능 향상을 위한 Digital Signal Processor(DSP) 응용 (The Application of Digital Signal Processor(DSP) for Improvement of Local Unit for a Partial Discharge Online Monitoring System)

  • 연만승;이재호;구자윤;강창원
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 2003년도 하계학술대회 논문집 C
    • /
    • pp.1861-1863
    • /
    • 2003
  • 최근 국내 전력시장은 초고압 대전력기기 사용이 현저히 증가하고 있어 이에 따라 부분방전 예방진단 시스템의 필요성은 절대적이며 이러한 시스템의 국산화가 절실히 요구되고 있다. 예방 진단 시스템의 국산화에 있어 부분방전 신호 측정시 신호 대 잡음비(Signal to Noise ratio)를 높이기 위해 측정용 센서의 검출가능 주파수 대역을 높게 설정하여 설계되고 있는데, 따라서 센서에서 검출된 신호를 처리하기 위한 로컬유닛 또한 국산화시 외국 시스템보다 더욱 신뢰성을 가질 수 있도록 설계되어야 한다. 이를 위해서는 기존의 마이크로프로세서를 채용한 저속 시스템을 대체할 수 있도록 더욱 빠르고 높은 신뢰성의 디지털 신호처리 기술이 요구된다. 본 논문에서는 검출 센서의 아날로그 신호를 빠르게 디지털화 한 후 보다 정확한 데이터와 독립적 신호처리 그리고 네트워크를 통한 실시간 전송을 수행할 수 있는 부분방전 예방진단 시스템 로컬유닛의 프로토타입을 Digital Signal Processor (DSP)를 이용하여 구현하였다. 제작된 DSP 로컬유닛을 시험하기 위해 Real-Scale 170kV GIS Mock-up에서 부분방전 신호를 발생 시키고 센서를 통해 검출된 신호를 DSP가 처리하여 사용자의 네트워크를 통한 명령에 따른 실시간 전송모드, ${\Phi}$-q-n 진단모드로 자체 네트워크 기능을 이용하여 사용자에게 데이터를 실시간 전송하도록 하였다. 본 논문에서 구현한 DSP 로컬유닛은 대전력기기 부분방전 예방진단 시스템의 국산화에 있어 기존의 외국 시스템의 로컬유닛보다 구성이 간단하며, 실시간 신호처리 및 원거리 데이터 전송기능에서 우수한 성능을 보였다. 향후 연구에서는 다양한 분석 알고리즘을 탑재한 DSP를 개발하여 더욱 향상된 실시간 데이터 전송 및 분석기능이 우수한 DSP 로컬유닛을 개발하고자 한다.

  • PDF

시계열 분석을 이용한 실시간 네트워크 트래픽 예측 시스템의 설계 (Design a Realtime Network Traffic Prediction System based on Timeseries Analysis)

  • 정상준;권영헌;최혁수;김종근
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2001년도 추계학술발표논문집 (하)
    • /
    • pp.1323-1326
    • /
    • 2001
  • 서브네트워크에서 실시간으로 통신 트래픽을 감시하고, 트래픽 정보를 바탕으로 시계열 분석을 이용해 트래픽의 변화추이를 예측할 수 있는 시스템을 설계 및 구현한다. SNMP를 이용한 MIB-II 정보를 바탕으로 하는 분석 방법은 누적 데이터를 기본으로 하는 관리 방법으로 이상 징후의 판단이 실시간 감시에는 적합하지 않은 점이 있다. 따라서, 본 논문에서는 실시간 트래픽 감시를 위해 서브네트워크에 들어오거나 나가는 트래픽의 양을 측정하여 분석하고, 이 정보를 바탕으로 특정 시점 이후의 트래픽 추이를 시계열 분석 방법을 이용하여 미래의 트래픽 양을 예측하는 알고리즘을 시스템으로 구현한다. 예측 알고리즘으로는 AR, MA, ARMA, ARIMA 모델중에 평균 제곱 오차를 최소로 가지는 알고리즘을 선택하여 예측하도록 설계한다. 개발되는 시스템을 망 관리자가 전체 통신 네트워크의 부하 상태를 예상할 수 있게 하여 신속하고 예방적인 대응을 할 수 있다.

  • PDF