• 제목/요약/키워드: sensor stream

검색결과 180건 처리시간 0.024초

하둡 분산 환경 기반의 데이터 수집 기법 연구 (A Study on the Data Collection Methods based Hadoop Distributed Environment)

  • 진고환
    • 한국융합학회논문지
    • /
    • 제7권5호
    • /
    • pp.1-6
    • /
    • 2016
  • 최근 빅데이터 활용과 분석기술의 발전을 위하여 많은 연구가 이루어지고 있고, 빅데이터를 분석하기 위하여 처리 플랫폼인 하둡을 도입하는 정부기관 및 기업이 점차 늘어가고 있는 추세이다. 이러한 빅데이터의 처리와 분석에 대한 관심이 고조되면서 그와 병행하여 데이터의 수집 기술이 주요한 이슈가 되고 있으나, 데이터 분석 기법의 연구에 비하여 수집 기술에 대한 연구는 미미한 상황이다. 이에 본 논문에서는 빅데이터 분석 플랫폼인 하둡을 클러스터로 구축하고 아파치 스쿱을 통하여 관계형 데이터베이스로부터 정형화된 데이터를 수집하고, 아파치 플룸을 통하여 센서 및 웹 애플리케이션의 데이터 파일, 로그 파일과 같은 비정형 데이터를 스트림 기반으로 수집하는 시스템을 제안한다. 이러한 융합을 통한 데이터 수집으로 빅데이터 분석의 기초적인 자료로 활용할 수 있을 것이다.

복합 이벤트 처리기술을 적용한 효율적 재해경보 전파에 관한 연구 (A study on the efficient early warning method using complex event processing (CEP) technique)

  • 김형우;김구수;장성봉
    • 한국정보통신설비학회:학술대회논문집
    • /
    • 한국정보통신설비학회 2009년도 정보통신설비 학술대회
    • /
    • pp.157-161
    • /
    • 2009
  • In recent years, there is a remarkable progress in ICTs (Information and Communication Technologies), and then many attempts to apply ICTs to other industries are being made. In the field of disaster managements, ICTs such as RFID (Radio Frequency IDentification) and USN (Ubiquitous Sensor Network) are used to provide safe environments. Actually, various types of early warning systems using USN are now widely used to monitor natural disasters such as floods, landslides and earthquakes, and also to detect human-caused disasters such as fires, explosions and collapses. These early warning systems issue alarms rapidly when a disaster is detected or an event exceeds prescribed thresholds, and furthermore deliver alarm messages to disaster managers and citizens. In general, these systems consist of a number of various sensors and measure real-time stream data, which requires an efficient and rapid data processing technique. In this study, an event-driven architecture (EDA) is presented to collect event effectively and to provide an alert rapidly. A publish/subscribe event processing method to process simple event is introduced. Additionally, a complex event processing (CEP) technique is introduced to process complex data from various sensors and to provide prompt and reasonable decision supports when many disasters happen simultaneously. A basic concept of CEP technique is presented and the advantages of the technique in disaster management are also discussed. Then, how the main processing methods of CEP such as aggregation, correlation, and filtering can be applied to disaster management is considered. Finally, an example of flood forecasting and early alarm system in which CEP is incorporated is presented It is found that the CEP based on the EDA will provide an efficient early warning method when disaster happens.

  • PDF

공공공간에서 나타나는 미디어 특성에 관한 연구 - 뉴 미디어와 HCI 이론을 중심으로 - (Analysis of the Adaptability and Methods of Public space in media - Focused on new-media and HCI theory -)

  • 고귀한;강선경
    • 한국실내디자인학회논문집
    • /
    • 제22권1호
    • /
    • pp.203-210
    • /
    • 2013
  • With digital technology, space design is developing in a new direction with the changing paradigm. The space creates an interactive environment by motivating the User's active participation through the digital madia. In this social stream, it is very important to think about how this new paradigm affects the spatial design and the interactions between social changes and spatial design paradigm, so that we can understand design paradigm of our time. Hence, in this research, we will think about social characteristic and design paradigm of digital age by questioning how spatial design is changing in the digital age and how digital technology is affecting spatial design. this study analyzed about the space form, digital media setting, user interactivity of the examples of experience space using digital media. fields of our society, interactive space with the concept of HCI became a big issue in environmental design field. In this interactive space, various types of informative factors of the given space are sent using sensor and computer networking technology to the main system, and the main computer system sends manipulated output media to interactive devices. So, a user's movement in the space is more than just a movement itself user's movement now forms a important spatial structure that leads the narrative of the space. Researcher will analyze the characteristic of a public space and progress this research supposing that space needs this interactive design.

시공간 복합 이벤트 처리의 확장을 통한 계층적 이벤트 설계 및 구현 (Design and Implementation of Event Hierarchy through Extended Spatio-Temporal Complex Event Processing)

  • 박예진;염재홍
    • 한국측량학회지
    • /
    • 제30권6_1호
    • /
    • pp.549-557
    • /
    • 2012
  • 환경 오염, 질병과 같은 확산의 위험 정보가 높은 공간 현상들은 신속한 초기 대응이 필요하며 특히 확산의 주체가 되는 이동체 데이터에 대한 실시간 처리와 분석을 통해 확산 요인 이벤트를 감지해야 한다. 이러한 이벤트를 처리하고 분석하기 위해 시공간 복합 이벤트 처리(Spatial-Temporal Complex Event Processing)가 활용된다. 기존의 시공간 복합 이벤트 처리는 기본적인 공간 연산이 가능하나 복잡도가 높은 공간 상황을 감지하는 시공간 복합 이벤트 설계에 적용이 미흡하였다. 본 연구에서는 시공간 복합 이벤트 처리의 공간 연산의 확장을 가능케 하고 복합적인 이벤트 설계 과정에서 효율적으로 이벤트를 관리 하기 위해 계층적 시공간 복합 이벤트 설계를 제안하였다. 제안된 방법으로 축산 관련 차량들 중 구제역 확산과 관련된 차량을 감지하는 새로운 이벤트를 생성하는 실험을 진행하여 제안된 시공간 복합 이벤트 처리의 효용성을 입증하였다.

Janus - Multi Source Event Detection and Collection System for Effective Surveillance of Criminal Activity

  • Shahabi, Cyrus;Kim, Seon Ho;Nocera, Luciano;Constantinou, Giorgos;Lu, Ying;Cai, Yinghao;Medioni, Gerard;Nevatia, Ramakant;Banaei-Kashani, Farnoush
    • Journal of Information Processing Systems
    • /
    • 제10권1호
    • /
    • pp.1-22
    • /
    • 2014
  • Recent technological advances provide the opportunity to use large amounts of multimedia data from a multitude of sensors with different modalities (e.g., video, text) for the detection and characterization of criminal activity. Their integration can compensate for sensor and modality deficiencies by using data from other available sensors and modalities. However, building such an integrated system at the scale of neighborhood and cities is challenging due to the large amount of data to be considered and the need to ensure a short response time to potential criminal activity. In this paper, we present a system that enables multi-modal data collection at scale and automates the detection of events of interest for the surveillance and reconnaissance of criminal activity. The proposed system showcases novel analytical tools that fuse multimedia data streams to automatically detect and identify specific criminal events and activities. More specifically, the system detects and analyzes series of incidents (an incident is an occurrence or artifact relevant to a criminal activity extracted from a single media stream) in the spatiotemporal domain to extract events (actual instances of criminal events) while cross-referencing multimodal media streams and incidents in time and space to provide a comprehensive view to a human operator while avoiding information overload. We present several case studies that demonstrate how the proposed system can provide law enforcement personnel with forensic and real time tools to identify and track potential criminal activity.

랜드마크 윈도우 기반의 빈발 패턴 마이닝 기법의 분석 및 성능평가 (Analysis and Evaluation of Frequent Pattern Mining Technique based on Landmark Window)

  • 편광범;윤은일
    • 인터넷정보학회논문지
    • /
    • 제15권3호
    • /
    • pp.101-107
    • /
    • 2014
  • 본 논문에서는 랜드마크 윈도우 기반의 빈발 패턴 마이닝 기법을 분석하고 성능을 평가한다. 본 논문에서는 Lossy counting 알고리즘과 hMiner 알고리즘에 대한 분석을 진행한다. 최신의 랜드마크 알고리즘인 hMiner는 트랜잭션이 발생할 때 마다 빈발 패턴을 마이닝 하는 방법이다. 그래서 hMiner와 같은 랜드마크 기반의 빈발 패턴 마이닝을 온라인 마이닝이라고 한다. 본 논문에서는 랜드마크 윈도우 마이닝의 초기 알고리즘인 Lossy counting와 최신 알고리즘인 hMiner의 성능을 평가하고 분석한다. 우리는 성능평가의 척도로 마이닝 시간과 트랜잭션 당 평균 처리 시간을 평가한다. 그리고 우리는 저장 구조의 효율성을 평가하기 위하여 최대 메모리 사용량을 평가한다. 마지막으로 우리는 알고리즘이 안정적으로 마이닝이 가능한지 평가하기 위해 데이터베이스의 아이템 수를 변화시키면서 평가하는 확장성 평가를 수행한다. 두 알고리즘의 평가 결과로, 랜드마크 윈도우 기반의 빈발 패턴 마이닝은 실시간 시스템에 적합한 마이닝 방식을 가지고 있지만 메모리를 많이 사용했다.

u-GIS 환경에서 효율적인 공간 정보 유통을 위한 S-XML 변환 기법 (S-XML Transformation Method for Efficient Distribution of Spatial Information on u-GIS Environment)

  • 이동욱;백성하;김경배;배해영
    • 한국공간정보시스템학회 논문지
    • /
    • 제11권1호
    • /
    • pp.55-62
    • /
    • 2009
  • u-GIS 환경에서는 센서 네트워크를 통해 필요한 공간 데이터를 수집하고 이를 실시간 처리 및 가공 또는 기 저장되어 있는 정보와 함께 유통된다. 웹 기반 응용서비스 등에서 인터넷 망을 통한 정보가 요청되는 경우 표준 문서인 XML로 전달된다. 특히 요청되는 정보에 공간 데이터가 포함되는 경우 공간데이터 처리가 가능한 GML, S-XML 등의 문서가 사용된다. 이 과정에서 DSMS에서와 같이 실시간 처리된 스트림데이터는 S-XML 문서 형태로 변환되고, 웹 기반의 공간정보 응용서비스는 인터넷 망을 통해 S-XML 문서를 전달받는다. 대부분의 공간정보 응용서비스는 저장시스템으로 기존의 공간 데이터베이스 관리 시스템을 사용하기 때문에 S-XML 데이터와 SDBMS에서 사용되는 데이터간의 상호 변환과정이 필요하다. 본 논문에서는 공간 데이터의 캐싱을 이용한 S-XML 변환 기법을 제안한다. 제안 기법은 공간 정보유통을 위한 S-XML과 관계형 공간 데이터베이스와의 효율적인 변환을 위해, S-XML에서 공간 데이터에 해당하는 부분을 캐싱하고, 동일 지역의 공간데이터에 대한 변환이 요구될 경우 캐시 데이터를 재사용하여 별도의 변환 비용 없이 변환한다. 제안 기법을 통해 u-GIS 환경에서 공간정보의 유통을 위한 S-XML 문서와 이를 이용하는 웹 기반 공간정보 응용서비스 사이의 변환 비용을 감소하였으며, 성능평가를 통하여 질의 처리 성능이 향상됨을 보인다.

  • PDF

식물의 세포반응에 대한 칼모듈린의 functional 작용기작 연구 (Functional Mechanism of Calmodulin for Cellular Responses in Plants)

  • 조은경;최영주
    • 생명과학회지
    • /
    • 제19권1호
    • /
    • pp.129-137
    • /
    • 2009
  • $Ca^{2+}$은 다양한 자극과 빛, biotic, abiotic 스트레스, 호르몬 등의 반응에 대한 세포내 2차 신호전달물질로써 중요한 역할을 한다. $Ca^{2+}$의 반응자들은 특정 물질과 경로를 활성화함으로써 신호전달 기능을 한다고 알려져 있는 $Ca^{2+}$ 결합 단백질들이다. 이들 단백질 중, calmidulin (CaM)은 식물과 동물의 특정 단백질의 활성을 조절하는 것으로 잘 알려져 왔다. 특히, 식물은 다양한 CaM 유전자와 특징적인 protein kinase와 전사인자를 포함한 많은 종류의 CaM 관련 단백질들을 가지고 있다. 이로 인해서 식물은 주변의 여러 가지 신호등을 인지할 수 있을 뿐만 아니라 변화된 환경에 적응할 수 있는 것이다. 하지만, 대부분의 CaM이나 이들과 관련된 단백질들의 기능은 최근 활발히 연구되고 있지만 아직 많은 작용 기작이 연구의 대상이 되고 있다. 따라서 CaM의 기능을 좀 더 이해한다면 식물의 환경적 자극에 대한 반응과 식물의 성장과 발달에 있어서 CaM의 역할을 규명하는데 도움을 줄 수 있을 것으로 기대된다. 본 논문은 $Ca^{2+}$-CaM의 신호전달 시스템과, CaM과 관련된 단백질들, 그리고 식물의 biotic, abiotic 스트레스에 대한 외부 자극의 반응에 있어서 CaM의 작용에 대해 기술하였다.

자동 수분 제어시스템을 이용한 간척지 케나프 재배시 하천수 및 액비 관개 효과 (Effect of Irrigation of River Water and Swine Slurry Liquid Fertilizer on Kenaf (Hibiscus cannabinus L.) Growth Cultivated Using Soil Moisture Control System in Reclaimed Land)

  • 강찬호;이인석;이진재;김희준
    • 한국작물학회지
    • /
    • 제66권1호
    • /
    • pp.87-96
    • /
    • 2021
  • 1. 토양 센싱을 통한 환경정보의 습득과 일정 토양수분 이하가 되면 자동으로 물 공급이 이루어지도록 하는 자동수분제어 그리고 원격지에서 PC나 휴대폰을 통하여 시스템 운영을 확인할 수 있는 원격 자동 정밀 수분제어솔루션을 구성하여 운영한 결과 시스템이 안정적으로 운영되고 있음이 확인되었다. 2. 이 시스템을 적용하여 토양수분을 관리하면 케나프 발아율이 100%p 향상되었다. 간척지 노출 후 무경작 상태의 간척지 토양을 대상으로 비료 투입 없이 간척지 주변 하천수를 이용하여 정밀 수분제어솔루션을 운영하면 케나프 4,748 kg/10a 수확이 가능하여 토양수분 관리를 하지 않은 무처리에 비해서 수량이 106% 증가하였다. 3. 조건을 동일하게 하고 공급수를 하천수가 아닌 축분액비로 할 경우 케나프 생장에 필요한 비효 성분의 공급이 원활히 이루어져 케나프 수량이 8,390 kg/10a까지 증가하였다. 4. 자동 토양수분 조절을 통해 토양 수분이 지속적이고 안정으로 관리되면 케나프 수확물의 품질이 높아져 건물률이 7% 높아졌으며 식물체의 경도도 11.5% 증가하였다. 5. 무비료, 유기물 무투입 상태에서 케나프 추정 요수량 800톤을 새만금 간척지주변 하천수를 이용하여 자동조절수분시스템으로 공급할 경우 케나프 예측 수량은 5,039 kg/10a이었다.

하이브리드 빅데이터 분석을 통한 홍수 재해 예측 및 예방 (Flood Disaster Prediction and Prevention through Hybrid BigData Analysis)

  • 엄기열;이재현
    • 한국빅데이터학회지
    • /
    • 제8권1호
    • /
    • pp.99-109
    • /
    • 2023
  • 최근에 우리나라에서 뿐만 아니라, 세계 곳곳에서 태풍, 산불, 장마 등으로 인한 재해가 끊이지 않고 있고, 우리나라 태풍 및 호우로 인한 재산 피해액만 1조원이 넘고 있다. 이러한 재난으로 인해 많은 인명 및 물적 피해가 발생하고, 복구하는 데도 상당한 기간이 걸리며, 정부 예비비도 부족한 실정이다. 이러한 문제점들을 사전에 예방하고 효과적으로 대응하기 위해서는 우선 정확한 데이터를 실시간 수집하고 분석하는 작업이 필요하다. 그러나, 센서들이 위치한 환경, 통신 네트워크 및 수신 서버들의 상황에 따라 지연 및 데이터 손실 등이 발생할 수 있다. 따라서, 본 논문에서는 이러한 통신네트워크 상황에서도 분석을 정확하게 할 수 있는 2단계 하이브리드 상황 분석 및 예측 알고리즘을 제안한다. 1단계에서는 이기종의 다양한 센서로부터 강, 하천, 수위 및 경사지의 경사각 데이터를 수집/필터링/정제하여 빅데이터 DB에 저장하고, 인공지능 규칙기반 추론 알고리즘을 적용하여, 위기 경보 4단계를 판단한다. 강수량이 일정값 이상인데도 불구하고 1단계 결과가 관심 이하 단계에 있으면, 2단계 딥러닝 영상 분석을 수행한 후 최종 위기 경보단계를 결정한다.