• 제목/요약/키워드: IoT 빅데이터

검색결과 331건 처리시간 0.023초

시간의 흐름과 위치 변화에 따른 멀티 블록 스트림 데이터의 의미 있는 패턴 추출 방법 (The Method for Extracting Meaningful Patterns Over the Time of Multi Blocks Stream Data)

  • 조경래;김기영
    • 정보처리학회논문지:컴퓨터 및 통신 시스템
    • /
    • 제3권10호
    • /
    • pp.377-382
    • /
    • 2014
  • 모바일 통신과 사물 인터넷(IoT) 환경에서 시간에 따른 데이터의 분석 기술은 주로 의미 있는 정보를 찾기 위해 수집 된 데이터에서 의미있는 패턴을 추출하기 위해 사용된다. 기존의 데이터 마이닝을 이용한 분석 방법은 데이터 수집이 어렵고 시간의 경과와 관련된 시계열 데이터의 변경을 반영하기 위해 완료 상태에 기초하여 해석되어야 한다. 이러한 패턴의 다양성, 대용량성, 연속성 등의 여러 가지 특성을 가진 데이터 스트림의 분석을 위한 방법으로 멀티 블록 스트리밍 데이터 분석(AM-MBSD) 방법을 제안한다. 의미 있는 데이터 추출을 위해 멀티 블록 스트리밍 데이터의 패턴을 추출하고 추출된 연속적 데이터를 여러 개의 블록으로 정의하고 제안 방법의 검증을 위해 각 데이터 블록의 데이터 패턴 생성 시간, 주파수를 수집하고 시계열 데이터를 분석, 실험하였다.

미세먼지 예측 성능 개선을 위한 CNN-LSTM 결합 방법 (CNN-LSTM Combination Method for Improving Particular Matter Contamination (PM2.5) Prediction Accuracy)

  • 황철현;신강욱
    • 한국정보통신학회논문지
    • /
    • 제24권1호
    • /
    • pp.57-64
    • /
    • 2020
  • 최근 IoT 센서의 확산과 빅데이터, 인공지능 관련 기술의 발전으로 인해 미세먼지 오염도에 대한 시계열 예측 관련 연구가 활발하게 진행되고 있다. 하지만 미세먼지 오염도를 나타내는 데이터가 급격히 변하는 특성(Extreme)을 가지고 있어 기존의 시계열 예측방법으로는 현장에서 사용할 수 있는 수준의 정확도를 내지 못하고 있다. 이 논문에서는 LSTM을 활용하여 미세먼지 오염도를 예측할 때 CNN을 통한 환경상황을 분류한 결과를 반영하는 방법을 제안한다. 이 방법은 LSTM과 CNN이 독립적이지만 인터페이스를 통해 하나의 네트워크로 통합되기 때문에, 응용 LSTM보다 이해하기 쉽다. Beijing PM2.5 데이터를 활용한 제안 방법의 검증 실험에서 예측 정확도와 변화 시기에 대한 예측력이 다양한 실험 case에서 일관되게 향상된 결과를 보였다.

빅데이터를 활용한 여수관광 활성화 방안 (Methods to Propel Tourism of Yeosu City Using Big Data)

  • 임양의;김강철
    • 한국전자통신학회논문지
    • /
    • 제15권4호
    • /
    • pp.739-746
    • /
    • 2020
  • 2016년 세계 경제포럼에서 처음 소개된 4차 산업혁명은 빅데이터 분석, 사물인터넷, 인공 지능 등의 핵심 정보통신 기술의 변화뿐만 아니라 관광 업계에도 엄청난 파급 효과를 가져 오고 있다. 본 연구는 빅데이터 분석과 설문조사를 통하여 여수시의 관광활성화 방안을 제시한다. 소셜 메트릭스를 사용하여 여수 관광에 대하여 감성어와 긍부정 추이를 추출하고, 네이버 데이터랩을 사용하여 여수 관광에 관련된 키워드를 추출하여 R 언어로 시각화하였다. 그리고 여수지역을 방문하는 493명의 여행객의 설문조사를 바탕으로 SPSS를 사용하여 빈도, 요인, 차이, 상관관계 및 회귀분석을 수행하였다. 여수 여행과 해양 케이블카의 감성어 분석에서는 긍정이 부정보다 월등히 많았다. 설문조사 분석에서 여수지역이 여수 관광 만족도와 활성화에 유의미하고, 연령별로 선호하는 관광지와 검색 기기가 다르다는 것을 확인하였다. 빅데이터 분석과 설문조사에서 관광객들은 함께 즐기면서 힐링 할 수 있는 해양공원 같은 소프트 컨텐츠가 있는 관광지를 선호한다는 것을 보여주었다.

빅데이터 기법을 활용한 Data Technology의 키워드 분석 (Keyword Analysis of Data Technology Using Big Data Technique)

  • 박성욱
    • 기술혁신학회지
    • /
    • 제22권2호
    • /
    • pp.265-281
    • /
    • 2019
  • 경제가 성장하고 인터넷이 발전되면서 사람들의 경제형태와 소비는 많이 바뀌었다. 중국 알리바바 그룹은 모바일, 온라인, 오프라인, 인공지능을 결합한 플랫폼으로 약 28조의 매출을 창출하고 있다. 이는 1초에 약 25만건을 처리하는 수준이며, 2016년 대비 40% 증가했다. 이를 가능하게 한 핵심 기술은 소위 Data Technology라고 불리는 빅데이터와 클라우드 컴퓨팅이 융합된 기술이다. 기술의 발전속도에 비해 Data Technology에 관한 정확한 개념적 정의는 부족하다. 이에 본 논문은 빅데이터 분석기법인 TexTom을 활용하여 구글과 네이버의 최근 3개년(2015년 11월~2018년 11월) 신문기사를 데이터 마이닝 및 정제하여 'Data Technology' 키워드로 한정하여 관련 핵심 키워드를 도출하였다. 그 결과 빅데이터, O2O, 인공지능, 사물인터넷, 클라우드 컴퓨팅의 핵심 키워드 기술이 Data Technology와 관계가 있음을 알수 있었다. 본 연구의 분석결과는 향후 Data Technology 시대가 도래되면 참고할 수 있는 유용한 정보로 활용될 수 있다.

MongoDB 기반의 분산 침입탐지시스템 성능 평가 (Evaluation of Distributed Intrusion Detection System Based on MongoDB)

  • 한효준;김혁호;김양우
    • 정보처리학회논문지:컴퓨터 및 통신 시스템
    • /
    • 제8권12호
    • /
    • pp.287-296
    • /
    • 2019
  • IoT, 클라우드 컴퓨팅과 같은 인터넷 서비스의 발전과 사용량의 증가로 인해 수많은 패킷들이 인터넷상에서 빠르게 생성되고 있다. 안전한 인터넷 사용 환경을 만들기 위해서는 이 수많은 패킷 중에 존재할 수 있는 악성 데이터의 빠른 처리가 이뤄져야 한다. 본 논문에서는 빅데이터 보안 이벤트의 신속한 처리를 위해 비정형 데이터 분석과 빅데이터 처리에 특화된 MongoDB를 침입탐지시스템에 적용하였다. 또한 보호 대상인 사설 클라우드의 일부 자원을 이용하여 침입탐지시스템을 구축함으로써 증가 또는 감소하는 보안 이벤트 수에 따라 탄력적으로 컴퓨팅 자원 재구성이 가능하도록 하였다. 본 논문에서 제안하는 MongoDB 기반 침입탐지시스템의 성능을 평가하기 위하여 MongoDB 기반의 침입탐지시스템과 기존의 관계형 데이터 베이스를 기반으로 한 침입탐지시스템의 프로토타입을 구축하고 성능을 비교하였다. 또한 분산화 구성에 따른 성능 변화를 확인하기 위하여 가상머신의 수를 변경하며 성능 변화를 확인하였다. 그 결과 전체적으로 MongoDB 환경에서 동일한 성능의 시스템을 분산화시켜 가상 머신의 수를 증가시킬수록 침입탐지시스템의 성능이 향상되는 것을 확인하였다. 분산 MongoDB 기반의 보안 이벤트 저장 속도가 관계형 데이터베이스 기반에 비해 최대 60%, 그리고 분산 MongoDB 기반의 침입 데이터 탐지 속도가 관계형 데이터베이스 기반에 비해 최대 100% 빠른 결과를 얻었다.

기상기후 빅데이터를 활용한 해양기상서비스 콘텐츠 개발 (Development of Contents on the Marine Meteorology Service by Meteorology and Climate Big Data)

  • 윤홍주
    • 한국전자통신학회논문지
    • /
    • 제11권2호
    • /
    • pp.125-138
    • /
    • 2016
  • 현재 기상정보를 활용하고자 하는 수요는 증가하고 있으나 제공되는 기상기후정보는 한정적이다. 개선을 위해서는 기상기후 빅데이터 활용 플랫폼 지원, 정부 및 공공기관, 기업의 요구에 부응하는 기상기후 빅데이터 전문 인력 양성이 필요하다. 기상기후 빅데이터는 다양한 분야에서 활용 가능한 고부가가치 서비스 제공이 필요하며 서비스의 확대 및 새로운 콘텐츠 개발을 위하여 산업 분야별 유형별 특성에 맞는 맞춤형 서비스가 제공되어야 한다. 맞춤형 서비스를 제공하기 위해서는 국가차원의 협업생태계 조성이 필수적이다. 협업생태계 조성 환경을 만들기 위해서는 해양정책과 기상정책의 융합, 해양학과 기상학의 융합, R&D 기초연구와 응용연구의 융합이 필요하다. 이후 수요분석, 생산정보공유, 단일화 순서로 협업생태계를 구축할 수 있다.

스마트 시티의 발전을 위한 빅데이터 플랫폼 구축과 적용 (Big Data Platform Construction and Application for Smart City Development)

  • 문승혁
    • 문화기술의 융합
    • /
    • 제6권2호
    • /
    • pp.529-534
    • /
    • 2020
  • 인류 문명의 발전은 산업화에 따른 도시의 발전과 운송 기술의 진화와 맥을 같이한다. 지금까지의 도시 발전은 수송비 절감과 한정된 중심업무 지구로서의 토지 이용 요구에 따라 진행되어왔다. 도시 인구 밀집도의 지속적인 증가는 지가상승, 교통 혼잡, 빈부격차, 공해발생 등과 같이 사회·경제적으로 많은 문제를 일으켜 왔고 현재의 도시 생태 시스템으로는 전반적인 해결에 어려움이 있다. 그러나 문제의 해결을 위한 실마리는 바로 도시생태계 내에서 찾을 수 있다. 서울 심야버스 운행 노선의 설계는 바로 심야의 도시 내 이동 인구의 흐름을 정보통신 기술을 이용해 분석하여 얻은 결과이다. 이렇듯 도시 문제의 해결은 도시 생태계의 분석에서 출발하는 것이 타당하다. 문제의 원인을 알았다면 시민의 삶의 질을 높이기 위해 빅데이터 플랫폼 구축이 필요하고 이를 통한 해결이 가능하다. 이 플랫폼의 중심에는 정보통신 기술의 기반 하에 도시의 구성 요소와 연결되어 실시간 수집, 분석 및 적용되는 빅데이터가 자리 잡고 있어야한다. 본 연구를 통해 지속 가능한 스마트 시티를 위한 빅데이터 플랫폼 구축과 적용 방안에 대하여 고찰한다.

제조 설비 이상탐지를 위한 지도학습 및 비지도학습 모델 설계에 관한 연구 (A Study on the Design of Supervised and Unsupervised Learning Models for Fault and Anomaly Detection in Manufacturing Facilities)

  • 오민지;최은선;노경우;김재성;조완섭
    • 한국빅데이터학회지
    • /
    • 제6권1호
    • /
    • pp.23-35
    • /
    • 2021
  • 제4차 산업혁명 선언 이후 생산 제조 기술과 정보통신기술(ICT)이 융합된 스마트 팩토리가 큰 주목을 받고 사물인터넷(IoT) 기술 및 빅데이터 기술 등이 발전하면서 생산 시스템의 자동화가 가능해졌다. 고도화된 제조 산업에서 생산 시스템에는 예정되지 않은 성능 저하 및 가동 중지 발생 가능성이 존재하며, 가능한 한 빨리 잠재적인 오류를 감지하여 이를 복구해 안전 위험을 줄여나가야 한다는 요구가 있다. 본 연구는 유압 시스템에 부착된 다중 센서 데이터를 기반으로 장비의 고장 예측과 이상 발생 시점 예측을 결합하여 제조 설비 이상탐지를 위한 지도학습 및 비지도학습 모델을 설계한다. 지도학습 분석 방법으로 XGBoost, LightGBM, CNN 모델의 정확도를 비교하였다. 혼동행렬 기반의 평가지표를 통해 LightGBM의 예측력이 97%로 가장 우수한 것을 확인하였다. 또한 비지도 학습 분석 방법으로 MD, AE, LSTM-AE 모델을 구축하여 각 모델을 비교 분석한 결과 LSTM-AE 모델이 이상패턴을 75% 감지하여 가장 우수한 성능을 보였다. 본 연구는 지도학습과 비지도학습 기법을 종합하여 설비의 고장여부를 정확하게 진단하고 이상상황이 발생하는 시점을 예측함으로써 이상상황에 대한 선제대응을 할 수 있는 기반을 마련하여 스마트 팩토리 고도화에 기여하고자 한다.

AI 기반의 교량 안전 모니터링 시스템 모델 (AI-based Bridge Safety Monitoring System Model)

  • 안영휘;함형민;박종수;김동현
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2023년도 제68차 하계학술대회논문집 31권2호
    • /
    • pp.107-108
    • /
    • 2023
  • 본 논문에서는 교량의 변위를 IoT 장치를 이용하여 실시간 측정하고 추출된 데이터를 이용하여 교량의 이상징후를 AI 기반으로 진단 및 모니터링 하는 방법을 제안한다. AI 모델 학습 학습을 위해서 비정상 상태의 교량이 필요하지만, 실제 교량에 인위적으로 비정상 상태를 만들 수 없으므로, 탄성 받침을 이용하여 모의 교량을 제작하였다. 탄성 받침을 이용하여 제작에 반영 및 모의교량에 적합한 모의 차량도 제작하여 정상적 데이터와 비정상적 데이터를 수집하였다. 수집된 데이터를 전처리 과정을 통해 AI 분석을 통해 교량의 이상 징후를 진단 및 모니터링하였으며, 제안 모델을 실험한 결과 96.7%의 정확도가 도출되었다.

  • PDF

IoT 기반 Apache Spark 분석기법을 이용한 과수 수확 불량 영역 모니터링 아키텍처 모델 (Using IoT and Apache Spark Analysis Technique to Monitoring Architecture Model for Fruit Harvest Region)

  • 오정원;김행곤
    • 스마트미디어저널
    • /
    • 제6권4호
    • /
    • pp.58-64
    • /
    • 2017
  • 현대 사회는 급속한 세계인구의 증가, 농촌 인구의 고령화, 산업화로 인한 농작물 재배 지역의 감소, 농촌 지역의 수익 구조의 불량 등으로 농부들의 탈농촌화 등으로 먹거리 문제 해결이 중요한 화두로 떠오르고 있다. 최근 농촌의 수익을 증대시키기 위해서 스마트 팜(Smart Farm) 분야의 연구가 활발하게 이루어지고 있다. 기존의 스마트 팜 연구는 주로 온실의 농작물의 재배 환경을 모니터링 하여 온실의 조도, 습도, 토양 등이 불량해지면 재배 환경인자를 제어하는 시스템을 자동으로 가동시켜 농작물의 재배 환경을 최적의 상태로 유지하는 데 중점을 두어 연구되고 있다. 즉, 실내에서 재배하는 농작물에 중점을 두어 연구가 이루어지고 있으며 실외에서 재배되는 농작물의 재배환경에 적용되는 연구는 많이 이루어지지 않았다. 본 논문에서는 과수원에서 자라는 과수의 수확 시기를 정확하게 예측하여 최상의 품질로 과일이 수확되게 지원하고 수확이 불량한 지역을 빅데이터 분석을 통해 모니터링하여 불량 지역의 수확성을 향상시키기 위해서 집중 관리할 수 있은 기능을 제공하는 아키텍처를 제안한다. 수확에 관련된 인자는 과일 색상 정보와 과일 무게 정보를 사용하며 실시간으로 수집되는 수확 상관인자 데이터를 Apache Spark 엔진을 이용하여 분석하도록 제안한다. Apache Spark 엔진은 대용량 배치성 데이터 분석 뿐만 아니라 실시간 데이터 분석에서도 우수한 성능을 보인다. 서비스를 수신하는 사용자 디바이스는 PC User 와 Smart Phone User를 지원한다. 센싱 데이터 수신 장치는 센싱되는 데이터를 수신한 후 서버로 전송하는 단순한 처리만 필요하므로 Arduino를 적용하였다. 과일의 수확시기를 조절하여 좋은 품질의 과일을 생산하려면 수확이 불량한 지역을 판단하여 불량지역을 집중 관리해야 한다. 본 논문에서는 빅 데이터 분석 기법을 이용해서 과일 수확의 불량지역을 판단하는 아키텍처 모델을 제안한다.