• Title/Summary/Keyword: 데이터 처리량

Search Result 2,581, Processing Time 0.035 seconds

Stream Data Processing based on Sliding Window at u-Health System (u-Health 시스템에서 슬라이딩 윈도우 기반 스트림 데이터 처리)

  • Kim, Tae-Yeun;Song, Byoung-Ho;Bae, Sang-Hyun
    • The Journal of Korea Institute of Information, Electronics, and Communication Technology
    • /
    • v.4 no.2
    • /
    • pp.103-110
    • /
    • 2011
  • It is necessary to accurate and efficient management for measured digital data from sensors in u-health system. It is not efficient that sensor network process input stream data of mass storage stored in database the same time. We propose to improve the processing performance of multidimensional stream data continuous incoming from multiple sensor. We propose process query based on sliding window for efficient input stream and found multiple query plan to Mjoin method and we reduce stored data using backpropagation algorithm. As a result, we obtained to efficient result about 18.3% reduction rate of database using 14,324 data sets.

Development of Transmission Algorithm of VLBI Observation Data and Transmission Experiment Between Server and RVDB (VLBI 관측 데이터의 전송 알고리즘 개발과 서버와 RVDB 사이의 전송 시험)

  • Yeom, Jae-Hwan;Oh, Se-Jin;Roh, Duk-Gyoo;Jung, Dong-Kyu;Oh, Chung-Sik;Yun, Youngjoo;Kim, Hyo-Ryoung
    • Journal of the Institute of Convergence Signal Processing
    • /
    • v.15 no.4
    • /
    • pp.183-191
    • /
    • 2014
  • This paper describes the development of the observational data transmission algorithm for high-speed network in radio astronomy. For the preprocessing of VLBI data observed by radio telescope, data transmission algorithm uses the VDIF specification, VDIFCP, and UDP protocol by transferring VLBI data stored in a massive storage server with one-to-one correspondence between the server and the RVDB of Daejeon correlator. A transmission method is proposed, which reads the recorded data in Mark5B VSI format and trnasmits 2048 Mbps VLBI data by software through UDP packet transmission, while RVDB system is waiting for the transmitting data from the server. In order to check the effectiveness of the proposed method, the data transmission between the massive storage server and RVDB is conducted and the transmitted data is correlated by Daejeon correlator for the accurate comparison concerning the data before and after. The transmitted data is shown to be completely the same as the original data without any data transmission loss. Henceforth, the developed data transmission algorithm in this research is expected to be applied effectively as e-VLBI for KaVA network.

Bioinformatics for constructing bio-pathways (바이오 네트워크 구축을 위한 바이오인포매틱스 기반 기술)

  • 박선희
    • Proceedings of the Optical Society of Korea Conference
    • /
    • 2003.02a
    • /
    • pp.124-125
    • /
    • 2003
  • 바이오인포매틱스 기술이란 정보통신 인프라와 IT기술을 기반으로 분산되어 있는 대용량의 바이오 데이터 및 문헌 정보를 통합적으로 관리, 분석 및 처리하여 각종 바이오 정보 활용 분야(신약개발, 의료진단, 농산물 개량 등)에 효율적으로 응용 서비스하기 위한 IT-BT융합 핵심 기반 요소 기술을 의미한다. 2000. 6. 인간 유전체 초안 완성 후 대량 획득되는 바이오 데이터의 최대 부가가치 창출을 위해 대용량 바이오 데이터로부터 유용한 지식정보를 자동적으로 추출해내기 위한 효율적인 통합분석 기술이 필요하고 이는 바이오인포매틱스 기본 개념이 된다. (중략)

  • PDF

Attribute Based Analysis and Object-oriented Design of NGN Call Agent (NGN 콜 에이전트의 속성기반 분석과 객체 지향 설계)

  • 이조혁
    • Proceedings of the Korea Society for Simulation Conference
    • /
    • 2000.04a
    • /
    • pp.84-90
    • /
    • 2000
  • 인터넷을 발전에 따라 데이터의 전송량이 음성 전송량을 능가하고 있으나 현재의 네트워크로는 빠르고 신뢰성 있는 데이터의 전송을 보장할 수 없다. 데이터와 음성 모두의 빠르고 신뢰성 있는 전송과 관리를 위하여 개발된 패킷 중심 네트워크를 NGN이라 한다. NGN에서는 효율적인 전송과 관리를 위하여 기존(PSTN)의 교환기의 콜 에이전트를 소프트웨어로 구성하여 범용컴퓨터에서 운용될 수 있도록 하였다. 본 논문에서는 콜 에이전트를 소프트웨어로 설계하기 위하여 H/W 개발을 위하여 설계된 기본호처리모델인 BCSM을 객체지향방법론의 표준인 UML을 이용하여 설계를 하였다. 그리고 설계된 모델의 검증을 위하여 LSL(LarchShared Language)를 이용하여 정형명세를 하였다.

  • PDF

XML 기반 멀티미디어 검색시스템

  • 윤미희;최동선;최병갑
    • Review of Korea Contents Association
    • /
    • v.1 no.2
    • /
    • pp.75-82
    • /
    • 2003
  • 인터넷의 보급과 더불어 대용량 저장장치의 가격이 하락하면서 멀티미디어 데이터의 저장과 공유가 보편화되었다. 또한 멀티미디어 데이터를 활용하는 지리정보시스템, 멀티미디어 의료 정보시스템, 전자신문, 전자도서관, 홈쇼핑, VOD등의 새로운 응용 분야들이 각광을 받고 있다. 이러한 환경적인 요인은 대용량의 멀티미디어 테이터를 효율적으로 추출, 저장, 검색하기 위한 멀티미디어 데이터 처리기술이 요구된다.(중략)

A Cluster Application System with CallBack Delay Time Decrease on DMA Communication (CallBack 지연시간 감소를 통한 DMA 통신 기반의 클러스터 응용 시스템)

  • Kim Han-Ho;Park Ui-Su;Choi Hyun-Ho;Yoo Won-Kyong;Yoo Kwan-Jong
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2006.05a
    • /
    • pp.753-756
    • /
    • 2006
  • 최근 인터넷이 발전함에따라 사용자로 하여금 다양한 형태의 멀티미디어 서비스에 대한 요구를 증가시켰다. 하지만 욕구가 다양해짐에 다라 처리해야할 데이터는 단순 텍스트에서 멀티미디어 데이터로 전환되었다. 그로 인해 데이터의 용량은 기하급수적으로 늘어나고 이를 처리하기 위해서는 고성능 대용량 서버의 필요성이 대두되고 있다. 하지만 기존의 고성능 단일 서버의 모델은 멀티미디어 데이터를 처리하는데 있어서 사용자의 요구를 충분히 만족시키기에는 많은 문제점을 가지고 있다. 이러한 문제점을 해결하기 위해 리눅스 클러스터 시스템은 하나의 해결책으로 제시되고 있다. 본 논문은 Myrinet을 사용한 클러스터 응용에 있어서 DMA 통신을 통해 고성능 단일 서버의 문제점을 해결하고 성능을 향상 시키는데 있다.

  • PDF

A Design and Implementation of Efficient Storage Structure for a Large RDF Data Processing (대용량 RDF 데이터의 처리 성능 개선을 위한 효율적인 저장구조 설계 및 구현)

  • Mun, Hyeon-Jeong;Sung, Jung-Hwan;Kim, Young-Ji;Woo, Yong-Tae
    • The Journal of Society for e-Business Studies
    • /
    • v.12 no.3
    • /
    • pp.251-268
    • /
    • 2007
  • We design and implement an efficient storage technique to improve query processing for a large RDF data set. The proposed techniques can minimize data redundancy compared to the existing techniques by splitting relation information and data information from triple formatted RDF data. Also, we can enhance query processing speed separating and connecting the entire query steps by relation and data based on the proposed storage technique. The proposed technique can be applied to the areas, such as e-Commerce, semantic web, and KMS to store and retrieve a large RDF data set.

  • PDF

Real-time and Parallel Semantic Translation Technique for Large-Scale Streaming Sensor Data in an IoT Environment (사물인터넷 환경에서 대용량 스트리밍 센서데이터의 실시간·병렬 시맨틱 변환 기법)

  • Kwon, SoonHyun;Park, Dongwan;Bang, Hyochan;Park, Youngtack
    • Journal of KIISE
    • /
    • v.42 no.1
    • /
    • pp.54-67
    • /
    • 2015
  • Nowadays, studies on the fusion of Semantic Web technologies are being carried out to promote the interoperability and value of sensor data in an IoT environment. To accomplish this, the semantic translation of sensor data is essential for convergence with service domain knowledge. The existing semantic translation technique, however, involves translating from static metadata into semantic data(RDF), and cannot properly process real-time and large-scale features in an IoT environment. Therefore, in this paper, we propose a technique for translating large-scale streaming sensor data generated in an IoT environment into semantic data, using real-time and parallel processing. In this technique, we define rules for semantic translation and store them in the semantic repository. The sensor data is translated in real-time with parallel processing using these pre-defined rules and an ontology-based semantic model. To improve the performance, we use the Apache Storm, a real-time big data analysis framework for parallel processing. The proposed technique was subjected to performance testing with the AWS observation data of the Meteorological Administration, which are large-scale streaming sensor data for demonstration purposes.

Design and Implementation of Input and Output System for Unstructured Big Data (비정형 대용량 데이터 입력 및 출력 시스템 설계 및 구현)

  • Kim, Chang-Su;Shim, Kyu-Chul;Kang, Byoung-Jun;Kim, Kyung-Hwan;Jung, Hoe-Kyung
    • Journal of the Korea Institute of Information and Communication Engineering
    • /
    • v.18 no.2
    • /
    • pp.387-393
    • /
    • 2014
  • In recent years, the spread of computers is increasing, and efficient processing effort for unstructured Big Data is required. In this paper, we are proposed a system to extract the data typed in a word processor quickly by user creating and XML mapping file after converting XML data that has been entered in the office file(HWP, MS-office). In addition, we proposed a system is able to lookup the necessary data from a database by entered form in advance and convert word processor document to office files by the application program. The unstructured big data will be available to be used.

Implementation of Database MiddleWare for Geospatial Data Processing (공간정보 처리를 위한 데이터베이스 미들웨어 구현)

  • Lee, Jin-Kyu;Khan, Ki-Ho;Kim, Tae-Hi;Lee, Hyung-Jin;Lee, Young-Woo
    • Proceedings of the Korean Society of Surveying, Geodesy, Photogrammetry, and Cartography Conference
    • /
    • 2009.04a
    • /
    • pp.145-150
    • /
    • 2009
  • In this paper, we introduce about the implementation of geospatial database middleware for construction of next generation digital map. This middleware supports global transactions based on the distributed and heterogeneous data store circumstance, geospatial data processing which does not follow standard, global schema management, object management based UFID and large scale data process. In addition, this supports creating, managing, calling for user defined procedures that can help making business logic of middleware user. User defined procedure interface is designed using CORBA and RMI protocol. In this paper, we describe the implementation of distributed object oriented database middleware which use variable data store.

  • PDF