• Title/Summary/Keyword: 데이터 처리량

Search Result 2,581, Processing Time 0.035 seconds

Performance Comparison of Databases for Store and Search of High Speed Network Flows (고속네트워크 트래픽 저장 및 검색을 위한 데이터베이스 성능 비교)

  • Park, Hyun-Wook;Choi, Sunoh;Kim, Jong-Hyun;Seo, Dong-Il;Kim, Ikkyun
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2015.10a
    • /
    • pp.1152-1155
    • /
    • 2015
  • 네트워크상의 사이버 공격을 막고 원인분석 및 공격지를 찾기 위하여, 네트워크패킷 캡쳐 및 플로우 데이터를 수집 저장하고, 수집된 정보를 고속으로 검색하여 분석하는 것을 필요로 한다. 인터넷의 발달과 네트워크를 이용하는 기기들이 많아짐에 따라 네트워크상에는 1초에 수백만 개의 네트워크 패킷이 이동하고 있다. 이러한 대용량 네트워크 패킷을 고속으로 저장하고 검색하기 위하여, 대용량 저장 및 검색에 가장 적합한 데이터베이스를 이용하는 것이 중요하다. 대용량 네트워크 데이터의 저장에 가장 최적인 데이터베이스를 찾기 위해 이 논문에서는 관계형 데이터베이스(MySQL)와 컬럼기반 데이터 베이스(InfiniFlux), 그리고 Bitmap Index 기반 저장구조(FastBit)를 사용하여 로딩속도와 검색 속도, 그리고 각각의 디스크 사용량을 비교하였다.

Development of a HTML5-based Component for Visualization of Distributed IoT Sensor Data (분산 IoT센서를 연결하는 HTML5기반 데이터 시각화 컴포넌트 개발)

  • Choi, Soon-Hyuck;Kim, Sung-Ki
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2015.10a
    • /
    • pp.1804-1806
    • /
    • 2015
  • 넓은 공간에 대한 물리량 감시응용에서는 다수의 IoT센서가 분산될 수 있으며, 개별 센서의 데이터를 식별하는 것 못지않게 총량의 통계적 변화를 직관성 있게 판단할 수 있도록 돕는 데이터 시각화 도구가 필요하다. 본 연구에서는 라즈베리파이를 IoT센서로 보고, 분산된 복수의 IoT센서들로부터 현장의 물리량 측정값을 모아, 사용자가 단말을 통해 현장의 물리량 변화 상황을 직관성 있게 판단할 수 있도록 돕는 시각화 컴포넌트를 개발하였다. 본 논문에서는 이러한 목적의 시각화 컴포넌트를 브라우저에 독립적인 구현을 지원하도록 HTML5 기반 웹 컴포넌트를 개발하였다.

A Fast Editing/Writing Technique of Large-sized Multimedia Files based on the Ext4 File System (Ext4 파일 시스템 기반 대용량 멀티미디어 파일 고속 편집 저장 기법)

  • Jung, Seung Wan;Ko, Seok Young;Seo, Dae Wha
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2009.11a
    • /
    • pp.193-194
    • /
    • 2009
  • 멀티미디어 장치의 대중화로 인해 사용자는 고화질의 영상과 다양한 멀티미디어 응용 서비스에 대한 요구가 증가하고 있다. 고화질의 미디어 컨텐츠는 대용량 파일의 형태로 저장된다. 대용량 파일의 필요한 부분만을 편집하여 재 저장하기 위해서는 새로운 기법이 요구된다. 현재의 리눅스 시스템에서는 편집된 파일의 내용을 새롭게 저장하는 방법을 사용하는데 미디어 컨텐츠와 같은 대용량 파일의 경우 많은 디스크 대역폭과 시간을 요구한다. 본 논문에서는 리눅스 Ext4 파일 시스템에서 범위 지정을 통한 고속 편집 저장 방법을 제안한다. 본 기법은 실제 데이터의 디스크 I/O 없이 메타데이터 편집만을 통해 대용량 멀티미디어 파일 편집 저장을 가능하게 한다.

Data extraction from distorted image in holographic data storage (홀로그래픽 데이터 저장 장치에서 왜곡된 이미지로부터의 데이터 추출)

  • 전승준;양병춘;이병호
    • Proceedings of the Optical Society of Korea Conference
    • /
    • 2000.02a
    • /
    • pp.60-61
    • /
    • 2000
  • 홀로그래픽 데이터 저장 장치(holographic data storage)는 1960년대에 이미 아이디어가 출현하였고, 1990년대에 들어서 SLM(spatial light modulator)과 CCD(charge coupled device) 등 관련 기술의 발달과 함께 향후 늘어날 대용량 저장 장치 시장에 대한 전망 등에 힘입어 주목받기 시작하였다. 홀로그래픽 데이터 저장 장치의 중요한 장점은 대용량의 정보를 고속으로 처리할 수 있고, 특히 페이지 단위로는 병렬 접근이 가능하다는 것인데, 이를 위해서 반드시 해결되어야 할 것이 픽셀 매치(pixel-match)이다. (중략)

  • PDF

Channel Assignment and Routing using Traffic Profiles in Wireless Mesh Networks (무선 메쉬 네트워크에서 트래픽 프로파일을 고려하는 채널 할당 및 라우팅)

  • Park, Sook-Young;Lee, Sang-Kyu
    • Journal of KIISE:Information Networking
    • /
    • v.37 no.5
    • /
    • pp.374-385
    • /
    • 2010
  • Wireless mesh networks can be deployed for various networks from home networking to last-mile broadband Internet access. Wireless mesh networks are composed of mesh routers and mesh clients. In these networks, static nodes form a multi-hop backbone of a large wireless access network that provides connectivity to end-users' mobile terminals. The network nodes cooperate with each other to relay data traffic to its destinations. In order to increase connectivity and better performance, researchers are getting interested in multi-channel and multi-interface wireless mesh networks. In these networks, non-overlapping multiple frequency channels are used simultaneously to increase the aggregate bandwidth available to end-users. Recently, researches have focused on finding suitable channel assignments for wireless network interfaces, equiped in a mesh node, together with efficient routing to improve overall system throughput in wireless mesh networks. This goal can be achieved by minimize channel interference. Less interference among using channels in a network guarantees more aggregated channel capacity and better connectivity of the networks. In this thesis, we propose interference aware channel assignment and routing algorithms for multi-channel multi-hop wireless mesh networks. We propose Channel Assignment and Routing algorithms using Traffic Profiles(CARTP) and Routing algorithms allowing detour routing(CARTP+2). Finally, we evaluate the performance of proposed algorithms in comparison to results from previous methods using ns-2 simulations. The simulation results show that our proposed algorithms can enhance the overall network performance in wireless mesh networks.

Implementation of Quota system for efficiency using on HPSS (대용량 테이프 저장 장치의 효율적인 사용을 위한 사용량 제한시스템 구현)

  • Kim, Sung-Jun;Choi, Youn-Keun;Jang, Ji-Hoon;Kim, Joong-Kwon
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2003.05b
    • /
    • pp.911-914
    • /
    • 2003
  • HPSS는 수 백만 개의 파일들을 동시에 처리하며 수 petabyte의 용량과 초당 수 gigabyte의 전송률을 보여주는 고성능 소프트웨어이며 고성능 컴퓨팅 환경에서 사용되는 대용량 데이터 스토리지를 위하여 개발되었다. 본 고에서는 HPSS의 대용량 테이프 저장장치 서비스를 시작하면서 사용자별로 용량 제한을 두기 위해서 사용량 제한 시스템을 구현하였다.

  • PDF

Assessing nutrient losses from paddy fields treated liquid manure (액비시용에 따른 논에서의 영양물질 부하량 평가)

  • Jang, Taeil;Son, Jae Jwon;Son, Jae Jwon
    • Proceedings of the Korea Water Resources Association Conference
    • /
    • 2016.05a
    • /
    • pp.515-515
    • /
    • 2016
  • 농경지에서의 액비 수요는 최근 증가하고 있으나 적정 액비시비량에 대한 기준과 사후 관리에 대한 명확한 기준이 없어 환경문제에 대한 고찰이 필요하다. 본 연구에서는 시험포장을 선정하고 논에서의 질소 및 인의 동태를 모니터링하고, 관개수, 침투수, 및 배출수 중 영양물질의 부하량을 평가하였다. 시험구는 대조구(화학비료 표준시비구, A)와 양돈분뇨액비 표준시비처리구(B)로 구성하였으며, 기상관측 측정을 위하여 자동기상관측기, 유입량, 유출량 측정을 위한 계측장비를 각 처리구별로 설치하였다. 담수의 경우 B 처리구에서 시비 시기별로 영양물질의 수질 농도가 첨둣값을 보여주었으며 평균적으로 높게 나타났다. 대표 이벤트 중 6월 25-26일 강우에 따른 유출수의 분석결과는 액비의 영향으로 T-N 및 T-P의 경우 초기 강우시 상대적으로 높게 나타났다. 7월 21-22일 강우 분석 결과는 T-N, T-P(50배)가 상대적으로 높은 분포를 보여주었다. 침투량은 많으나 수질변화는 처리구별로 유의한 차이는 나타나지 않았다. 부하량은 각 이벤트별 10분 간격의 유량 측정과 30분 및 1시간 간격(첨두 이후 탄력적 적용)으로 수질 모니터링을 실시하였다. B 처리구에서 부하량이 전체적으로 높게 나타났으며, T-N의 경우 2.2배, 그리고 T-P의 경우 6.6배 높게 나타났다. 2015년까지의 데이터는 평년대비 강수량의 부족으로 추가적인 데이터 축적을 통한 분석이 필요하며 이를 바탕으로 원단위 부하량을 평가할 계획이다. 또한 본 연구는 액비시용에 따른 농경지에서의 영양물질 유출에 따른 관리방안 개발을 위한 연구로 지속적인 모니터링을 통하여, 향후 새만금 유역내 축산밀집지역에서 나타날 수 있는 축산분뇨 관리정책 개발의 기초자료로 활용될 것으로 기대한다.

  • PDF

A Data Generator for Database Benchmarks and its Performance Evaluation (데이터베이스 벤치마크를 위한 데이터 생성기와 성능 평가)

  • Ok, Eun-Taek;Jeong, Hoe-Jin;Lee, Sang-Ho
    • The KIPS Transactions:PartD
    • /
    • v.10D no.6
    • /
    • pp.907-916
    • /
    • 2003
  • Database benchmarks require efficient of large-scale data. This presents the system architecture, control flows, and characteristics of the data generator we have developed. The data generator features generation of large-scale data, column-by-column data generation, a number of data distributions and verification, and real data generation. An extensive conparison with other data generators in terms of function is also presented. Finally, empirical performance experiments between RAID systems and non-RAID one have been conducted to alleviate I/O bottleneck. The test results can serve as guidelines to help confifure system architecture.

GMS: Spatial Database Management System (GMS: 공간 데이터베이스 관리 시스템)

  • 박상근;박순영;정원일;김명근;배해영
    • Proceedings of the Korean Association of Geographic Inforamtion Studies Conference
    • /
    • 2003.04a
    • /
    • pp.217-224
    • /
    • 2003
  • 전통적인 관계형 데이터베이스 시스템에서 관리되고 있는 일반적인 데이터가 아닌 점, 선, 다각형 등의 다양한 공간 데이터를 관리하기 위해서는 확장된 형태의 공간데이터 타입 및 대용량성과 다양한 접근 패턴을 지니는 공간데이터의 특성을 고려한 새로운 데이터베이스 관리 시스템이 요구된다. 본 논문에서는 이와 같은 공간데이터의 특성을 고려한 저장 기법과 공간질의 처리기법을 제공하는 공간 데이터베1이스 관리 시스템인 GMS를 제안한다. GMS는 다양한 크기를 지니는 공간데이터의 특성을 고려하여 공간/비공간 통합 저장관리 및 BLOB 데이터 저장기법을 제공하며, 저장된 공간/비공간 데이터에 대한 다양한 색인기법을 제공하고 있다. 그밖에 공간 연산 및 복잡한 질의처리를 위해 확장된 질의 최적화 및 질의처리 기법을 제공하며, 다중 사용자를 위한 확장된 동시성 제어 기법과 공간/비공간 데이터에 대한 서로 다른 회복 기법을 제공한다.

  • PDF

Integrating Query Column-Sets and Horizontal Partitions on Very Large Data (대용량 데이터 처리를 위한 질의 컬럼셋과 수평 파티션의 통합 방법)

  • Chung, Moonyoung;Lee, Taewhi;Kim, Sung-Soo;Song, Hyewon;Won, Jongho
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2016.10a
    • /
    • pp.521-522
    • /
    • 2016
  • 분산된 테이터에 대한 질의 처리에서는 중간 데이터를 전송하는 단계에서 많은 디스크 I/O 및 네트워크 트래픽을 야기할 수 있다. 따라서, 질의에 필요하지 않은 데이터를 미리 필터링하면 불필요한 I/O 및 네트워크 전송을 줄일 수 있어 질의 처리 성능을 높일 수 있다. 이 논문에서는 질의 컬럼셋과 수평 파티션 방법을 통합하여 질의 처리에 불필요한 데이터를 초기 단계에 미리 필터링하여 질의 처리 성능을 높이는 방법을 제안한다.