• Title/Summary/Keyword: 데이터 처리량

Search Result 2,586, Processing Time 0.036 seconds

Implementation of Database MiddleWare for Geospatial Data Processing (공간정보 처리를 위한 데이터베이스 미들웨어 구현)

  • Lee, Jin-Kyu;Khan, Ki-Ho;Kim, Tae-Hi;Lee, Hyung-Jin;Lee, Young-Woo
    • Proceedings of the Korean Society of Surveying, Geodesy, Photogrammetry, and Cartography Conference
    • /
    • 2009.04a
    • /
    • pp.145-150
    • /
    • 2009
  • In this paper, we introduce about the implementation of geospatial database middleware for construction of next generation digital map. This middleware supports global transactions based on the distributed and heterogeneous data store circumstance, geospatial data processing which does not follow standard, global schema management, object management based UFID and large scale data process. In addition, this supports creating, managing, calling for user defined procedures that can help making business logic of middleware user. User defined procedure interface is designed using CORBA and RMI protocol. In this paper, we describe the implementation of distributed object oriented database middleware which use variable data store.

  • PDF

An Efficient Location Encoding Method Based on Hierarchical Administrative District (계층적 행정구역 기반의 효율적인 위치정보 표현 방식)

  • Kim Woo-Cheol;Lee SangYoon;Park Sanghyun;Won JungIm
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2004.11a
    • /
    • pp.125-128
    • /
    • 2004
  • 최근 이동 통신 기술의 급속한 발달로 인해 휴대폰, PDA 등과 같은 휴대용 단말기의 사용이 보편화 되고 있다. 따라서 이동 객체의 시간에 따른 공간적인 위치정보를 활용하여 다양한 서비스를 제공하는 위치 기반 서비스(Location-Based Service)에 관한 많은 연구가 진행되고 있다. 위치 기반 서비스의 효율적 제공을 위하여 시간에 따라 지속적으로 변하는 이동 객체의 대용량 시공간 정보를 신속하게 저장, 관리, 검색할 수 있는 인덱싱 및 질의 처리 기술이 수반되어야 한다. 본 논문에서는 대용량 이동 객체 데이터베이스를 대상으로 한 효율적인 인덱스 구축을 위한 데이터 압축 표현 방식에 대하여 논한다. 이를 위해 본 논문에서는 기존의 주요 연구에서 2 차원 공간 좌표 (X, Y)로 표현되던 이동 객체의 공간 정보를 계층적 구조를 갖는 행정구역에 기반하여 1 차원의 공간 정보로 압축 표현하는 방식을 제안한다. 이를 이용하여 대용량의 공간정보를 저장하고 있는 이동 객체 데이터베이스의 인덱스 크기의 감소 및 질의 처리 시간의 향상 효과를 얻을 수 있다. 또한, 제안된 방식은 2 차원 공간 좌표를 1 차원의 행정구역 기반의 위치정보로 표현하기 때문에 이로 인한 데이터 손실이 발생할 수 있으나, 일정 공간 내의 객체분포를 필요로 하는 교통 상황 파악, 근사적(approximate) 공간 정보를 필요로 하는 사람${\cdot}$차량 위치 추적 서비스와 같은 위치 기반 서비스를 신속하게 처리하는데 유용하게 사용될 수 있다.

  • PDF

A Study on Improvement of Collected Data Performance in Real-time Railway Safety Supervisory Platform (실시간 철도안전관제 플랫폼에서의 수집 데이터 성능 개선 방안 연구)

  • Shin, Kwang-Ho;Park, Jee-Won;Ahn, Jin
    • Journal of The Korean Society For Urban Railway
    • /
    • v.6 no.4
    • /
    • pp.233-241
    • /
    • 2018
  • Recently, integrated railway safety monitoring and control system, which is a convergence system based on data distribution service for railway safety monitoring and control, is under development. It collects safety data of vehicle, signal, power and safety monitoring facilities in real time and adopts communication middleware based on distributed service for mass data processing. However, in the case of a server device used as an existing control server, the performance of the distributed service middleware can not be exhibited due to low hardware performance due to safety reasons. In the safety control system, 200,000 packets per second were set as the transmission target, but the performance test of the LAB was not satisfied. In this paper, we analyze the characteristics of railway data to improve the data collection performance of existing equipment and apply DDS-based streaming transmission method to the data model of signal facilities and vehicle facilities with large packet amount according to the analysis result. As a result, it was confirmed that the throughput was improved about 30.4 times when the hardware performance was the same. We plan to improve the data processing performance by applying it to real-time railway safety integrated monitoring and control system in the future.

Improvement of Datawarehouse Development Process by Applying the Configuration Management of CMMI (CMMI의 형상관리를 적용한 데이터웨어하우스 개발 프로세스의 개선)

  • Park Jong-Mo;Cho Kyung-San
    • The KIPS Transactions:PartD
    • /
    • v.13D no.4 s.107
    • /
    • pp.625-632
    • /
    • 2006
  • A Datawarehouse, which extracts and saves the massive analysis data from the operating servers, is a decision support tool in which data quality and processing time are very important. Thus, it is necessary to standardize and improve datawarehouse development process in order to stabilize data quality and improve the productivity. We propose a novel improved process for datawarehouse development by applying the configuration management of CMMI (Capability Maturity Model Integration) which has become a major force in software development process improvement. In addition, we specify some matrices for evaluating datawarehouse development process. Through the comparison analysis with other existing processes, we show that our proposal is more efficient in cost and productivity as well as improves data quality and reusability.

Link Control Protocol Design for Communication Processing Nodes (통신처리 노드의 링크 제어 프로토콜 설계)

  • 양미정;유재호;김대웅
    • Proceedings of the Korean Institute of Information and Commucation Sciences Conference
    • /
    • 1998.11a
    • /
    • pp.309-312
    • /
    • 1998
  • 대용량 통신처리시스템은 전화망 및 ISDN 가입자에게 패킷망, 인터넷을 통해 PC 통신 서비스나 인터넷 서비스를 제공하는 것을 목적으로 하는 정보 서비스 게이트웨이 장치이다. 각종 망의 인터페이스를 담당하는 망 정합장치들은 대용량 통신처리시스템내의 내부 전달망을 통하여 연동하는 구조를 가지며, 망 정합장치들간의 연결을 통해 정보 제공 서비스 및 과금 회수 대행 등의 관리 서비스들이 이루어진다. 따라서, 이들 망 정합장치간의 신뢰성 있는 데이터 전달을 보장하기 위해서 두 장치간에 연결형 데이터 링크의 설정이 요구된다. 본 논문에서는 이러한 이종망 상에서의 통신처리 노드간 링크 제어 프로토콜을 제안한다.

  • PDF

Implementation of the Inverted File for Indexing Large-volume Data (대용량 데이터 색인에 적합한 역파일의 구현)

  • Sung Chae Lim
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2008.11a
    • /
    • pp.909-912
    • /
    • 2008
  • 대용량 문서에 대한 키워드 검색을 위해 역파일(inverted-file) 색인 기법이 널리 쓰이고 있다. 역파일 색인 기법을 구현함에 있어 고려되어야 할 점은 키워드 검색 처리 시에 디스크 사용을 최소로 할 수 있는 방법이다. 크기가 작은 역파일이라면 디스크 I/O 사용도 작고 필요시 역파일을 메모리에 적재하여 둠으로써 디스크 사용을 크게 줄일 수 있다. 하지만, 웹 검색이나 규모가 큰 도서관 시스템에서와 같이 색인 데이터 크기가 매우 큰 경우 역파일을 읽는 디스크 비용이 급격히 증가할 수 있다. 본 논문에서는 매우 큰 크기의 역파일을 사용하는 검색 환경에서 디스크 사용을 최소로 할 수 있는 역파일 구조를 제안한다. 제안된 구조는 질의 처리 과정을 고려해 계층 구조로 설계되며 실제 상용 시스템에 적용되어 안정성 및 성능을 입증했다.

A Study on a Fault-tolerant Remote Memory System (결함내성 원격 메모리 시스템에 관한 연구)

  • Jung, Hyungsoo;Han, Hyuck;Kim, Shin Gyu;Yeom, Heon Y.
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2007.11a
    • /
    • pp.223-225
    • /
    • 2007
  • 본 연구에서는 대용량 메모리 데이터 처리를 위한 범용 하드웨어 기반의 결함내성 원격 메모리 시스템의 성능을 분석하고자 한다. 대단히 빠른 접근 속도를 보장하는 휘발성 메모리를 이용한 원격 메모리 시스템의 실용적인 활용을 위해서는 결함내성의 성질이 필수적으로 보장되어야 한다. 본 연구에서는 RAID 기법과 유사한 방법을 이용하여 결함내성 메모리 시스템을 구현하고, 제안한 새로운 계층의 결함내성 메모리의 성능을 평가하고자 한다. 범용으로 쓰이는 MySQL과 같은 데이터베이스를 이용한 TPC-C 실험 결과로 볼 때 본 연구에서 구현한 결함내성 원격 메모리 시스템은 일반적인 대용량 메모리 데이터 처리 시스템에서 요구하는 필수요건인 결함내성 성질을 성공적으로 만족하고 있는 것으로 생각된다.

The Spreadsheet-Based Tool Model for Efficient MMORPG Data Management (효율적인 MMORPG 데이터 관리를 위한 스프레드시트 기반 툴 모델)

  • Kang, Shin-Jin;Kim, Chang-Hun
    • Journal of Korea Multimedia Society
    • /
    • v.12 no.10
    • /
    • pp.1457-1465
    • /
    • 2009
  • In MMORPG development process, spreadsheet based data management has advantages in the handling of functions and analysis of large data set. But it has limitations in inserting, deleting, searching and relational management of that. In this paper, we proposed the spreadsheet based tool model for large data set for MMORPG development. Our system can reduce the risk of data management failure in MMORPG development process and improve the efficiency of data handling in the large-scale team.

  • PDF

An Efficient Graph Cycle Detection Technique based on Pregel (프리겔 기반의 효율적인 그래프 순환 검출 기법)

  • Kim, Taeyeon;Kim, Hyunwook;Park, Kisung;Lee, Young-Koo
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2013.11a
    • /
    • pp.152-154
    • /
    • 2013
  • 페타 바이트 이상의 규모의 빅 데이터 분석은 다양한 분야에서 연구되고 있다. 최근 소셜 네트워크, XML 등과 같은 구조적인 정보를 갖는 대용량의 그래프들을 분석하는 기술이 활발히 연구되고 있다. 이러한 대용량의 그래프를 분석하기 위한 연산중의 하나로 순환 그래프가 사용되고 있다. 대용량의 그래프 환경에서 순환을 검출하는 연산은 단일 컴퓨팅 시스템에서 처리가 불가능하거나 많은 시간 비용이 발생하여 분산처리가 필요하다. 본 논문에서는 그래프 처리에 효율적인 프리겔 프레임워크를 이용하여 효율적으로 순환을 검출하고, 중복 순환을 제거하기 위해 정규 순환 코드를 제안한다. 실험을 통하여 제안하는 기법이 대용량 그래프에서 효율적으로 순환을 찾을 수 있음을 보인다.

Throughput improvement for Consumer using Modified CCN Protocol (소비자의 처리량 증가를 위한 CCN 프로토콜)

  • Choi, Won Jun;Sekhon, Ramneek;Seok, Woo Jin
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2015.10a
    • /
    • pp.262-265
    • /
    • 2015
  • 차세대 미래 인터넷으로 관심을 모으고 있는 CCN은 ICN, CDN, NDN과 비슷한 개념으로 출발한다. 즉, 사용자가 관심을 가지는 데이터를 하나의 컨텐츠로 바라보고 네트워킹을 한다. CCN은 이러한 컨텐츠에 대해 요청 패킷을 보내면 컨텐츠를 가지고 있는 노드에서는 해당 패킷을 보내는 방식이다. IP 기반의 네트워크에서와 마찬가지로 CCN에서도 한정된 네트워크 대역폭에서 소비자에게 전송되는 패킷의 전송 시간에 따른 처리량 향상은 주요 관심사 중의 하나이다. 본 논문에서는 CCN에서의 CCN-Helper 프로토콜을 사용한 소비자의 다운로드 시간 감소 방법을 제안하여 생산자에서 소비자로의 패킷 전송 처리량을 향상시키고자 한다.