• Title/Summary/Keyword: High-speed Data Processing

Search Result 769, Processing Time 0.03 seconds

반도체 공정에서 인 메모리 데이터 그리드를 이용한 고속의 빅데이터 처리 시스템 구현 (Implementation of High Speed Big Data Processing System using In Memory Data Grid in Semiconductor Process)

  • 박종범;이방원;김성중
    • 한국ITS학회 논문지
    • /
    • 제15권5호
    • /
    • pp.125-133
    • /
    • 2016
  • 최근 하드웨어와 소프웨어의 발전으로 데이터의 처리 용량과 처리 속도도 급속하게 증가하고 있다. 이로 인한 데이터 사용량은 기하급수적으로 증가하고 있으며, 이미 컴퓨터가 처리해야하는 자료는 초당 5천 트랜잭션을 넘었다. 이처럼 빅데이터가 중요한 이유는 실시간 때문이며, 이는 어떠한 상황에서도 모든 데이터를 분석하여 정확한 데이터를 적시에 얻을 수 있기 때문이다. 또한, 빅데이터를 활용한 스마트 공장을 만들면 개발 및 생산비용, 품질관리 비용 감소효과가 있을 것으로 예상하고 많은 연구가 수행되고 있다. 본 논문에서는 많은 데이터들이 발생하는 반도체 공정에서 고속의 빅데이터 처리를 위한 인-메모리 데이터 그리드를 이용한 시스템을 구현하였으며, 실험을 통해 향상된 성능을 입증하였다. 구현한 시스템은 반도체 뿐 만 아니라 빅데이터를 사용하는 모든 부분에서 응용 가능 할 것으로 판단된다.

한국형 고속전철용 판토그라프의 거동 특성과 열차속도와의 상관관계와 경향 (Relation and Variation Trend between the Behavior of the Pantograph vs. the Vehicle Running Speed in Korean High Speed Train)

  • 목진용;박춘수;조용현;최강윤;김기환
    • 한국소음진동공학회:학술대회논문집
    • /
    • 한국소음진동공학회 2003년도 추계학술대회논문집
    • /
    • pp.170-176
    • /
    • 2003
  • The pantograph for Korean High Speed Train was developed and had been evaluating by through "G7- R&D for home grown high speed train technology". In this study, a relation in mechanical aspect between the train running speed and the current collecting performance of the pantograph is conducted.'for this study, a measuring system for current collecting performance and mechanical characteristics is developed and installed on the prototype Korean High Speed Train, and measurement is conducted while the train runs on the test track. The measuring system is composed of video monitoring system and telemetry & data processing unit. It monitors whether the hazard behavior in the pantograph is occurs or not, and measures acceleration and vertical contact force between the pan head and catenary. Through this study, evaluation of a mechanical vibration characteristics and trend of the pantograph and a interface performance of pantograph - catenary up to 200㎞/h train speed are facilitated.

  • PDF

1000Base-T에서 동작하는 Viterbi Decoder 구현 (Implementation of a Viterbi Decoder Operated in the 1000Base-T)

  • 정재우;정해
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2013년도 추계학술대회
    • /
    • pp.41-44
    • /
    • 2013
  • UDTV와 같이 고품질의 애플리케이션이 등장함에 따라 고속 고용량의 통신서비스가 요구되고 있다. 이를 위해 통신시스템은 데이터 처리 속도를 높이고 다양한 에러 정정기법을 사용한다. 본 논문에서는 UTP 케이블을 이용하여 1 Gbps를 전송하는 1000BASE-T에 적용되는 비터비 디코더를 구현한다. 1000BASE-T에서는 각 pair 당 125 MHz의 PAM-5로 변조된 신호가 전송되므로 이 디코더는 최소 125 MHz 이상의 속도로 동작해야 한다. 이를 위하여 파이프라인과 병렬처리를 사용하여 디코더를 FPGA에서 구현하고 로직분석기를 이용해서 125 MHz로 동작함을 확인한다. 최종적으로 비터비 디코더가 부가된 임의의 에러에 대하여 원래의 데이터를 복구하는 것도 보여준다.

  • PDF

An integrated structural health monitoring system for the Xijiang high-speed railway arch bridge

  • He, Xu-hui;Shi, Kang;Wu, Teng
    • Smart Structures and Systems
    • /
    • 제21권5호
    • /
    • pp.611-621
    • /
    • 2018
  • Compared with the highway bridges, the relatively higher requirement on the safety and comfort of vehicle makes the high-speed railway (HSR) bridges need to present enhanced dynamic performance. To this end, installing a health monitor system (HMS) on selected key HSR bridges has been widely applied. Typically, the HSR takes fully enclosed operation model and its skylight time is very short, which means that it is not easy to operate the acquisition devices and download data on site. However, current HMS usually involves manual operations, which makes it inconvenient to be used for the HSR. Hence, a HMS named DASP-MTS (Data Acquisition and Signal Processing - Monitoring Test System) that integrates the internet, cloud computing (CC) and virtual instrument (VI) techniques, is developed in this study. DASP-MTS can realize data acquisition and transmission automatically. Furthermore, the acquired data can be timely shared with experts from various locations to deal with the unexpected events. The system works in a Browser/Server frame so that users at any places can obtain real-time data and assess the health situation without installing any software. The developed integrated HMS has been applied to the Xijiang high-speed railway arch bridge. Preliminary analysis results are presented to demonstrate the efficacy of the DASP-MTS as applied to the HSR bridges. This study will provide a reference to design the HMS for other similar bridges.

영상 처리 방법을 이용한 구조물의 큰 변위 저주파 진동 계측 (Measurement of Large-amplitude and Low-frequency Vibrations of Structures Using the Image Processing Method)

  • 김기영;곽문규
    • 한국소음진동공학회논문집
    • /
    • 제15권3호
    • /
    • pp.329-333
    • /
    • 2005
  • This paper is concerned with the measurement of low-frequency vibrations of structures using the image processing method. To measure the vibrations visually, the measurement system consists of a camera, an image grabber board, and a computer. The specific target installed on the structure is used to calculate the vibration of structure. The captured image is then converted into a pixel-based data and then analyzed numerically. The limitation of the system depends on the image capturing speed and the size of image. In this paper, we propose the methodology for the vibration measurement using the image processing method. The method enables us to measure the displacement directly without any contact. The current resolution of the vibration measurement is limited to sub centimeter scale. However, the frequency bandwidth and resolution can be enhanced by a high-speed and high-resolution image processing system.

VLBI 자료처리 시스템의 데이터 전송에서 잡음방지에 관한 연구 (A Study on the Noise Reduction Method for Data Transmission of VLBI Data Processing System)

  • 손도선;오세진;염재환;노덕규;정진승;오충식
    • 융합신호처리학회논문지
    • /
    • 제12권4호
    • /
    • pp.333-340
    • /
    • 2011
  • 한국천문연구원은 한일상관센터 (Korea-Japan Correlation Center, KJCC)에 2009년부터 한일공동VLBI상관기(Korea-Japan Joint VLBI Correlator, KJJVC)를 설치하여 운영하고 있다. 한일공동VLBI상관기는 한국우주전파관측망(Korean VLBI Network, KVN), VERA(VLBI Exploration of Radio Astrometry), JVN(Japanese VLBI Network) 및 공동 관측망 등에서 관측한 VLBI(Very Long Baseline Interferometer) 데이터를 상관처리하고, 과학적 목적을 위해 관측데이터를 처리하는 전용 계산기로 사용된다. KJJVC는 각 구성시스템 사이의 데이터 입출력 규격으로 VLBI 국제표준인 VSI(VLBI Standard Interface)를 따르고 있다. 특히 관측된 데이터를 상관처리하기 위해 고속재생기인 Mark5B시스템과 동기재생처리장치(Raw VLBI Data Buffer, RVDB) 사이에는 1024 Mbps급으로 데이터가 전송된다. 고속 데이터 전송에 있어 발생하는 전자기 방해 (Electromagnetic Interference, EMI)는 관측데이터의 손실을 야기 시키며, 전송 케이블의 길이가 길수록 손실 발생빈도가 많고, 디지털 데이터 신호의 전압레벨을 감소시켜 데이터 인식 오류를 초래한다. 따라서 본 논문에서는 VSI 규격의 통신에서 발생하는 EMI 잡음 정도를 측정하고, 데이터 손실을 최소화할 수 있는 방법으로 1) RC 필터를 사용한 방법, 2) Microstrip 라인을 이용한 임피던스 매칭, 3) Differential line driver를 이용한 신호 복원 방법 등을 제안하였다. 각 제안방법들의 유효성을 확인하기 위해 제안방법들은 시뮬레이션과 실험적인 구현을 통하여 성능시험을 수행하였으며, 각각의 제안 방법이 VSI 규격의 고속 데이터 전송에 유효함을 확인하였다.

USB 인터페이스를 이용한 데이터 전송프로그램 개발 (Development of Data Tansfer Program Using USB Interface)

  • 전세일;이두복
    • 한국정보처리학회논문지
    • /
    • 제7권5호
    • /
    • pp.1553-1558
    • /
    • 2000
  • The development of recent computer and communication technology has changed Automation System using communication network, and the new USB substituted with Serial Communication is already developed and now popular. In this paper, High speed data transfer system design using USB interface and communication application simulated for the situation is introduced. Base on USB, we can use additive function efficiently coped with former field device. The 'Winsock Connection USB Ternimal,' designed for hardware simulation, control the field device connected by USB, and provide the way for remote control of field device by Telnet connection through TCP/IP. That theorem can guarantee controlling direct input dta of user, and acuate function of field device using USB Packet Transmission. As a result of amy research, this communication application system identified good operation of field device with those of former field device. Another result of the experiment of hardware operation, we obtained accomplishment that the sufficient bandwidth guarantee of USB has high speed and high performance, and reduce the occupancy of system.

  • PDF

A Column-Aware Index Management Using Flash Memory for Read-Intensive Databases

  • Byun, Si-Woo;Jang, Seok-Woo
    • Journal of Information Processing Systems
    • /
    • 제11권3호
    • /
    • pp.389-405
    • /
    • 2015
  • Most traditional database systems exploit a record-oriented model where the attributes of a record are placed contiguously in a hard disk to achieve high performance writes. However, for read-mostly data warehouse systems, the column-oriented database has become a proper model because of its superior read performance. Today, flash memory is largely recognized as the preferred storage media for high-speed database systems. In this paper, we introduce a column-oriented database model based on flash memory and then propose a new column-aware flash indexing scheme for the high-speed column-oriented data warehouse systems. Our index management scheme, which uses an enhanced $B^+$-Tree, achieves superior search performance by indexing an embedded segment and packing an unused space in internal and leaf nodes. Based on the performance results of two test databases, we concluded that the column-aware flash index management outperforms the traditional scheme in the respect of the mixed operation throughput and its response time.

고속 실시간 처리 full search block matching 움직임 추정 프로세서 (A real-time high speed full search block matching motion estimation processor)

  • 유재희;김준호
    • 전자공학회논문지A
    • /
    • 제33A권12호
    • /
    • pp.110-119
    • /
    • 1996
  • A novel high speed VLSI architecture and its VLSI realization methodologies for a motion estimation processor based on full search block matching algorithm are presentd. The presented architecture is designed in order to be suitable for highly parallel and pipelined processing with identical PE's and adjustable in performance and hardware amount according to various application areas. Also, the throughput is maximized by enhancing PE utilization up to 100% and the chip pin count is reduced by reusing image data with embedded image memories. Also, the uniform and identical data processing structure of PE's eases VLSI implementation and the clock rate of external I/O data can be made slower compared to internal clock rate to resolve I/O bottleneck problem. The logic and spice simulation results of the proposed architecture are presented. The performances of the proposed architecture are evaluated and compared with other architectures. Finally, the chip layout is shown.

  • PDF

고화질 영상에서 고속 안개 제거를 위한 SIMD 구조에 적합한 병렬메모리 (A Parallel Memory Suitable for SIMD Architecture Processing High-Definition Image Haze Removal in High-Speed)

  • 이형
    • 한국컴퓨터정보학회논문지
    • /
    • 제19권7호
    • /
    • pp.9-16
    • /
    • 2014
  • Dark channel prior를 이용한 안개제거 알고리즘으로 만족할만한 연구결과가 발표된 이후로 이 알고리즘의 처리 속도를 높이기 위한 많은 연구들이 진행되었다. 이들 중에서 median dark channel prior를 이용한 알고리즘이 주목을 받고 있지만 여전히 낮은 처리속도의 한계를 갖고 있다. 그래서 본 논문에서는 고화질 영상에서 고속 안개 제거를 위한 SIMD 구조에 적합한 병렬메모리 모델을 제안한다. 제안하는 병렬메모리 모델은 n개의 화소들에 동시에 접근할 수 있으며, 3, 5, 7 또는 11의 크기를 갖는 4가지 종류의 median filter를 위한 간격들을 허용한다. 그래서 충분한 데이터 대역폭을 지원하기에 median dark channel prior를 이용한 알고리즘을 고속으로 처리할 수 있다.