• 제목/요약/키워드: SQL 분석

검색결과 234건 처리시간 0.028초

결함내성 원격 메모리 시스템에 관한 연구 (A Study on a Fault-tolerant Remote Memory System)

  • 정형수;한혁;김신규;염헌영
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2007년도 추계학술발표대회
    • /
    • pp.223-225
    • /
    • 2007
  • 본 연구에서는 대용량 메모리 데이터 처리를 위한 범용 하드웨어 기반의 결함내성 원격 메모리 시스템의 성능을 분석하고자 한다. 대단히 빠른 접근 속도를 보장하는 휘발성 메모리를 이용한 원격 메모리 시스템의 실용적인 활용을 위해서는 결함내성의 성질이 필수적으로 보장되어야 한다. 본 연구에서는 RAID 기법과 유사한 방법을 이용하여 결함내성 메모리 시스템을 구현하고, 제안한 새로운 계층의 결함내성 메모리의 성능을 평가하고자 한다. 범용으로 쓰이는 MySQL과 같은 데이터베이스를 이용한 TPC-C 실험 결과로 볼 때 본 연구에서 구현한 결함내성 원격 메모리 시스템은 일반적인 대용량 메모리 데이터 처리 시스템에서 요구하는 필수요건인 결함내성 성질을 성공적으로 만족하고 있는 것으로 생각된다.

능동적인 학습을 위한 고교 정보사회와 컴퓨터 교과의 WBI 설계 및 구현이동 (WBI Design and Implementation for active instruction in high school curriculum information society and computer)

  • 배석찬;두창원
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국해양정보통신학회 2007년도 춘계종합학술대회
    • /
    • pp.895-901
    • /
    • 2007
  • 현재 컴퓨터 및 인터넷의 발달은 학습의 방향을 보다 자유롭게 하였으며, 교사의 직접적인 도움을 받지 않고도, 학생 스스로 공부할 수 있는 환경을 가능하게 하고 있다. 본 논문에서는 제 7 차 교육과정에 따른 고교 정보사회와 컴퓨터 교과의 WBI를 설계 및 구현하였다. 궁극적으로 교육과정의 질을 향상 시키도록 노력하였다. 먼저 교과내용을 영역별로 분석하고, 탐구하기, 기초다지기, 실습학기, 자기평가의 순으로 학습이 이루어지게 하였으며, 학습자 스스로 능동적인 학습을 할 수 있는 자기 주도적인 학습과 통합 교과서적인 학습을 동시에 할 수 있게 함으로써 문제 해결능력과 창의적 사고를 기르기 위한 교육 패러다임으로 구성하고 있다. 본 논문에서는 PHP언어를 사용하였으며, 웹서버는 Apache, DBMS는 MySQL를 사용하였다. 프로그램에는 회원가입, 정보사회와 컴퓨터 교육과정 수강하기 및 테스트, 질문하기, 자료실 등으로 구성되어 있고, 수강신청 후 먼저 강의를 지면과 화상강의를 동시에 수강하면서 기초를 다지고, 질의하기를 통해 궁금증을 해결해 나감으로써 한번에 수업을 소화할 수 있는 기능을 갖추고 있다.

  • PDF

FlaSim: 리눅스 커널 모듈을 이용한 FTL 에뮬레이터 (FlaSim: A FTL Emulator using Linux Kernel Modules)

  • 최화영;김상현;이승원;박상원
    • 한국정보과학회논문지:컴퓨팅의 실제 및 레터
    • /
    • 제15권11호
    • /
    • pp.836-840
    • /
    • 2009
  • 플래시 메모리의 성능평가 실험 환경 구성은 플래시 메모리가 장착된 제품들이 동작하는 시스템으로 이뤄진다. 이와 같은 방법은 물리적이고 비용적인 제약이 따르게 된다. 또한 실험에 쓰이는 입력 데이터와 FTL 알고리즘의 성능평가를 위한 결과 데이터인 트레이스의 추출 방법이 까다롭고 힘들다. Oracle의 경우 트레이스 추출이 불가능하고, MySQL, SQLite는 트레이스 추출이 가능하더라도 결과의 정확성이 보장되지 않는 문제점이 있다. 따라서 본 논문에서는 디바이스 드라이버를 통해 물리적 제약을 없애고 트레이스 추출을 쉽고 간편하게 하여 정확한 실험 결과 분석이 용이하도록 FTL 에뮬레이터를 설계하고 구현한 내용에 대해 다룬다. 본 논문에서 제안한 FTL 에뮬레이터인 FlaSim은 플래시 메모리의 데이터 저장 메커니즘과 동일한 동작을 하도록 구현하고 리눅스 커널 모듈을 사용하여 필요한 기능을 추가할 수 있다. FlaSim은 모듈 적재 방식을 사용하기 때문에 FTL 알고리즘 및 플래시 메모리에 대한 실험의 확장성을 향상시킨다. 또한 다양한 응용프로그램에 적용이 쉽고, 플래시 메모리에 대한 실험의 제약이 되는 물리적인 비용을 줄일 수 있다. 게다가 트레이스 추출하는 데 쉽고 효율적인 방법을 제공하여 결과 도출 및 분석 시 시간적, 시스템적 제약을 받지 않아 효율성이 큰 장점이 있다. 추후 많은 FTL 알고리즘 및 플래시 메모리에 대한 실험과 연구에 도움이 될 것으로 예상된다.

실험실정보관리시스템의 확장을 위한 오픈 소스 기반의 빅데이터 처리 기술에 관한 연구 (A Study on Big Data Processing Technology Based on Open Source for Expansion of LIMS)

  • 김순곤
    • 한국정보전자통신기술학회논문지
    • /
    • 제14권2호
    • /
    • pp.161-167
    • /
    • 2021
  • 실험실정보관리시스템(LIMS, Laboratory Information Management System)은 실험실 데이터를 저장, 가공, 검색 그리고 분석하기 위한 중앙화된 데이터베이스로서 검사, 분석, 시험 업무를 수행하는 실험실을 위해 특별히 고안된 컴퓨터 시스템 또는 시스템을 의미한다. 특히 LIMS는 실험실의 운영을 지원하는 기능을 갖추고 있으며, 워크플로우 관리나 데이터 추적지원 등이 필요하다. 본 논문에서는 실험실의 운영을 위하여 빅데이터 자동화 수집 기술의 하나인 크롤링 기술을 활용하여 웹사이트 및 다양한 채널에 존재하는 데이터를 수집한다. 수집된 시험 방법 및 내용 중 시험자가 활용할 수 있는 유용한 시험 방법 및 내용을 추천한다. 그리고 이에 대한 피드백을 관리하여 수집 채널의 검증이 가능한 상호보완적인 LIMS 플랫폼을 구현한다.

Apache Spark를 활용한 대용량 데이터의 처리 (Processing large-scale data with Apache Spark)

  • 고세윤;원중호
    • 응용통계연구
    • /
    • 제29권6호
    • /
    • pp.1077-1094
    • /
    • 2016
  • 아파치 스파크는 빠르고 범용성이 뛰어난 클러스터 컴퓨팅 패키지로, 복구 가능한 분산 데이터셋이라는 새로운 추상화를 통해 데이터를 인메모리에 유지하면서도 결함 감내성을 얻을 수 있는 방법을 제공한다. 이러한 추상화는 하드디스크에 직접 데이터를 읽고 쓰는 방식으로 결함 감내성을 제공하는 기존의 대표적인 대용량 데이터 분석 기술인 맵 리듀스 프레임워크에 비해 상당한 속도 향상을 거두었다. 특히 로지스틱 회귀 분석이나 K-평균 군집화와 같은 반복적인 기계 학습 알고리즘이나 사용자가 실시간으로 데이터에 관한 질의를 하는 대화형 자료 분석에서 스파크는 매우 효율적인 성능을 보인다. 뿐만 아니라, 높은 범용성을 바탕으로 하여 기계 학습, 스트리밍 자료 처리, SQL, 그래프 자료 처리와 같은 다양한 고수준 라이브러리를 제공한다. 이 논문에서는 스파크의 개념과 프로그래밍 모형에 대해 소개하고, 이를 통해 몇 가지 통계 분석 알고리즘을 구현하는 방법에 대해 소개한다. 아울러, 스파크에서 제공하는 기계 학습 라이브러리인 MLlib과 R 언어 인터페이스인 SparkR에 대해 다룬다.

글로벌 수자원 정보 시스템 통합 DB 구축 및 관리방안 연구 (A Strategy on Integrated Data Base Construction and Management of Global Water Resource Information System)

  • 권용현;이경도;이병주
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2018년도 학술발표회
    • /
    • pp.375-375
    • /
    • 2018
  • 세계 수자원 시장은 연평균 6.5%씩 증가하고 있으며, 2025년 기준 1,038조원까지 급성장할 것으로 전문가들은 예상하고 있으나, 기후변화의 가속화로 인해 가뭄 및 홍수피해가 증가하여 수자원 관리가 더욱 어려워져지고 있다. 급속도로 변화는 환경에 대비하기 위해 국내에서는 수자원 및 기후변화에 대한 다양한 연구가 진행되고 있으나, 해외사업 진출 시에는 수자원 기초자료 수집에 대한 어려움을 겪고 있다. 이를 해결하기 위해 글로벌 수문기상자료 제공과 함께 GIS정보, 댐 및 저수지 관련 자료, 인문사회 자료, 물관련 통계자료, 물관련 재해자료 등을 웹으로 제공하는 글로벌 수자원 정보 시스템(GWB, Global World Bank)을 개발하고자 한다. 본 연구에서는 시스템의 통합 DB를 구축하고 관리방안을 도출하기 위해 수집된 메타데이터 속성 및 데이터구조를 파악하고, 세부항목별 자료 포맷을 분석 후 GIS기반 관측소 정보와 자료를 매칭하여 최종적으로 시스템 컨텐츠별로 DB를 맵핑하였다. 강수량과 기상자료는 33개국의 관측소 6,531개소의 일/월/연단위 관측자료와 10,977격자의 격자분석자료를 구축하였다. 수문자료는 33개국의 수문관측소 2,242개의 월/연단위 유량관측자료와 10,977격자의 월/연단위 직접유출, 기저유출, 잠재증발산의 격자분석자료를 구축하였다. 그리고, 수집된 강우와 기상자료는 기계 오작동, 자료 전송 오류 등으로 인한 결측치 및 이상치에 대해 자료품질분석을 통해 오자료에 대한 보정을 진행하였다. 해당자료는 MySQL를 활용하여 DB를 구축하였으며, GIS정보는 GeoServer를 활용하여 운영서버에 구축된 정보를 최종적으로 사용자에게 Web Browser로 표출하였다. 해당 시스템은 추후 전지구 수자원관련 정보를 제공하여 해외사업지역의 댐이나 보 등의 구조물 설계, 수자원산업의 해외 진출시 데이터 수집의 한계점 및 시간단축을 해결할 수 있어 수자원 분야에 기여 할 수 있을 것으로 판단된다.

  • PDF

수재해 정보 플랫폼 통합관리를 위한 표준기술 적용방안 (A Study on the Application of Standard Technology for Integrated Management of Water Hazard Information Platform)

  • 김동영;이정주;채효석;황의호
    • 한국지리정보학회지
    • /
    • 제18권4호
    • /
    • pp.119-130
    • /
    • 2015
  • 최근 정보기술 기반의 물 관련 분야에서 국가 또는 국제 표준에 대한 실무 적용 연구가 증가하고 있는 추세이다. 특히 공간정보 기반의 콘텐츠 개발과 수신, 처리, 배포 등에 대한 관심과 수요가 증가하고 있으며, 기본 핵심이 되는 표준의 중요성 또한 강조되고 있다. 그러나 공간정보 분야의 필요성에 비하여 표준에 대한 관심과 개발 및 적용을 위한 연구가 미흡한 실정이다. 본 논문은 주요 국제 표준 기구인 International Organization for Standardization(ISO)와 Open Geospatial Consortium(OGC)에서 개발, 제정된 정보제공 국제표준 및 관련 표준 동향을 분석하고, 향후 수재해 정보 플랫폼 구축을 위해 적용 가능한 통합관리 표준 방안을 도출하고자 하였다. 이를 위해 관측자료 제공을 위한 빅데이터, NoSQL, 클라우드 기술, 공간정보웹서비스를 위한 OGC WxS 표준기술들, 공간정보 표준포맷에 관한 ISO 기술 등 표준화된 정보제공 기술들의 특징을 조사하고, 해당 기술의 도입 전략 및 적용방안을 검토하였다.

이동객체를 위한 질의처리 컴포넌트의 설계 및 구현 (Design and Implementation of Query Processor for Moving Objects)

  • 김경숙;권오제;변희영;조대수;김태완;이기준
    • 한국공간정보시스템학회 논문지
    • /
    • 제6권1호
    • /
    • pp.31-50
    • /
    • 2004
  • 무선통신망과 GPS(Global Positioning System)를 탑재한 모바일 단말기의 발달로 사람이나 사물의 위치정보를 파악하고 이용하는 위치기반 서비스의 영역이 확대되고 있다. 위치기반서비스와 같은 응용분야에서는 시간에 따라 연속적으로 움직이는 이동객체를 효율적으로 저장하고 처리할 수 있는 데이터베이스가 주요한 기술이다. 본 논문에서는 이동객체 데이터베이스를 개발하기 위한 하나의 서브시스템으로서, 이동객체에 대한 질의를 처리하기 위한 컴포넌트를 설계 및 개발한다. 이동객체에 대한 질의를 처리하기 위해서 대표적인 질의표현 및 처리방법을 조사하고, 기존에 개발된 이동객체에 대한 데이터모델과 연산자를 기반으로 SQL형태의 이동객체 질의어를 새로이 정의한다. 사용자는 본 연구에서 제공하는 이동객체 질의어를 이용하여 이동객체의 위치정보에 대한 영역질의, 위상질의, 궤적질의, 최근접질의 등을 표현할 수 있다. 이동객체 질의처리 컴포넌트는 각 질의 들을 분석한 후 이를 효율적으로 처리하기 위한 모듈들을 설계하고 구현한다. 또한, 다른 이동객체 응용시스템을 개발할 때 본 시스템의 활용을 높일 수 있도록 ADO.NET 인터페이스를 제공하고 XML을 이용하여 질의의 결과를 표현할 수 있는 기능을 제공한다.

  • PDF

비유일 외래키 조합 복합키 기반의 사실테이블 모델링과 MDX 쿼리문 작성법 (A Nonunique Composite Foreign Key-Based Approach to Fact Table Modeling and MDX Query Composing)

  • 유한주;이덕성;최인수
    • 한국컴퓨터정보학회지
    • /
    • 제14권2호
    • /
    • pp.185-197
    • /
    • 2006
  • 스타 스키마는 중앙에 사실테이블이 있고 이 주변에 여러 개의 차원테이블이 감싸고 있는 형태로 되어있다. 사실테이블에서의 각 행은 여러 외래키로 구성된 하나의 복합키와 이 복합키와 관련된 여러 측정값으로 구성된다. 복합키의 구성원인 각 외래키는 각 하나씩의 차원테이블과 관련을 맺고 있다. 그런데 문제가 되는 것은 OLAP 스키마에서는 사실테이블에서의 복합키와 측정값이 1 : 1의 관계를 맺고 있는 것으로 되어있는데 비해서 실제의 애플리케이션 특히 금융 애플리케이션에 있어서는 복합키와 측정값이 1 : N의 관계를 맺게 된다는 점이다. 따라서 1 : N의 관계를 1 : 1로 만들기 위해서 예를 들면 SQL 데이터베이스에서 미리 필요한 처리를 한 다음 이 선처리 결과를 OLAP 데이터베이스에 입력하는 방법을 취하게 되는데, 이 방법에도 여러 문제가 있는 것으로 알려져 있다. 특히 어떤 경우에는 결과값이 틀리게 나오기도 한다. 본 연구에서는 1 : N의 관계를 사실테이블에 유지를 하면서도 어떠한 선처리도 하지 않고 정확한 결과값을 산출할 수 있는 사실테이블의 모델링과 MDX 쿼리문 작성법을 제안하고 있다.

  • PDF

이질적인 지오센서 네트워크 데이터의 효율적인 수집 및 관리를 위한 미들웨어 시스템 (A Middleware System for Efficient Acquisition and Management of Heterogeneous Geosensor Networks Data)

  • 김민수;이충호
    • Spatial Information Research
    • /
    • 제20권1호
    • /
    • pp.91-103
    • /
    • 2012
  • 최근 센싱정보와 위치정보 그리고 주변의 공간정보를 융합한 지오센서 정보를 원활하게 수집하여 분석할 수 있는 미들웨어에 대한 관심이 증가하고 있다. 이러한 미들웨어 개발과 관련하여 지오센서 네트워크 환경에서 공간-센싱정보의 에너지 효율적인 수집을 위한 다양한 방법들이 제안되었으며, 웹에서 공간-센싱정보를 효율적으로 매쉬업 할 수 있는 Geosensor Web 기술도 제안되었다. 공간-센싱정보 수집 방법과 Geosensor Web 기술은 단일 지오센서 네트워크에서의 에너지 효율성과 OpenAPI의 제공에서 기여가 있었으나, 다양한 지오센서 네트워크와 물리적 연결을 필요로 하는 u-GIS 응용시스템의 쉽고 빠른 개발을 지원할 수는 없었다. 이에 본 논문에서는 이질적인 지오센서 네트워크들을 연계하는 u-GIS 시스템의 개발 과정에서 소요되는 시간 및 비용을 크게 감소시킬 수 있는 지오센서 네트워크 미들웨어를 제안하고자 한다. 제안된 미들웨어는 SWE와 확장 SQL 인터페이스를 이용하여 이질적인 지오센서 정보를 수집할 수 있고, 다양한 비교 및 공간 연산을 서버와 In-network 사이에서 최적화하여 수행할 수 있고, 다양한 유형의 센서 네트워크와의 쉽고 빠른 물리적 연결을 지원할 수 있는 장점을 가지고 있다. 끝으로, 온도, 습도, 조도, 속도, 영상, 위치 정보를 수집하는 지오센서를 동시에 연결하고 공간정보와 융합하여 환경정보를 실시간 감시할 수 있는 Prototype을 개발함으로써 제안된 미들웨어의 효용성을 검증하고자 한다.