• Title/Summary/Keyword: 데이터 웨어하우징

Search Result 62, Processing Time 0.026 seconds

A Study on the Interchange of Data between RDBs based on Web Service (웹 서비스 기반의 RDB간의 데이터 교환에 관한 연구)

  • Park Yoo-Shin;Jung Kye-Dong;Choi Young-Keun
    • Proceedings of the Korean Information Science Society Conference
    • /
    • 2005.07b
    • /
    • pp.190-192
    • /
    • 2005
  • 현재 기업 내의 정보 시스템들은 개별적이고 다양한 형태의 데이터베이스를 활용하여 업무적으로 발생하는 대량의 데이터를 저장하고 관리하고 있다. 이렇게 개별적으로 존재하는 데이터베이스에 저장된 데이터들을 교환 위해 기업들은 EAI, 데이터웨어하우징 등의 기술을 활용하고 있다. 하지만 이러한 기술들은 도입 비용 및 유지관리에 많은 비용을 요구할 뿐만 아니라 각 벤더들마다 요구하는 환경이 상이하다는 문제점을 가지고 있다. 본 논문에서는 기존 기술들의 이러한 문제점을 해결하기 위해 기업 내에 분산되어 존재하는 관계형 데이터베이스간의 데이터를 교환하기 위한 방법으로 웹 서비스 기반의 RDB간의 데이터 교환 시스템을 설계한다. 웹 서비스를 사용함으로써 기업들은 기존의 웹 환경을 활용할 수 있으므로 도입 비용 및 유지관리 비용을 절감할 수 있고 XML 포맷을 사용함으로 플랫폼 및 시스템 환경, 사용언어에 독립적으로 데이터를 교환할 수 있다.

  • PDF

Policy of Managing Materialized Views by Orienting toward Self-Maintenance in Data Warehousing (데이터웨어하우징에서 자립유지를 지향하는 실체뷰 관리 정책)

  • Kim, Keun-Hyung
    • Asia pacific journal of information systems
    • /
    • v.13 no.4
    • /
    • pp.191-206
    • /
    • 2003
  • More views in data warehouse, can respond to the users more rapidly because the user's requests might be processed by accessing only the materialized views with higher probabilities rather than accessing base relations. But, the update duration for maintaining materialized views limits the number of materialized views in data warehouse. In this paper, we propose the algorithm for reducing update duration of materialized views, of which aggregation functions are maintained by self-maintenance. We also implement the proposed algorithm and evaluate the performance of the algorithm.

Design and implementation of a Web-based OLAP metadata interchange system (웹 기반의 OLAP 메타데이터 교환 시스템의 설계 및 구현)

  • Lee, In-Gi;Lee, Min-Soo;Yong, Hwan-Seung
    • The KIPS Transactions:PartD
    • /
    • v.9D no.6
    • /
    • pp.971-980
    • /
    • 2002
  • As the importance of knowledge management is being recognized, there is a significant amount of increase for interest in data warehousing. On-Line Analytical Processing (OLAP) systems can effectively make use of data warehouses. Although there are many commercial OLAP products, they have been developed without any kind of standard resulting in poor data exchange and difficulty in interfacing among the OLAP products. In this paper we propose an OLAP metadata interchange model that can be used among different OLAP products and have implemented an OLAP metadata interchange system that can interchange the cubes created from the metadata. XML is used for the OLAP metadata model and the user interface is Web-based, which makes it easier to interchange metadata among different OLAP products. Users can experience the different analysis environments of different products without the need to learn the complex cube creation process for each product. By extending this research to design a common query language that can be used among OLAP products, OLAP products should be able to more easily talk to one another.

XML Element Matching Algorithm based on Structural Properties and Rules (룰과 구조적 속성에 기반한 XML 엘리먼트 매칭 알고리즘)

  • Park, Hyung;Jeong, Chanki
    • Journal of Information Technology and Architecture
    • /
    • v.10 no.1
    • /
    • pp.71-77
    • /
    • 2013
  • XML schema matching is the task of finding semantic correspondences between elements of two schemas. XML schema matching plays an important role in many application, such as schema integration, data integration, data warehousing, data transformation, peer-to-peer data management, semantic web etc. In this paper, we propose an XML element matching algorithm based on rules and structural properties. The proposed algorithm involves classifying elements as unique or non-unique elements according to the structural properties of XML documents and deciding on element matching in accordance with rules. We present experimental results that demonstrate the effectiveness of the proposed approach.

Development and Application of a Big Data Platform for Education Longitudinal Study Analysis (교육종단연구 분석을 위한 빅데이터 플랫폼 개발 및 적용)

  • Park, Jung;Cho, Wan-Sup
    • The Journal of Bigdata
    • /
    • v.5 no.1
    • /
    • pp.11-27
    • /
    • 2020
  • In this paper, we developed a big data platform to store, process, and analyze effectively on such education longitudinal study data. And it was applied to the Seoul Education Longitudinal Study(SELS) to confirm its usefulness. The developed platform consists of data preprocessing unit and data analysis unit. The data preprocessing unit 1) masking, 2) converts each item into a factor 3) normalizes / creates dummy variables 4) data derivation, and 5) data warehousing. The data analysis unit consists of OLAP and data mining(DM). In the multidimensional analysis, OLAP is performed after selecting a measure and designing a schema. The DM process involves variable selection, research model selection, data modification, parameter tuning, model training, model evaluation, and interpretation of the results. The data warehouse created through the preprocessing process on this platform can be shared by various researchers, and the continuous accumulation of data sets makes further analysis easier for subsequent researchers. In addition, policy-makers can access the SELS data warehouse directly and analyze it online through multi-dimensional analysis, enabling scientific decision making. To prove the usefulness of the developed platform, SELS data was built on the platform and OLAP and DM were performed by selecting the mathematics academic achievement as a measure, and various factors affecting the measurements were analyzed using DM techniques. This enabled us to quickly and effectively derive implications for data-based education policies.

An Efficient Query Processing in Stream DBMS using Query Preprocessor (질의 전처리기를 사용한 스트림 DBMS의 효율적 질의처리)

  • Yang, Young-Hyoo
    • Journal of the Korea Society of Computer and Information
    • /
    • v.13 no.1
    • /
    • pp.65-73
    • /
    • 2008
  • The telematics data management deals with queries on stream data coming from moving cars. So the stream DBMS should process the large amount of data stream in real-time. In this article, previous research projects are analyzed in the aspects of query processing. And a hybrid model is introduced where query preprocessor is used to process all types of queries in one singe system. Decreasing cost and rapidly increasing Performance of devices may guarantee the utmost parallelism of the hybrid system. As a result, various types of stream DBMS queries could be processed in a uniform and efficient way in a single system.

  • PDF

Development of a CASE Tool on Relational Databases for Distributed Object Systems (분산객체 시스템을 위한 관계형 데이터베이스 연동도구의 개발)

  • Park, U-Chang;,
    • The Transactions of the Korea Information Processing Society
    • /
    • v.7 no.1
    • /
    • pp.20-28
    • /
    • 2000
  • In distributed data processing environments, heterogeneous data sources should corporate each other. The CORBA standards proposed by OMG solve this problem by the integration of platform independent applications. In this paper, we design and implement a CASE tool that help linking CORBA applications to relational databases by interface method. This CASE tool manipulates the database schema and generates IDL and $C^{++}$ stubs corresponding to the schema. We explain the code generation process and evaluate the data access performance of the interface method compared to adapter method and various implementation languages. The implemented tool can be used for developing applications that need relational database corporation environments such as distributed information systems or data warehousing. etc.

  • PDF

Design and Implementation of an XML-based Translator for Metadata Interchange in RDBs (RDB 대상 메타데이터 교환을 위한 XML기반 번역기 설계 및 구현)

  • Lee, Wol-Yeong;Lee, Gi-Ho
    • Journal of KIISE:Databases
    • /
    • v.28 no.1
    • /
    • pp.48-56
    • /
    • 2001
  • XML은 여러 분야에서 다양한 타입의 데이터를 효과적으로 관리하기 위한 표준으로 사용되고 있다. 이러한 XML의 한 응용으로서 데이터베이스 시스템, 파일 시스템, OLTP시스템, OLAP시스템, 데이터웨어하우징을 위한 ETL 시스템, 데이터마이닝 시스템 등을 포함하는 다양한 타입의 데이터 처리 시스템 사이에서 메타데이터를 교환하기 위하여 XML을 이용하여 메타데이터를 표준화하는 것이다. 본 연구는 MDC(MetaData Coalition)에 제안한 일반적인 데이터 처리 시스템을 위한 메타데이터 교환 스펙인 MDIS(Metadata Interchange Specification)를 따르도록 설계한 관계형 데이터베이스 시스템의 메타데이터 교환을 위한 사양으로서 R-MDIS(MetaData Interchange Specification for RDBs) 모델을 제안하고 이에 따라 표현된 자료를 상호 데이터베이스 시스템 사이에서 교환할 수 있는 Export 함수와 Import 함수를 포함하는 번역기를 개발한다. 이 번역기는 메타데이터의 일관성을 유지하면서도 메타데이터의 양방향 흐름을 지원할 수 있도록 하는 정보를 포함하고 있다. 본 연구는 구체적인 관계형 데이터베이스 시스템에서의 메타데이터 교환을 위한 실제적인 번역기를 구현함으로써 다양한 종류의 데이터 처리 시스템들 사이에서 메타데이터 불일치 문제를 해결할 수 있는 근거를 제시하였다. 둘째, XML을 이용하여 메타데이터 교환 사양을 설정함으로서 구도화된 데이터나 구조화되지 않은 데이터 모두에 대하여 일관된 방법으로 데이터 교환이 가능하도록 하여 효율적인 정보 교환을 할 수 있다는 것을 보여 주었다. 셋째, 본 연구에서 개발한 번역기는 메타데이터 교환에 의해 데이터들을 공유하게 함으로서 효율적으로 관리하지 못하던 데이터들을 효율적으로 사용할 수 있게 함으로서 데이터 관리 문제에 해결책이 될 것이다.

  • PDF

An Empirical Study on Success Factors of Data Warehousing Considering End User Community Characteristics as Moderating Variable (최종사용자 집단 특성을 조절변수로 도입하는 경우 데이터 웨어하우징 성공요인에 관한 연구)

  • Lee, Young-Sook;Lee, Dong-Man;Suh, Chang-Kyo
    • Asia pacific journal of information systems
    • /
    • v.11 no.1
    • /
    • pp.175-203
    • /
    • 2001
  • This study empirically examined the effects of 12 factors on the success of data warehousing. We also introduced the characteristics of end-user community as moderating variables. Several hypotheses were set up to identify the relationships among these variables. And the survey instrument(questionnaire) was developed to collect data. Ultimately 183 questionnaires from 61 korean firms were collected. Findings showed that 9 factors affect positive effect on the success of data warehousing. Also the characteristics of end-user community can be considered significant moderating variables between success factors and success of data warehousing.

  • PDF

A study on the XML Implementation for Knowledge Management System (지식관리 시스템을 위한 XML구축 방안에 대한 연구)

  • 최우영;최성
    • Proceedings of the KAIS Fall Conference
    • /
    • 2002.05a
    • /
    • pp.248-251
    • /
    • 2002
  • 현재 지식에 대한 중요성의 인식으로 각 기업별로 정보 시스템 구축을 통한 지식의 축적을 시도하고 있고 데이터 웨어하우징(DW), 데이터마트, 전사적자원관리(ERP) 등 지식관리를 위한 핵심 시스템을 통해 구성원들간에 정보를 교환하고 있다. 이처럼 기업의 지식들이 생성, 공유, 관리, 보관되고 이를 보다 체계적이고 정교하게 구축하여 이용자가 보다 쉽게 사용할 수 있는 정보기술이 지식관리시스템(KMS)이다. XML은 여러 어플리케이션들의 표준화된 정보 전달의 매개가 되는 스펙으로 지식관리의 구조적 체계를 공유할 수 있는 기반을 만들어 줄 것이다. 지식 시스템은 분산된 정보와 시스템들의 상호 연동성을 보장할 수 있는 유연성과 확장성으로 표준규격의 XML을 연구하였다.