• Title/Summary/Keyword: 서비스 데이터 수집기

Search Result 106, Processing Time 0.032 seconds

Implementation of an Extended Service Data Aggregator Service Component-based on OGSA (서비스 데이터 수집기를 확장한 OGSA 기반 서비스 컴포넌트 구현)

  • Cho Kwang-Moon;Kang Kyung-Woo;Kang Yun-Hee
    • The Journal of the Korea Contents Association
    • /
    • v.4 no.4
    • /
    • pp.99-106
    • /
    • 2004
  • This paper describes main characteristics of Grid Services based on OGSA and a service component for aggregating service data element. In order to build a Grid Service for SOA, it needs to consider a systematic approach from the high-level software architecture of a system that describes the main system components and their interactions. The purpose of this paper is to design and implement an extended service data aggregator service. To provide reliable aggregating service for service data elements, which is running under wide area environment like Internet, the aggregator service is operated asynchronously by notification mechanism.

  • PDF

Implementation of a Service Data Aggregator Service based on OGSA By Using Globes Toolkit V.3 (Globus Tookit V.3를 사용한 OGSA 기반 서비스 데이터 수집기 서비스 구현)

  • Kang Yun-Hee
    • Journal of Digital Contents Society
    • /
    • v.6 no.1
    • /
    • pp.1-5
    • /
    • 2005
  • This paper describes the main characteristics of Grid Services based on OGSA and a Grid service for aggregating service data element(SDE)s. In order to build a Grid Service, it needs to consider a systematic building approach from the high-level software architecture that represents the main system components and their interactions. The purpose of this paper is to design and implement an extended service data aggregator service in which SDE is a basic unit for collecting resource information. A GT3 based service data aggregator service is extended to apply the multiple collections based storage scheme for maintaining persistently SDEs with a XML DBMS Xindice. To provide efficient aggregating service for service data elements, which is running under wide area environment like Internet, the aggregator service is asynchronously operated by notification mechanism.

  • PDF

A Case Study on The Establishment of Efficient Management of Academic Information and Services. (학술정보의 효율적 전주기 관리 및 서비스 체제 구축에 관한 사례 연구)

  • Cho, Sung-Nam;Seo, Tae-Sul;Kim, Wan-Jong
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2016.10a
    • /
    • pp.412-415
    • /
    • 2016
  • 본 연구에서는 학술정보의 효율적 관리 및 서비스 체제를 수립하고 활용성을 강화하기 위해 논문 자동 수집 및 구축, 논문 투고 및 심사, 전자출판, XML 자동 구축에 이르기까지 전주기 기능 구현에 방안을 제시하고 이를 구현한 사례를 소개하고자 한다. 기존 Peer-Review 시스템은 데이터 수집 및 변환파트와 투고 및 심사, 전자출판 파트, XML 구축 파트 등으로 분리되거나 별도로 운영되어 왔다. 본 연구에서는 이러한 기능을 통합적으로 구현하기 위해 KISTI의 Peer-Review 시스템인 ACOMS와 XML 기반 학술정보서비스 시스템(KpubS) 기능 및 프로세스를 통합한 구현 방안을 제시하고 이를 시스템으로 구현하였다. 그러나 아직까지 원문 PDF를 XML로 완전 자동 변환할 수 있는 기술은 없는 상태로써 반자동 변환 기능을 탑재하였다. 본 연구 내용은 다양한 수집 채널을 통해 입수된 학술정보 및 XML 자료에 대한 입력체계를 제공하고, XML 본문으로부터 메타데이터를 자동 식별 및 추출하여 학술정보 DB를 구축 저장하며, 구축된 DB 및 XML 기반의 전자출판 기능 제공과 함께 웹서비스 단계까지의 전주기 공정에 대한 프로세스 모델 및 시스템에 관한 것이다. 이에 데이터베이스 구축을 위한 시간 및 비용을 절감할 수 있을뿐만 아니라, 시맨틱 태깅 및 수식, 표, 그림 정보 제공 등 이용자에게 다양한 형태의 서비스를 제공할 수 있게 되었다.

A Study on PubMed meta-data aggregator and dynamic RSS channel generator development (PubMed 메타데이터 수집기 및 동적 RSS 채널 생성기 개발 연구)

  • Kim, sun-tae;Kim, jay-hoon;Han, hee-jun;Hyeon, Mi-Hwan;Lee, Tae-Seok;Yae, yong-hee;Yeo, Il-Yeon;Yun, Hui-Jun
    • Proceedings of the Korea Contents Association Conference
    • /
    • 2008.05a
    • /
    • pp.832-835
    • /
    • 2008
  • PubMed stands alone among database related to biomedical literature. On this thesis, PubMed meta-data at some point is collected and built. The service model which serve the dynamic RSS channel, one of the core services in an web2.0 era, is designed and developed. E-Utilities service(API) served by PubMed are analyzed. The meta-data aggregator and builder are developed. Also the dynamic RSS channel generator is developed and the method how it could be used in the RSS reader is suggested.

  • PDF

Design of Distributed Hadoop Full Stack Platform for Big Data Collection and Processing (빅데이터 수집 처리를 위한 분산 하둡 풀스택 플랫폼의 설계)

  • Lee, Myeong-Ho
    • Journal of the Korea Convergence Society
    • /
    • v.12 no.7
    • /
    • pp.45-51
    • /
    • 2021
  • In accordance with the rapid non-face-to-face environment and mobile first strategy, the explosive increase and creation of many structured/unstructured data every year demands new decision making and services using big data in all fields. However, there have been few reference cases of using the Hadoop Ecosystem, which uses the rapidly increasing big data every year to collect and load big data into a standard platform that can be applied in a practical environment, and then store and process well-established big data in a relational database. Therefore, in this study, after collecting unstructured data searched by keywords from social network services based on Hadoop 2.0 through three virtual machine servers in the Spring Framework environment, the collected unstructured data is loaded into Hadoop Distributed File System and HBase based on the loaded unstructured data, it was designed and implemented to store standardized big data in a relational database using a morpheme analyzer. In the future, research on clustering and classification and analysis using machine learning using Hive or Mahout for deep data analysis should be continued.

SDN-Based Collection-path Steering for IoT-Cloud Service Monitoring Data over SmartX-mini Playground (SmartX-mini Playground 상의 IoT-Cloud 서비스에 대한 SDN 기반 모니터링 데이터 수집 경로 설정)

  • Yoon, Heebum;Kim, Seungryong;Kim, JongWon
    • The Journal of Korean Institute of Communications and Information Sciences
    • /
    • v.41 no.11
    • /
    • pp.1598-1607
    • /
    • 2016
  • Safe transmitting monitoring data is essential for supporting IoT-Cloud services efficiently. In this paper, we find ways to configure data path flexibly in SDN based for IoT-Cloud services utilizing SmartX-mini Playground. To do this, we use ONOS(Open Network Operating System) SDN Controller, ONOS NBI Applications made from us to check flexible and safe data path configuration for IoT-Cloud monitoring data transmitting in real IoT-SDN-Cloud environments.

Implementation of Topic Classifier for University News-based BI Analysis (대학 BI 분석을 위한 주제분류기의 구현)

  • Jang, Seo-Yoon;Jang, Hyeon-Yeong;Cha, Chae-Won
    • Proceedings of the Korean Society of Computer Information Conference
    • /
    • 2021.01a
    • /
    • pp.23-25
    • /
    • 2021
  • 본 논문에서는 대학별 홍보 전략, 발전에 기여하기 위한 서비스를 제안한다. 이 서비스는 데이터 수집에는 크롤링을 사용하고 사이킷 런을 사용하여 정확도를 최대화하고, 각 분류된 카테고리의 오류을 최소화한다. 이 서비스는 각 카테고리별로 특성이 높은 키워드를 사용하여 카테고리 별 학습 데이터셋을 생성한 후 이러한 학습 데이터셋을 바탕으로 각 기사들을 최적의 카테고리로 분류해주는 분류기를 구현한다. 이러한 분류기를 사용하여 분류된 기사들을 분석하여 막대 그래프 등의 시각화된 자료들로 볼 수 있도록 하여 기존의 대학 홍보 자료에 비해 누구든 쉽고 간단하게 접근이 가능하도록 한다.

  • PDF

Packet data analyzing system for quality assurance of satellite network (위성망 품질보증을 위한 패킷 데이터 분석 시스템)

  • Yu Kang-Hi;Kim Jae-Kwon;Kong Kyung-Tae;Shin Dong-Houn;Lee Sang-Yun
    • 한국정보통신설비학회:학술대회논문집
    • /
    • 2004.08a
    • /
    • pp.298-301
    • /
    • 2004
  • KT는 무궁화 3호 위성을 이용한 양방향 위성 통신 사업을 추진하고 있으며, 지상망을 이용하기 어려운 지역에 정부/공공, 에너지 산업, 기업 단일망 등 다양한 산업 분야를 대상으로 초고속 네트워크를 제공하고 있다. 양방향 위성 통신 서비스는 36,000km 상공의 위성 중계기와 지상 간의 통신 지연을 극복하기 위한 첨단 기술로 운용되고 있으며, 중요 데이터에 대한 위성 통신 품질보증 기능을 제공한다. 본 논문에서는 위성망의 트래픽을 수집하고 데이터를 로깅하는 위성망 트래픽 수집 도구와 수집된 데이터를 마이닝을 통해 실시간 모니터링하고 통계 정보를 생성하는 위성망 패킷 데이터 분석 도구로 이루어진 위성망 패킷 데이터 분석 시스템에 대해 논한다. 위성망 패킷 데이터 분석 시스템은 데이터 송수신 정보를 모니터링 함으로써 실시간 위성 통신 상태를 점검하고, 전송 지연 및 실패 등의 위성 통신 오류 상태를 조기 진단하고 조치할 수 있는 위성망 품질 보증 서비스를 제공한다.

  • PDF

A Study on Planning for Leased-line Bandwidth based-on web Traffic (Web 트래픽 기반의 전용 회선 대여곡 결정에 관한 연구)

  • Seo, Sang-Hyeon;Choe, Yeong-Su;An, Seong-Jin;Jeong, Jin-Uk
    • The Transactions of the Korea Information Processing Society
    • /
    • v.7 no.8S
    • /
    • pp.2713-2721
    • /
    • 2000
  • 이 논문에서는 Web 사이트를 설계할 때 응답시간과 관련해서 고려되어야 할 요수 중[10,15,16], 인터넷 연결 회선의 대역폭 결정에 참조될 수 있는 자료를 제시한다. 이를 위해 다양한 환경에서 Web 세션 도착율에 따른 응답시간과 회선 이용율의 변화를 관찰하고, 이를 통해 특정 대역폭의 회선에 대해 Web 서비스가 한계 응답시간 내에 보장될 수 있는 Web 세션 도착율의 임계치를 구한다. [15,16]. 이 논문에서는 데이터 수집을 위해 실험 네트워크를 구성하고, 자체적으로 구현한 패킷 생성기를 이용하여 세션 도착율의 변화에 따른 Web 트래픽을 시뮬레이션한다. 응답시간은 패킷 생성기가 생성한 각각의 HTTP(Hyper-Text Transfer Protocol)요청 패킷이 전송되는 시점부터 HTTP응답 메시지가 도착하는 시점까지의 경과된 시간으로 구하고, 회선 이용율은 SNMP(Simple Network Management Protocol)를 이용해 자체 구현한 데이터 수집기로 구한다[3]. 이 실험의 결과는, Web 사이트를 설계할 때 네트워크 전문가가 아니더라도 인터넷 연결 회선의 대역폭 결정 문제를 해결하는데 쉽고 유용하게 참조될 수 있다.

  • PDF

Tweet Acquisition System by Considering Location Information and Tendency of Twitter User (트위터 사용자의 위치정보와 성향을 고려한 트윗 수집 시스템)

  • Choi, Woosung;Yim, Junyeob;Hwang, Byung-Yeon
    • Spatial Information Research
    • /
    • v.22 no.3
    • /
    • pp.1-8
    • /
    • 2014
  • While SNS services such as Twitter or Facebook are rapidly growing, research for the SNS analysis has been concerned. Especially, twitter reacts to social issues in real-time so that it is used to get useful experimental data for researchers of social science or information retrieval. However, it is still lack of research on the methodology to collect data. Therefore, this paper suggests the tweet acquisition system by considering tendency of twitter user oriented location-based event and political social event. First the system acquires tweets including information of location and keyword about event and secure IDs for acquisition of political social event. Then we plan ID-analyzer to classify the tendency of users. In addition for measuring reliability of ID-analyzer, it acquires and analyzes the tweet by using high-ranked ID. In analyses result, top-ranked ID shows 88.8% reliability, 2nd-ranked ID shows 76.05% and ID-analyzer shows 77.5%, it shortens collection time by using minority ID.