• 제목/요약/키워드: Data stream mining

검색결과 97건 처리시간 0.027초

국내 전형적 금은 및 비(base)금속 폐광산지역의 중금속 오염특성 (Heavy Metal Contamination around the Abandoned Au-Ag and Base Metal Mine Sites in Korea)

  • 전효택;안주성;정명채
    • 자원환경지질
    • /
    • 제38권2호
    • /
    • pp.101-111
    • /
    • 2005
  • 이 연구의 목적은 국내 폐광산지역의 주변 환경오염 양상을 평가하고 독성 중금속 원소들의 거동에 대한 일반적인 결론을 도출하고자 함이다. 이를 위해 국내의 전형적인 비(base)금속 광산과 금은 광산 4개 지역을 각각 선정하여 환경오염 조사결과를 상호 비교, 검토하였다. 비금속광산으로서 삼보 Pb-Zn-중정석, 신예미 Pb-Zn-Fe, 거도 Cu-Fe 및 시흥 Cu-Pb-Zn광산지역의 광미 및 슬래그 등 폐기물에서 유래된 토양에서 상당한 수준의 Cd, Cu, Pb 및 Zn의 함량이 나타났다. 또한 광산 하부지역 주변 농경지. 하상퇴적물 및 하천수에서도 지속적인 분산의 영향으로 심각한 오염양상이 나타났으며 이는 광산으로부터의 거리, 풍향, 지형 등에 의해 영향을 받고 있었다. 구봉, 삼광, 금왕 및 길곡 금은광산지역에서도 광미 및 광산 폐기토양에서 As, Cd, Cu, Pb 및 Zn의 높은 함량이 나타났으며 직접적인 하부유출로 하상퇴적물 및 하천수의 오염을 유발하고 있었다. 금은광산지역에서 비소가 특징적인 환경오염 원소로 나타났으며 중금속원소와 함께 황화광물에서 비롯되어 산화영향에 따라 그 이동도가 증진될 수 있다. 토양시료의 연속추출 분석결과 대부분의 중금속은 비 잔류성 형태로 존재하며 주변 환경조건의 변화에 취약한 것으로 나타났다. 오염지수의 적용견과 폐광산 토양에서 1.0 이상으로 중금속원소들의 복합적 오염양상을 나타내었다.

천변저류지 조성에 따른 토평천 유역의 저류량 분석 (A Study on Storage Analysis of Topyeong Stream Watershed by Washland Construction)

  • 김재철;유재정;김상단
    • 한국습지학회지
    • /
    • 제10권2호
    • /
    • pp.39-51
    • /
    • 2008
  • 최근 하수처리, 홍수조절, 광산침출수, 농업유출수 등의 처리에 습지를 이용하려는 시도가 증가하고 있다. 하지만 장기모니터링의 어려움으로 인해 습지에 대한 장기간의 자료들이 부족하여 습지의 올바른 이용이 어려운 실정이다. 이에 본 연구에서는 장기간의 자료 생성을 목적으로 한 수문분석의 일환으로 장기유출 수문모형인 SWAT(Soil and Water Assessment Tool)모형을 이용하여 토평천 유역의 우포, 목포, 사지포, 쪽지벌에 대한 저류량을 모의하였다. 이를 바탕으로 토평천 유역에 천변저류지를 조성하는 가상 시나리오를 작성하여 조성된 천변저류지의 저류량 거동을 분석하였다. 천변저류지의 조성에 따른 우포늪의 저류량 변화를 분석한 결과 천변저류지 조성에 따라 우포늪도 일정 정도의 영향을 받을 수 있음이 파악되었다.

  • PDF

앙상블 SVM을 이용한 동적 웹 정보 예측 시스템 (Dynamic Web Information Predictive System Using Ensemble Support Vector Machine)

  • 박창희;윤경배
    • 정보처리학회논문지B
    • /
    • 제11B권4호
    • /
    • pp.465-470
    • /
    • 2004
  • 기존의 웹 정보 예측 시스템은 예측에 필요한 정보를 얻기 위하여 사용자 프로파일과 사용자로부터의 명시적 피드백 정보를 필요로 하는 단점이 존재한다. 본 논문에서는 이러한 단점을 극복하고자 웹 사이트에 접속한 고객의 행동을 나타내는 클릭 스트림 데이터와 이를 기반으로 한 사용자의 암시적 피드백 정보를 이용하여 각 사용자가 가장 필요로 하는 웹 정보를 예측한다. 이를 이용하여 관련 정보를 제공할 수 있는 앙상블 SVM을 이용한 동적 웹 정보 예측 시스템을 설계하고 구현하며, 기존의 웹 정보 예측 시스템과 성능 비교를 수행한 결과, 제안된 방법의 우수함이 입증되었다.

맵리듀스기반 워크플로우 빅-로그 클러스터링 기법 (A MapReduce-Based Workflow BIG-Log Clustering Technique)

  • 진민혁;김광훈
    • 인터넷정보학회논문지
    • /
    • 제20권1호
    • /
    • pp.87-96
    • /
    • 2019
  • 본 논문에서는 분산 워크플로우 실행 이벤트 로그를 수집하고 분류하기 위한 사전 처리 도구로서 맵-리듀스기반 클러스터링 기법을 제안한다. 특히 우리는 볼륨, 속도, 다양성, 진실성 및 가치와 같은 BIG 데이터의 5V 속성에 만족하고 잘 충족되어 있기 때문에 분산 워크플로우 실행 이벤트 로그를 특별히 워크플로우 빅-로그(Workflow BIG-Logs)라고 정의한다. 이 논문에서 개발하는 클러스터링 기술은워크플로우 빅-로그를 기반으로 하는 특정 워크플로 프로세스 마이닝 및 분석 알고리즘의 사전 처리 단계에 적용하기 위한 목적으로 고안된 것이다. 즉, 맵리듀스(Map-Reduce) 프레임워크를 워크플로우 빅-로그 처리 플랫폼으로 사용하고, IEEE XES 표준 데이터 형식을 지원하며, 결국 본 연구에서 개발중에 있는 구조적 정보제어넷기반 워크플로우 프로세스 마이닝 알고리즘인 ${\rho}$-알고리즘의 사전 처리 단계 전용으로 사용되도록 구현된 것이다. 보다 자세하게 말하자면, 워크플로우 빅-로그의 클러스터링 패턴은 단위업무액티버티 기반 클러스터링 패턴과 단위업무 수행자 기반 클러스터링 패턴으로 분류되는데, 특별히 단위업무 액티버티 패턴의 하나인 시간적 워크케이스 패턴과 그의 발생 건수를 재발견하는 맵리듀스 기반 클러스터링 알고리즘을 설계하고 구현하고자 한다. 마지막으로, 우리는 BPI 챌린지에서 공개한 워크플로우 실행 이벤트 로그 데이터세트에 대해 일련의 실험을 수행함으로써 제안된 클러스터링 기법의 기술적 타당성을 검증한다.

의미 정보를 이용한 다차원 데이터 시퀀스의 유사성 척도 연구 (A Study of Similarity Measures on Multidimensional Data Sequences Using Semantic Information)

  • 이석룡;이주홍;전석주
    • 정보처리학회논문지D
    • /
    • 제10D권2호
    • /
    • pp.283-292
    • /
    • 2003
  • 연속된 일차원 실수로 이루어진 시계열 데이터는 데이터 마이닝이나 데이터 웨어하우징과 같은 다양한 데이터베이스 응용 분야에서 연구되어져 왔다. 그러나 최근의 복잡한 비즈니스 환경에서, 다차원 데이터 시퀀스(multidimensional data sequence : MDS)는 일차원 시계열 데이터와 더불어 그 중요성이 더해가고 있다. 다차원 데이터 시퀀스의 예로써, 비디오 스트림은 색상과 질감 등의 속성들로 이루어진 다차원 공간상에서 MDS로 나타낼 수 있다. 본 논문에서는 패턴 유사성 검색에서 사용되는 효과적인 유사성 척도를 제시한다. 하나의 MDS는 여러 개의 세그먼트(segment)로 나누어지며, 각 세그먼트는 다양한 의미적인 특징들로 표현된다. 유사성 척도는 이러한 세그먼트에 대해서 정의되는데 이 척도를 사용하여 어떤 주어진 질의 시퀀스에 대하여 무관한 세그먼트들은 검색 대상에서 일차적으로 제외된다. 데이터 시퀀스와 질의 시퀀스 모두 세그먼트 단위로 분할되며, 질의 처리는 전체 시퀀스의 모든 데이터를 검색하지 않고 데이터 세그먼트와 질의 세그먼트의 특징을 비교하는 것을 기초로 하여 수행된다.

웹 클릭 스트림에서 고유용 과거 정보 탐색 (Finding high utility old itemsets in web-click streams)

  • 장중혁
    • 한국산학기술학회논문지
    • /
    • 제17권4호
    • /
    • pp.521-528
    • /
    • 2016
  • 개인용 컴퓨터 및 각종 모바일 기기의 이용 증가로 인해 많은 분야에서 다양한 형태의 웹기반 서비스들이 널리 활용되고 있다. 이에 따라 해당 분야에서 개인 맞춤형 서비스를 지원하기 위한 사용자 이용 로그 분석 등에 대한 연구가 활발히 진행되고 있으며, 특히 사용자 로그 데이터를 구성하는 구성요소의 중요성 차별화에 기반한 분석 기법들이 활발히 연구되었다. 본 논문에서는 웹 클릭 스트림에서 유용하게 적용될 수 있는 고유용 과거 정보 탐색 기법을 제시한다. 해당 기법을 통해 기존의 웹 클릭 스트림 분석 기법에서는 쉽게 탐색하지 못했던 정보인 타겟 마케팅 등에 유용하게 활용될 수 있는 중요 정보를 쉽게 탐색할 수 있다. 본 논문의 연구 결과는 IoT 환경 및 생물정보 분석 등과 같이 데이터 스트림 형태로 정보를 발생시키는 다양한 컴퓨터 응용 분야에도 활용될 수 있을 것이다.

폐석탄광 주변 지구화학적 환경의 중금속 오염 평가 - 강릉탄전 임곡천 일대를 중심으로 - (Evaluation of Heavy Metal Contamination in Geochemical Environment around the Abandoned Coal Mine - With special reference to geochemical environment around the Imgok Creek in the Gangreung Coal Field -)

  • 전효택;김주용;최시영
    • 자원환경지질
    • /
    • 제31권6호
    • /
    • pp.499-508
    • /
    • 1998
  • The Imgok Creek is located in the Gangreung coal field, which has been known that sulfides are more abundant than other coal fields in Korea, and it has been severly contaminated by acid mine drainage (AMD) discharging from the abandoned coal mines, such as the Youngdong, the Dongduk and the Waryong coal mines. The purposes of this study are to synthetically assess the contamination of natural water, stream sediment and cultivated soils, and to provide the basic data for AMD treatment. Geochemical samples were collected in December, 1996 (dry season) and April, 1997 (after three day's rainfall). TDS of the Youngdong mine water was remarkably higher than those of other mine waters. In the Imgok Creek, concentrations of most elements, except Fe decreased with distance by dilution caused by the inflow of uncontaminated tributaries. From the results of NAMDI and $I_{geo}$ calculation, the Youngdong coal mine was the main contamination source of the study area. Groundwater pollution was not yet confirmed in this study and the paddy and farm land soils were also not yet contaminated by mining activity based on the pollution index ranging from 0.27 to 0.47.

  • PDF

An Analysis of Streambed Changes Downstream of Daecheong Dam

  • Seo, Hyeong-Deok;Jeong, Sang-Man;Kim, Lee-Hyung;Choi, Kyu-Ho
    • 한국방재학회 논문집
    • /
    • 제8권1호
    • /
    • pp.103-108
    • /
    • 2008
  • Riverbed change is greatly influenced by artificial factors such as dam construction, gravel collection, and river improvement. This study simulated a long-term bed change based on the GSTARS3 model using actual data from the area downstream of the Geum River Daecheong Dam and compared the estimation with a section of the actual measurement. As a result, it was found that the section of the actual measurement was far lower than the result of the simulation in terms of long-term bed change. While the area downstream of Daecheong Dam displayed approximately an average of 2.29 m of streambed degradation on average while the upper stream area showed approximately 0.63 m of bed degradation over 24 years. In the simulation of the area downstream of Daecheong Dam based on the GSTARS3 model, similar bed degradation was observed. However, a great difference was detected between the result and the actual measurement. According to the cause analysis, the riverbed in the area downstream of Daecheong Dam has continuously degraded due to the dam construction and mass collection of gravel. The mass collection of gravel was the main cause of riverbed change. It was found that about 76% of all riverbed degradation was caused by the mass collection of gravel.

쇼핑 웹사이트 탐색 유형과 방문 패턴 분석 (Analysis of shopping website visit types and shopping pattern)

  • 최경빈;남기환
    • 지능정보연구
    • /
    • 제25권1호
    • /
    • pp.85-107
    • /
    • 2019
  • 온라인 소비자는 쇼핑 웹사이트에서 특정 제품군이나 브랜드에 속한 제품들을 둘러보고 구매를 진행할 수 있고, 혹은 단순히 넓은 범위의 탐색 반경을 보이며 여러 페이지들을 돌아보다 구매를 진행하지 않고 이탈할 수 있다. 이러한 온라인 소비자의 행동과 구매에 관련된 연구는 꾸준히 진행되어왔으며, 실무에서도 소비자들의 행동 데이터를 바탕으로 한 서비스 및 어플리케이션이 개발되고 있다. 최근에는 빅데이터 기술의 발달로 소비자 개인 단위의 맞춤화 전략 및 추천 시스템이 활용되고 있으며 사용자의 쇼핑 경험을 최적화하기 위한 시도가 진행되고 있다. 하지만 이와 같은 시도에도 온라인 소비자가 실제로 웹사이트를 방문해 제품 구매 단계까지 전환될 확률은 매우 낮은 실정이다. 이는 온라인 소비자들이 단지 제품 구매를 위해 웹사이트를 방문하는 것이 아니라 그들의 쇼핑 동기 및 목적에 따라 웹사이트를 다르게 활용하고 탐색하기 때문이다. 따라서 단지 구매가 진행되는 방문 외에도 다양한 방문 형태를 분석하는 것은 온라인 소비자들의 행동을 이해하는데 중요하다고 할 수 있다. 이러한 관점에서 본 연구에서는 온라인 소비자의 탐색 행동의 다양성과 복잡성을 설명하기 위해 실제 E-commerce 기업의 클릭스트림 데이터를 기반으로 세션 단위의 클러스터링 분석을 진행해 탐색 행동을 유형화하였다. 이를 통해 각 유형별로 상세 단위의 탐색 행동과 구매 여부가 차이가 있음을 확인하였다. 또한 소비자 개인이 여러 방문에 걸친 일련의 탐색 유형에 대한 패턴을 분석하기 위해 순차 패턴 마이닝 기법을 활용하였으며, 같은 기간 내에 제품 구매까지 완료한 소비자와 구매를 진행하지 않은 채 방문만 진행한 소비자들의 탐색패턴에 대한 차이를 확인할 수 있었다. 본 연구의 시사점은 대규모의 클릭스트림 데이터를 활용해 온라인 소비자의 탐색 유형을 분석하고 이에 대한 패턴을 분석해 구매 과정 상의 행동을 데이터 기반으로 설명하였다는 점에 있다. 또한 온라인 소매 기업은 다양한 형태의 탐색 유형에 맞는 마케팅 전략 및 추천을 통해 구매 전환 개선을 시도할 수 있으며, 소비자의 탐색 패턴의 변화를 통해 전략의 효과를 평가할 수 있을 것이다.

Landsat TM 자료를 이용한 지표면 수문인자 변화 분석 (An Analysis on the Changes of the Surface Hydrological Parameters using Landsat TM Data)

  • 채효석;송영수
    • 한국지리정보학회지
    • /
    • 제2권3호
    • /
    • pp.46-59
    • /
    • 1999
  • 원격탐사는 넓은 지역에 대한 수문학적 상태나 변화량을 관측할 수 있는 시 공간적인 수문인자나 변수들에 대한 정보를 제공할 수 있다. 특히, 지표면 알베도, 식생정보 및 지표면 온도 분포등 유역의 수자원을 효율적으로 관리하기 위한 수문 인자들의 공간적인 분포를 파악할 수 있다. 본 논문에서는 수자원의 공간적인 분포를 파악하기 위해 필수적으로 요구되는 지표면 수문인자의 시 공간적인 변화 특성을 분석하였다. 수문인자의 변화 분석을 위해서 1995년도 금강 상류의 보청천 유역에 대해서 획득된 5개의 Landsat TM 자료를 이용하였으며, COST 모델을 이용하여 대기보정을 수행하였다. 연구결과, 토양중에 포함된 수분의 양과 태양고도각의 변화에 따라 알베도가 크게 변화하는 것으로 나타났으며, Landsat TM 자료로부터 추출된 지표면 온도와 기상관측을 통해서 얻어진 대기온도 사이의 차이가 $2.5^{\circ}C$ 내지 $3.86^{\circ}C$로 나타났다.

  • PDF