• 제목/요약/키워드: sigmoid 함수

검색결과 109건 처리시간 0.027초

다층 신경회로망을 위한 자기 구성 알고리즘 (A self-organizing algorithm for multi-layer neural networks)

  • 이종석;김재영;정승범;박철훈
    • 전자공학회논문지CI
    • /
    • 제41권3호
    • /
    • pp.55-65
    • /
    • 2004
  • 신경회로망을 이용하여 주어진 문제를 해결할 때, 문제의 복잡도에 맞는 구조를 찾는 것이 중요하다. 이것은 신경회로망의 복잡도가 학습능력과 일반화 성능에 크게 영향을 주기 때문이다. 그러므로, 문제에 적합한 신경회로망의 구조를 자기 구성적으로 찾는 알고리즘이 유용하다. 본 논문에서는 시그모이드 활성함수를 가지는 전방향 다층 신경회로망에 대하여 주어진 문제에 맞는 구조를 결정하는 알고리즘을 제안한다. 개발된 알고리즘은 구조증가 알고리즘과 연결소거 알고리즘을 이용하여, 주어진 학습 데이터에 대해 가능한 한 작은 구조를 가지며 일반화 성능이 좋은 최적에 가까운 신경회로망을 찾는다. 네 가지 함수 근사화 문제에 적용하여 알고리즘의 성능을 알아본다. 실험 결과에서, 제안한 알고리즘이 기존의 알고리즘 및 고정구조를 갖는 신경회로망과 비교하였을 때 최적 구조에 가까운 신경회로망을 구성하는 것을 확인한다.

GSIS와 인공신경망의 결합에 의한 토지적합성분석에 관한 연구 (A Study of Land Suitability Analysis by Integrating GSIS with Artificial Neural Networks)

  • 양옥진;정영동
    • 한국측량학회지
    • /
    • 제18권2호
    • /
    • pp.179-189
    • /
    • 2000
  • 본 연구는 도시토지이용의 적합성분석을 실시하는데 있어 GSIS와 인공신경망의 유기적인 결합을 시도해 보았다. 인공신경망은 학습이라는 과정을 통해 신경망 노드(node)간의 연결강도를 합리적으로 결정할 수 있는 이점이 있다. 이러한 점에서 공간분석에서 요구되는 인자간의 경중률과 신경망의 연결강도는 대체가 가능하리라 판단된다. 본 연구를 수행하기 위해 두 종류의 신경망을 구성하였다. 1차 신경망은 토지이용별 적합성 분석에 적용했으며, 2차 신경망은 최적의 토지이용패턴을 분석하기 위해 구성하였다 이들 신경망은 C++로 작성된 프로그램에 의해 구현된 최급강하법에 의한 역전파 알고리즘에 의해 학습을 실시하였으며, 활성화 함수는 시그모이드 함수를 사용하였다. 분석결과는 현행 용도지역제에서 주거, 상업, 공업, 녹지에 대한 토지이용 적합도면과 4가지 유형의 토지이용에 대한 대상지역의 최적토지이용패턴을 제시한 도면으로서 Arc/Info의 Grid 형식으로 작성하였다. 또한 토지이용별 적합도면상에 나타난 적합지역과 최적토지이용패턴은 위치적인 면과 공간 구성에 있어 실제의 도시토지이용계획의 이론적인 개념에 매우 합치되는 분포형태를 보였다.

  • PDF

다층 퍼셉트론을 기반으로 한 대청호 수질 예측 모델 최적화 (Optimization Of Water Quality Prediction Model In Daechong Reservoir, Based On Multiple Layer Perceptron)

  • 이한규;김진휘;변서현;박강동;신재기;박용은
    • 한국수자원학회:학술대회논문집
    • /
    • 한국수자원학회 2022년도 학술발표회
    • /
    • pp.43-43
    • /
    • 2022
  • 유해 조류 대발생은 전국 각지의 인공호소나 하천에서 다발적으로 발생하며, 경관을 해치고 수질을 오염시키는 등 수자원에 부정적인 영향을 미친다. 본 연구에서는 인공호소에서 발생하는 유해 조류 대발생을 예측하기 위해 심층학습 기법을 이용하여 예측 모델을 개발하고자 하였다. 대상 지점은 대청호의 추동 지점으로 선정하였다. 대청호는 금강유역 중류에 위치한 댐으로, 약 150만명에 달하는 급수 인구수를 유지 중이기에 유해 남조 대발생 관리가 매우 중요한 장소이다. 학습용 데이터 구축은 대청호의 2011년 1월부터 2019년 12월까지 측정된 수질, 기상, 수문 자료를 입력 자료를 이용하였다. 수질 예측 모델의 구조는 다중 레이어 퍼셉트론(Multiple Layer Perceptron; MLP)으로, 입력과 한 개 이상의 은닉층, 그리고 출력층으로 구성된 인공신경망이다. 본 연구에서는 인공신경망의 은닉층 개수(1~3개)와 각각의 레이어에 적용되는 은닉 노드 개수(11~30개), 활성함수 5종(Linear, sigmoid, hyperbolic tangent, Rectified Linear Unit, Exponential Linear Unit)을 각각 하이퍼파라미터로 정하고, 모델의 성능을 최대로 발휘할 수 있는 조건을 찾고자 하였다. 하이퍼파라미터 최적화 도구는 Tensorflow에서 배포하는 Keras Tuner를 사용하였다. 모델은 총 3000 학습 epoch 가 진행되는 동안 최적의 가중치를 계산하도록 설계하였고, 이 결과를 매 반복마다 저장장치에 기록하였다. 모델 성능의 타당성은 예측과 실측 데이터 간의 상관관계를 R2, NSE, RMSE를 통해 산출하여 검증하였다. 모델 최적화 결과, 적합한 하이퍼파라미터는 최적화 횟수 총 300회에서 256 번째 반복 결과인 은닉층 개수 3개, 은닉 노드 수 각각 25개, 22개, 14개가 가장 적합하였고, 이에 따른 활성함수는 ELU, ReLU, Hyperbolic tangent, Linear 순서대로 사용되었다. 최적화된 하이퍼파라미터를 이용하여 모델 학습 및 검증을 수행한 결과, R2는 학습 0.68, 검증 0.61이었고 NSE는 학습 0.85, 검증 0.81, RMSE는 학습 0.82, 검증 0.92로 나타났다.

  • PDF

SVM을 이용한 3차원 해마의 지능적 형상 분석 (Intelligent Shape Analysis of the 3D Hippocampus Using Support Vector Machines)

  • 김정식;김용국;최수미
    • 한국HCI학회:학술대회논문집
    • /
    • 한국HCI학회 2006년도 학술대회 1부
    • /
    • pp.1387-1392
    • /
    • 2006
  • 본 논문에서는 SVM (Support Vector Machine)을 기반으로 하여 인체의 뇌 하부구조인 해마에 대한 지능적 형상분석 방법을 제공한다. 일반적으로 의료 영상으로부터 해마의 형상 분석을 하기 위해서는 충분한 임상 데이터를 필요로 한다. 하지만 현실적으로 많은 양의 표본들을 얻는 것이 쉽지 않기 때문에 전문가의 지식을 기반으로 한 작업이 수반되어야 한다. 결국 이러한 요소들이 분석 작업을 어렵게 한다. 의학 기술이 복잡해 지면서 최근의 형상 분석 연구는 점차 통계적 모델을 기반으로 진행되고 있다. 본 연구에서는 해마로부터 고해상도의 매개변수형 모델을 만들어 형상 표현으로 이용하고, 집단간 분류 작업에 SVM 알고리즘을 적용하는 지능적 분석 방법을 구현한다. 우선 메쉬 데이터로부터 물리변형모델 기반의 매개변수 모델을 구축하고, PDM (point distribution model) 방법을 적용하여 두 집단을 대표하는 평균 모델을 생성한다. 마지막으로 SVM 기반의 이진 분류기를 구축하여 집단간 분류 작업을 수행한다. 구현한 모델링 방법과 분류기의 성능을 평가하기 위하여 본 연구에서는 네 가지 커널 함수 (linear, radial basis function, polynomial, sigmoid)들을 적용한다. 본 논문에서 제시한 매개변수형 모델은 다양한 형태의 의료 데이터로부터 보편적인 3차원 모델을 생성하고, 또한 모델의 전역적, 국부적인 특징들을 복합적으로 표현할 수 있기 때문에 통계적 형상분석에 적합하다. 그리고 SVM 기반의 분류기는 적은 수의 학습 데이터로부터 정상인 해마 집단과 간질 환자 집단간의 정확한 분류를 가능하게 한다.

  • PDF

점진기능재료(FGM) 판의 휨, 진동 및 좌굴 해석 (Bending, Vibration and Buckling Analysis of Functionally Graded Material Plates)

  • 이원홍;한성천;박원태
    • 한국산학기술학회논문지
    • /
    • 제9권4호
    • /
    • pp.1043-1049
    • /
    • 2008
  • 본 논문에서는 Navier 방법을 이용한 점진기능재료 판의 정적 응답과 고유진동수 그리고 좌굴하중을 연구하였다. S 형상 함수를 이용한 세라믹과 금속의 체적요소의 변화에 따른 점진기능재료 판의 고유치 문제를 연구하였다. 점진기능재료 판의 면내 강성, 휨 강성 및 전단 강성의 수식은 등질 요소보다 복잡한 재료의 성질들로 결합되어 있다. 본 연구의 결과를 검증하기 위해 고전적 이론에 의한 직사각형 판의 결과를 제시하였다. 적층복합 구조 및 S 형상 점진기능재료 구조의 다양한 예제를 제시하였다. 해석결과는 참고문헌의 결고들과 잘 일치함을 알 수 있었다.

잉여수계를 이용한 역전파 신경회로망 구현 (The Implementation of Back Propagation Neural Network using the Residue Number System)

  • 홍봉화;이호선
    • 정보학연구
    • /
    • 제2권2호
    • /
    • pp.145-161
    • /
    • 1999
  • 본 논문에서는 캐리 전파가 없어 고속연산이 가능한 잉여 수 체계를 이용하여 고속으로 동작할 수 있는 역전파 신경회로망을 설계방법을 제안하였다. 설계된 신경회로망은 잉여수계를 이용한 MAC 연산기와 혼합계수 변환을 이용한 시그모이드 함수 연산 부로 구성되며, 설계된 회로는 VHDL로 기술하였고 Compass 툴로 합성하였다. 실험결과, 가장 나쁜 경로일 경우, 약 19nsec의 지연속도를 보였고, 기존의 실수 연산기에 비하여 약 40%정도 하드웨어 크기를 줄일 수 있었다. 본 논문에서 설계한 신경회로망은 실시간 처리를 요하는 병렬분산처리 시스템에 적용될 수 있을 것으로 기대된다.

  • PDF

반자동 필드 모핑에 기반한 2D 가상 컬러 헤어스타일러의 모발 블렌딩 방법 (Hair-Blending Method for 2D Virtual Color Hairstyler Based on Semi-automatic Field Morphing)

  • 곽노윤
    • 한국콘텐츠학회:학술대회논문집
    • /
    • 한국콘텐츠학회 2008년도 춘계 종합학술대회 논문집
    • /
    • pp.3-9
    • /
    • 2008
  • 본 논문은 반자동 필드 모핑에 기반한 2D 가상 컬러 헤어스타일의 모발 블렌딩에 관한 것이다. 제안된 2D 가상 컬러 헤어스타일러는 반자동 필드 모핑을 수행할 시에 고정형 모핑 마스크 대신에 가변형 모핑 마스크를 사용하여 가상 헤어스타일을 생성하고 이렇게 생성된 헤어스타일을 가변 모핑 마스크의 경계 영역에서 시그모이드 함수를 이용한 모발 블렌딩을 수행하는 것이 특징이다. 제안된 방법은 반자동 필드 모핑에 기반한 편리한 사용자 인터페이스를 이용하여 가상 헤어스타일을 생성할 수 있다. 제안된 방법에 따르면, 작업 시간을 단축할 수 있고 비숙련자도 간단한 외부 사용자 입력을 통해 자연스러운 헤어스타일을 생성할 수 있다.

  • PDF

가변 워핑 마스크를 이용한 2D 가상 성형 시스템의 시그모이드 블렌딩 (Sigmoid Blending for 2D Virtual Plastic Surgery System Using Variable Warping Mask)

  • 곽노윤
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2008년도 추계학술발표대회
    • /
    • pp.171-174
    • /
    • 2008
  • 컴퓨터 시뮬레이션을 통한 자연스러운 가상 성형은 컴퓨터 그래픽스와 애니메이션 분야의 오래된 연구 주제이다. 본 논문은 2D 가상 성형 시스템 용도의 가변 워핑 마스크를 이용한 시그모이드 블렌딩 방법을 제안함으로써 가상 성형의 품질 만족도와 편의성 및 실용성을 제고함에 그 목적이 있다. 제안된 2D 가상 성형 시스템은 마우스로 스머지 필터를 조작하여 얼굴 구성 요소의 윤곽 형상을 원하는 형태로 변형할 수 있는 직관적인 사용자 인터페이스를 제공한다. 얼굴 구성 요소의 스머징 전후의 윤곽선을 대상으로 다각형 근사화에 기반한 계층적 제어선 매핑을 통해 획득한 제어선 쌍들을 이용하여 반자동 필드 워핑을 수행함으로써 소스 제어선으로부터 목표 제어선까지 점진적으로 변해가는 다수의 중간 프레임들을 생성한다. 또한 이 반자동 필드 워핑을 수행할 시, 성형 부위의 변형을 따라 단계적으로 모양이 변하는 가변 워핑 마스크를 사용함으로써 변형 부위 이외의 얼굴 구성 요소들에 대해서는 왜곡을 최소화하는 지역적 변형 특성을 제고하고, 이렇게 생성된 성형 부위를 가변 모핑 마스크의 경계 영역에서 시그모이드 함수에 기반한 블렌딩을 수행하는 것이 특징이다. 제안된 2D 가상 성형 시스템은 직관적이고 편리한 사용자 인터페이스를 제공할 수 있기 때문에 시간이 적게 소요되고 작업 피로도가 낮아 실용성이 높다. 특히 짧은 시간 내에 성형의와 고객이 만족하는 직관적인 상담을 가능케 하는 것이 장점이다.

음질향상을 위해 비선형 함수와 사전 음성부재확률을 이용한 최소통계법의 잡음전력편의 보상방법 (Noise-Biased Compensation of Minimum Statistics Method using a Nonlinear Function and A Priori Speech Absence Probability for Speech Enhancement)

  • 이수정;이강성;김순협
    • 한국음향학회지
    • /
    • 제28권1호
    • /
    • pp.77-83
    • /
    • 2009
  • 본 논문에서는 비정상 잡음환경에서 음질향상을 위한 비선형 함수와 사전 음성부재 확률을 이용한 최소 통계치(MS) 방법의 잡음전력편의 보상 방법을 제안한다. 비정상 잡음환경에서 잡음전력추정을 위해 최소 통계치 방법이 잘 알려져 있지만, 예측된 잡음전력 추정 값은 실제 잡음 전력 값보다 하향 편의 되는 특성을 나타낸다. 제안한 방법은 비선형 함수를 적용한 적응보상파라미터와 사전 음성부재 확률 값을 혼용하는 잡음전력편의 보상방법이다. 특히, 적응보상 파라미터는 사후 SNR을 이용한 비 선형함수를 적용하여 잡음수준의 증감에 따라 파라미터 값을 조절한다. 또한, 사전 음성부재확률 값이 1로 수렴할 경우, 적응보상파라미터 값은 각 주파수별로 최대치까지 증가하지만, 확률 값이 0에 가까워지면 반대의 특성을 나타낸다. 제안한 알고리즘의 잡음전력추정 및 음질향상의 성능평가를 위해 다양한 종류의 잡음과 비정상적인 극심한 잡음환경을 설정하여 실험하고, 음질향상을 위해 주파수 차감법과 결합하였다. 알고리즘의 성능은 다양한 잡음환경의 신호 대 잡음비 (SNR)와 Itakura-Saito 음질왜곡 평가법을 이용하여 기존 최소 통계치 (MS)방법에 비해 우수한 결과를 나타냈다.

웨이브렛과 기저 계수를 이용한 X-ray 영상의 대조도 향상기법 (Contrast Enhancement for X-ray Images Based on Combined Enhancement of Scaling and Wavelet Coefficients)

  • 박천주;김도일;장도윤;윤한빈;최보영;김호경;이형구
    • 한국의학물리학회지:의학물리
    • /
    • 제19권3호
    • /
    • pp.150-156
    • /
    • 2008
  • 본 연구에서는 이산 웨이브렛 도메인에서 기저계수와 웨이브렛 계수의 변환을 이용하여 X-ray 이미지의 대조도를 향상시키는 방법을 제안하였다. 기저 함수의 변환은 기존에 나와있는 contrast limited adaptive histogram equalization (CLAHE)와 multi-scale image contrast amplification (MUSICA)와 같은 보편적인 영상의 대조도 향상 기법을 적용하였으며 대조도가 향상된 저해상도 기저 계수의 역변환으로 인한 Blurring 현상을 방지하고 또한 이미지의 선명도를 향상시키기 위하여 웨이브렛 계수에 sigmoid function을 적용하였다. 본 알고리즘에 대한 성능 평가를 위하여 contrast detail mammography(CDMAM) 팬텀의 영상을 획득하여 기존에 사용한 대조도 향상 기법들과 contrast to noise ratio (CNR) 및 line profile에 대한 비교평가를 실시 하였고 그 결과 기존의 대조도 향상기법을 웨이브렛 도메인에서 적용하는 것이 뛰어나다는 것을 알 수 있었다. 본 영상 대조도 향상기법은 영상의 대조도를 증가시키는 동시에 잡음의 증폭을 효율적으로 억제할 수 있다. 따라서 본 연구는 의료 영상뿐 만이 아닌 대조도와 선명도가 중요시되는 여려 분야에 적용될 수 있으리라 기대된다.

  • PDF