• 제목/요약/키워드: 신경 근사치

검색결과 17건 처리시간 0.022초

신경망 초기치 탐색방법 비교연구

  • 최대우;구자용;박헌진
    • 한국통계학회:학술대회논문집
    • /
    • 한국통계학회 2000년도 추계학술발표회 논문집
    • /
    • pp.219-225
    • /
    • 2000
  • 데이터 마이닝 분야에서 널리 사용되고 있는 신경망은 최근 많은 통계인들의 관심을 끌고 있다. 그러나 범용 근사성(universal approximator)이라는 성질에도 불구하고 초기치에 따라 적합 결과가 크게 좌우되는 단점이 있다. 본 논문에서는 붓스트랩 표본을 통해 초기치를 발견하는 bumping 기법이 신경망 분야에서 사용되고 있는 무작위 탐색법 보다 더 정확하고 안정적인 초기치를 제공하여 주는가를 살펴 보았다.

  • PDF

함수근사를 위한 로버스트 역전파 알고리즘 (A Robust Propagation Algorithm for Function Approximation)

  • 김상민;황창하
    • 한국정보처리학회논문지
    • /
    • 제4권3호
    • /
    • pp.747-753
    • /
    • 1997
  • 함수근사는 과학과 공학분야에서 광범위하게 응용된다. 다층 전방향 신경망은 비선형 함수근사를 위한 도구로서 제안되어져 왔으며, 다층 신경망을 학습시키기 위한 학습 알고리즘으로 역전파 알고리즘이 널리 이용되어져 왔다. 그러나 이상치(outlier) 를 포함한 학습자료가 존재할 때에는 학습되는 함수는 존재하는 모든 자료 사이를 보간 하므로 이상치가 있는 자료의 위치까지도 보간 하여, 원하지 않은 구조를 파악하게 된다. 따라서 이상치의 영향을 최소화 시키기 위해 본 논문에서는 로버스트 에너지 함수를 유도하여 개량된 로버스트 역전파 알고리즘을 제안한다.

  • PDF

신경망 모형의 초기가중치 최적화 방법에 관한 연구

  • 조용준;이용구
    • 한국통계학회:학술대회논문집
    • /
    • 한국통계학회 2003년도 춘계 학술발표회 논문집
    • /
    • pp.19-24
    • /
    • 2003
  • 신경망은 적용 다양성과 제약조건의 최소성, 강력한 예측성, 범용성, 근사성 등 많은 장점을 지니고 있으나 초기 가중치의 할당에 따라 모델 생성의 Performance와 예측의 결과가 달라지게 되는 단점을 지니고 있다. 이런 신경망의 초기 가중치에 따른 단점을 보안하기 위해 통계적 알고리즘의 접목을 통해 Hybrid된 신경망 보완 알고리즘을 제시하고자 하였다. 논문을 위한 기본 가정으로 신경망의 가장 기본인 SLP 알고리즘을 바탕으로 활성함수에 가장 일반적으로 사용되는 Sigmoid 활성함수를 이용하였을 때, 초기 가중치로 기존의 임의 난수 생성 방식이 아닌 통계적 로지스틱 회귀분석의 계수값(mle)을 제시하여 이를 초기치로 사용한 경우와 그렇지 않은 경우의 예측 정확성과 수렴의 Performance정도를 비교하여 가장 효과적인 초기치 방법을 제시하고자 하였다.

  • PDF

신경망을 이용한 비선형 잡음계의 제어신호 복원 (Control Signal Reconstruction of Non-Linear Systems with Noise Using Neural Networks)

  • 안영환
    • 소음진동
    • /
    • 제9권4호
    • /
    • pp.849-855
    • /
    • 1999
  • 신경망은 비선형 동적 시스템의 식별 및 제어에 대한 기존 방법의 매력적인 대체방법으로서 가능성을 보여주었다. 이 논문의 목적은 신경망의 응용, 즉 미지의 비선형 시스템의 입력 신호에 대한 신경 복원을 제시하고 있다. 이 기본 방법론은 여러 공학분야에서 실질적인 용도로 쓰일 수 있으며, 분명히, 이 제시된 기법의 응용은 시스템 입력을 측정하는 완전한 감지기망이 가능하지 않는 물리적 시스템에 중요할 수 있다. 또한 이 복원기법의 응용은 시스템이 정상적으로 작동할 시에는 중요하지 않지만, 성능저하 또는 시스템 중단을 야기하는 고장 혹은 시스템 이상을 일으킬 시에는 중요한 역할을 할 수 있다. 이 논문에서는 미지의 비선형 동적 시스템에 이 방법을 적용한 결과를 제시하고 있으며, 백색/채색 시스템 잡음에 대한 이 기법의 강인성이 평가되었다.

  • PDF

신경망을 이용한 칼라 입력장치의 칼라 보정 (Color correction of tile color input device using the Neural Network)

  • 엄경배;안창선
    • 정보교육학회논문지
    • /
    • 제3권1호
    • /
    • pp.134-142
    • /
    • 1999
  • 칼라 입출력 장비의 가격이 점차로 저렴해짐에 따라 영상으로부터 물체의 형상뿐만아니라 칼라까지도 인식하여 보다 정밀한 정보를 이용하고자하는 요구가 증대되고 있다. 이를 위해서는 칼라 입출력 시스템의 정확한 칼라 표현 및 재현을 위해 칼라 보정에 관한 연구가 선행되어져야한다. 따라서, 본 논문에서는 칼라 입출력장비 중 칼라 스캐너의 칼라 보정에 관하여 연구하였다. 칼라 스캐너의 특성은 gray-balancing과 칼라 변환의 두과정을 나뉜다. 칼라 변환으로부터 gray-balancing을 분리함으로써 칼라 변환을 위해 유도되어진 변환 행렬은 모든 형태의 스캐너에 적용될 수 있어 스캐너 특성의 portability를 가능하게 한다. 또한, gray-balance된 RGB값을 얻기위한 선의 적합을 위해 최소자승법을 이용하였고, 칼라 변환을 위해 gray-balance된 RGB로부터 CIE-XYZ로 비선형적 좌표 변환 문제를 저장공간이 많이 필요하지 않고, 빠른 변환결과를 제공할 수 있는 장점이 있는 신경망 기법을 이용하여 해결 하였다. 삼차원 3자극치 공간에서 신경망 출력은 원하는 출력의 근사치를 제공하는 것을 알 수 있었다. 제안된 칼라 보정 방법은 모듈별로 분해되었기 때문에 스캐너 특성의 portability를 가능하게 하여 모든 형태의 스캐너 보정에 이용될 수 있으리라 기대된다.

  • PDF

신경회로망을 이용한 수량화 문제의 최적화 응용기법 연구 (A Study on Optimization Approach for the Quantification Analysis Problem Using Neural Networks)

  • 이동명
    • 한국정보통신학회논문지
    • /
    • 제10권1호
    • /
    • pp.206-211
    • /
    • 2006
  • 수량화 문제는 n개의 성질을 갖는 m개의 개체들을 각 개체들의 유사도(similarity)를 가장 잘 반영하도록 p차원의 공간 상에 대응시키는 문제이다. 본 논문에서는 물리학에서의 열평형 상태(thermal equilibrium state)에서 분자시스템의 해석적 근사 움직임에 대한 이론인 평균장 이론(mean field theory)에 의한 분자의 평균 변화량 계산과 어닐링(annealing) 방법에 의한 평균장 신경회로망(mean field neural network)을 수량화 문제(quantification analysis problem)의 해결에 적용하였다. 그 결과, 제안한 최적화 응용기법 이 기존의 고유치 분석방법(eigen value analysis)에 비해 비용측면에서 좀 더 최적에 가까운 해답을 찾아낼 수 있음을 확인하였다.

Kurtosis를 이용한 독립성분의 군집화에 관한 연구 (A Study on Clustering of Independent Components by Using Kurtosis)

  • 조용현;김아람
    • 한국멀티미디어학회:학술대회논문집
    • /
    • 한국멀티미디어학회 2003년도 추계학술발표대회(하)
    • /
    • pp.569-572
    • /
    • 2003
  • 본 연구에서는 뉴우턴법에 기초한 고정점 알고리즘의 신경망 기반 독립성분분석에 kurtosis를 추가한 독립성분의 군집화를 제안하였다. 여기서 뉴우턴법의 고정점 알고리즘은 엔트로피에 기초한 목적 함수의 근을 구하는 근사화 방법으로 빠른 성분분석을 위함이고, kurtosis는 독립성분의 추출순서를 고려하지 않는 속성을 개선하기 위함이다. 제안된 기법을 256$\times$256 픽셀의 8개 혼합영상의 분리에 적용한 결과, 제안된 방법은 기존의 독립성분분석에서 분석순서를 고려치 않는 제약을 효과적으로 해결 할 수 있음을 확인하였다.

  • PDF

전력설비시스템을 위한 퍼지 평가함수와 신경회로망을 사용한 PID제어기의 자동동조 (An Auto-tuning of PID Controller using Fuzzy Performance Measure and Neural Network for Equipment System)

  • 이수흠;박현태;이내일
    • 조명전기설비학회논문지
    • /
    • 제13권2호
    • /
    • pp.63-70
    • /
    • 1999
  • 본 논문은 여러 설비시스템의 프로세스 제어에 사용되는 PID제어기의 최적 자동동조에 관한 새로운 방법을 제안하고자 한다. 이 방법은 먼저. 제어대상의 계단응답으로부터 모델링 된 1차 지연계를 Pad 근사화하고, Ziefler-Nichols의 한계감도법으로 초기값을 정한 후, 최대 오버슈트, 감쇠비, 상승시간, 정정시간에 대한 퍼지 평가함수를 초대로 하는 최적화되 PID 계수를 목표치로 하여 신경회로망의 역전파 알고리즘을 통해 충분히 반복, 학습시켜 새로운 K, L, T값을 입력하였을 때 근사적으로 최적화된 PID 계수를 구함으로써 퍼지추론에 의한 제어 규칙이 불필요하여 자동 동조시간이 짧다는 장점을 가지고 있다.

  • PDF

문자인식을 위한 로버스트 역전파 알고리즘 (A Robust Backpropagation Algorithm and It's Application)

  • 오광식;김상민;이동로
    • Journal of the Korean Data and Information Science Society
    • /
    • 제8권2호
    • /
    • pp.163-171
    • /
    • 1997
  • 공학 분야에서 신경망에 대한 관심은 신호처리, 로보틱스, 컨트롤, 문자인식, 패턴인식 그리고 컴퓨터 그래픽 분야등에서 연구되고 있으며, 이들은 함수근사응용과 밀접한 관련이있다. 통계학 분야에서는 패턴인식의 판별분석, 주성분분석, 회귀분석 그리고 군집분석을 위한 신경망등에 대한 연구가 활발히 이루어지고 있다. 문자인식을 위한 다층 신경망을 학습시키기 위해 역전파 알고리즘이 널리 사용되고 있으나 이 알고리즘은 긴 훈련기간, 극소점 문제, 이상치(outlier)에 민감하다는 단점을 지니고 있다. 이상치에 민감한 일반적인 역전파 알고리즘의 단점을 극복하기 위해 이상치에 민감하지 않은 로버스트 알고리즘의 필요성이 대두되었다. 본 논문에서는 통계물리에서 자주 사용하는 방법을 이용하여 제안한 로버스트 역전파 알고리즘을 문자인식에 적용하여 일반적인 역전파 알고리즘의 문자인식 성능과 비교하였다.

  • PDF

로봇 시스템의 신경망 포화 및 퍼지 데드존 보상 (NN Saturation and FL Deadzone Compensation of Robot Systems)

  • 장준오
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 2008년도 학술대회 논문집 정보 및 제어부문
    • /
    • pp.187-192
    • /
    • 2008
  • 로봇 시스템의 신경망 포화 및 퍼지 데드존 보상기를 제안한다. 퍼지논리 함수의 분류특성과 신경회로망의 함수 근사화 능력은 포화와 데드존에 의해 유발되는 오자를 제거하기 위한 보상기 설계를 가능케 한다. 포화 및 데드존 보상이 적응적이고 추적오차와 파라미터 추정 치가 유계가 되는 신경망 가중치와 퍼지논리 파라미터 동조알리리듬과 안정도 증명을 제시한다. 신경망 포화 및 퍼지 데드존 보상기를 모의실험으로 포화 및 데드존의 해로운 영향을 줄이는 효과를 보여 준다.

  • PDF