Performance Improvement of General Regression Neural Network by Reducing Dimensionality of Independent Variables

독립변수의 차원 감소에 의한 일반회귀 신경망의 성능개선

  • 조용현 (대구가톨릭대학교 컴퓨터정보통신공학부)
  • Published : 2000.12.01

Abstract

본 논문에서는 독립변수들의 차원을 감소시켜 일반회귀 신경망의 성능을 개선하는 방법을 제안하였다. 제안된 방법에서는 적응적 학습 알고리즘의 주요성분분석 기법을 이용하여 독립변수 패턴의 특징을 추출하고 이를 일반회귀 신경망의 학습데이터로 이용하였다. 이는 주요성분분석 기법이 가지는 대용량의 입력 데이터를 통계적으로 독립인 특징들의 집합으로 변환시키는 속성을 살려 학습데이터의 차원을 감소시킴으로서 고차원의 학습데이터에 따른 일반회귀 신경망이 가지는 제약을 해결하기 위함이다. 제안된 기법의 일반회귀 신경망을 3개의 독립변수 패턴을 가진 암모니아 제조공정문제와 10개의 독립변수 패턴을 가진 자동차 연비문제에 각각 적용하여 시뮬레이션한 결과, 기존의 일반회귀 신경망에 의한 결과와 비교할 때 더욱 우수한 학습성능과 회귀성능이 있음을 확인할 수 있었다. 그리고 커널함수의 평활요소 설정 면에서도 우수한 특성이 있음을 확인할 수 있었다.

Keywords

References

  1. SAS 회귀분석 허명희(외 1인)
  2. 회귀분석 : 모형개발과 진단 강명욱(외 3인)
  3. Neural Network : A Comprehensive Foundation S. Haykin
  4. IEEE Trans. on Neural Networks v.2 no.6 A General Regression Neural Network D.F. Specht
  5. AI Expert v.5 GRNN and Bear It M. Caudill
  6. Advanced Algorithms for Neural Networks : A C++ Sourcebook T. Masters
  7. Applied Spectroscopy v.49 no.6 Improved Calibration for Inductively Coupled Plasma-Atomic Emission Spectrometry Using Generalized Regssion Neural Networks M. Catasus;W. Branagh;E.D. Salin
  8. Elsevier, Chemometrics and Intelligent Laboratory Systems v.48 A Generalized Regression Neural Network and Its Application for Leaf Wetness Prediction to Forecast Plant Disease Y. Chtioui;S. Panigrahi;L. Francl
  9. Neural Networks for Optimization and Signal Processing A. Cichock;R. Unbehaun
  10. International. Joint Conference on Neural Networks v.1 Adaptive Network for Optmal Linear Feature Extraction P. Foldiak
  11. Principal Component Neural Networks : Theory and Application, Adaptive and Learning Systems for Signal Processing, Communications, and Control K.I. Diamantaras;S.Y. Kung