Frequency Mudularized Deinterlacing Using Neural Network

신경회로망을 이용한 주파수 모듈화된 deinterlacing

  • 우동헌 (부산대학교 전자공학과 지능정보처리 연구실) ;
  • 엄일규 (밀양대학교 정보통신공학과) ;
  • 김유신 (부산대학교 컴퓨터 및 정보통신연구소)
  • Published : 2003.12.01

Abstract

Generally images are classified into two regions: edge and flat region. While low frequency components are popular in the flat region, high frequency components are quite important in the edge region. Therefore, deinterlacing algorithm that considers the characteristic of each region can be more efficient. In this paper, an image is divided into edge region and flat region by the local variance. And then, for each region, frequency modularized neural network is assigned. Using this structure, each modularized neural network can learn only its region intensively and avoid the complexity of learning caused by the data of different region. Using the local AC data for the input of neural network can prevent the degradation of the performance of teaming due to the average intensity values of image that disturbs the effective learning. The proposed method shows the improved performance compared with previous algorithms in the simulation.

영상은 일반적으로 에지 영역과 평탄 영역으로 나누어 질 수 있다. 평탄 영역은 대부분 저주파 성분으로 이루어져 있지만, 에지 영역에서는 고주파 성분이 주가 된다. 따라서, 각 영역에 따른 특성을 고려한 deinterlacing 방법이 효율적이라고 할 수 있다. 본 논문에서는 국부 영역의 분산을 사용하여 영상을 에지 영역과 평탄 영역으로 분리하고 분리된 에지 영역과 평탄 영역에 대하여 모듈화된 신경 회로망을 사용한 deinterlacing 방법을 제안한다. 제안 방법에서는 모듈화된 구조로 인해 각 영역의 신경회로망이 유사한 데이터들만을 집중적으로 학습할 수 있고 서로 다른 영역의 데이터들로 인한 학습방해가 적은 장점이 있다. 또한 신경 회로망의 입력으로 국부 평균을 제거한 값을 사용함으로써 화소의 국부 평균 밝기값의 변화로 인한 학습 성능 저하를 방지할 수 있다. 모의 실험에서 제안된 알고리즘은 기존 알고리즘들보다 개선된 성능을 보였다.

Keywords

References

  1. Nathalie Plaziac 'Image interpolation using neural networks' , IEEE trans. image processing, Vol. 8, No. 11, pp. 1647-1651. Nov. 1999 https://doi.org/10.1109/83.799893
  2. Y. Y. Jung et. al. 'An effective de-interlacing technique using motion compensated interpolation' IEEE trans. comsumer electronics. Vol. 46, No. 3, pp. 460-466, Aug. 2000 https://doi.org/10.1109/30.883394
  3. B. Martins. and S. Forchhammer, 'A unified approach to restoration. deinterlacing and resolution enhancement in decoding MPEG-2 video' . IEEE trans. circuit and systems for video technology. Vol. 12. No. 9. pp. 803-811. Sep. 2002 https://doi.org/10.1109/TCSVT.2002.803227
  4. G. D. Haan, and E. B. Bellers. 'Deinterlacing - an Overview' , In Proc. IEEE. Vol. 86, No. 9. pp. 1839-1857. Sep. 1998 https://doi.org/10.1109/5.705528
  5. H. Y. Lee. et. al. 'Adaptive scan rate up-conversion system based on human visual characteristics' . IEEE trans. consumer electronics. Vol. 46. No. 4 ,pp. 999-1006, Nov. 2000 https://doi.org/10.1109/30.920453
  6. J. M. Zurada. Introduction to artificial neural system. PWS Publishing Co.. 1995
  7. ISO/IEC/JTCl/WGl1/MPEG93/143
  8. A. V. Oppenheim. R.W. Schafer Discrete-time signal processing. Prentice Hall. 1989
  9. S. W. Lee 'Off-line recognition of totally unconstrained handwritten numerals using multilayer cluster neural network ' IEEE Transactions on Pattern Analvsis and Machine Intelligence, vol 18. pp.648-652, June 1996 https://doi.org/10.1109/34.506416
  10. Dong-Hun Woo, Charm-Han Ko Hyun-Min Kang. Yoo-Shin Kim Hyung-Soon Kim, 'Narrowband to Wideband Conversion of Speech Using Modularized Neural Network '7th International symposium Artificial Life and Robotics. Vol.2. pp. 622-625. January.18.2002, Beppu, Oita, JAPAN