• 제목/요약/키워드: image deblurring

검색결과 61건 처리시간 0.021초

MULTI-APERTURE IMAGE PROCESSING USING DEEP LEARNING

  • GEONHO HWANG;CHANG HOON SONG;TAE KYUNG LEE;HOJUN NA;MYUNGJOO KANG
    • Journal of the Korean Society for Industrial and Applied Mathematics
    • /
    • 제27권1호
    • /
    • pp.56-74
    • /
    • 2023
  • In order to obtain practical and high-quality satellite images containing high-frequency components, a large aperture optical system is required, which has a limitation in that it greatly increases the payload weight. As an attempt to overcome the problem, many multi-aperture optical systems have been proposed, but in many cases, these optical systems do not include high-frequency components in all directions, and making such an high-quality image is an ill-posed problem. In this paper, we use deep learning to overcome the limitation. A deep learning model receives low-quality images as input, estimates the Point Spread Function, PSF, and combines them to output a single high-quality image. We model images obtained from three rectangular apertures arranged in a regular polygon shape. We also propose the Modulation Transfer Function Loss, MTF Loss, which can capture the high-frequency components of the images. We present qualitative and quantitative results obtained through experiments.

영상 해상도 개선을 위한 다중 부족분 추정 방법 (Multiple Shortfall Estimation Method for Image Resolution Enhancement)

  • 김원희;김종남;정신일
    • 전자공학회논문지
    • /
    • 제51권3호
    • /
    • pp.105-111
    • /
    • 2014
  • 영상 해상도 개선은 저해상도 획득 영상의 해상도를 개선하여 고해상도 영상을 생성하는 기술이다. 영상 해상도 개선을 위해서는 저해상도 획득 영상의 열화 과정에서 발생하는 손실된 화소 정보를 정확하게 추정하는 것이 중요하다. 따라서 본 논문에서는 영상 해상도 개선을 위한 다중 부족분 추정 방법을 제안한다. 제안하는 방법은 획득 영상의 부영상 집합에 알려진 열화 및 복원 과정을 수행하여 서로 다른 형태의 다중 부족분을 추정하고, 추정된 부족분과 획득 영상의 보간 영상의 결합을 통해서 결과 영상을 생성하고, 디블러링을 수행하여 최종 복원 영상을 생성한다. 객관적 화질 측정 지표인 PSNR, SSIM, FSIM으로 비교한 결과 제안한 방법이 보간만을 사용하는 방법들보다 높은 값을 가지는 것을 확인하였다. 또한 결과 영상의 시각적 비교 결과 주관적 관점의 화질도 가장 뛰어난 것을 알 수 있었고, 보간만을 사용하는 방법들보다 빠른 계산시간을 가지는 것을 확인할 수 있었다. 제안하는 방법은 영상 해상도 개선을 위한 응용 환경에서 유용하게 사용될 수 있다.

잡음이 있고 흐릿한 영상의 블라인드 디컨벌루션을 위한 유전 프로그래밍 기법 (A Genetic Programming Approach to Blind Deconvolution of Noisy Blurred Images)

  • ;추연호;최영규
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제3권1호
    • /
    • pp.43-48
    • /
    • 2014
  • 영상의 디컨벌루션은 보통 감시 시스템에서 모션 블러 (motion blur)나 초점이 맞지 않아 발생하는 블러 (out-of-focus blur) 문제를 줄이기 위해 전처리 과정에서 사용된다. 본 논문에서는 유전 프로그래밍 (Genetic Programming, GP)에 기반한 새로운 블라인드 영상 디컨벌루션 필터링 방법을 제안한다. GP 진화 과정을 통해 영상 복원을 위한 수학적 표현이 만들어지는데, 이것은 블러 영상의 특징들 사이의 관계를 최적으로 조합하여 원래 화소 값을 복원할 수 있는 추정자 함수가 된다. 이를 위해, 먼저 각 화소의 작은 이웃으로부터 특징 벡터를 만들고 추정자 함수를 학습시키는데, 이러한 GP 진화 과정을 통해 지정한 적합성 기준에 따라 유용한 정보들이 자동으로 조합된다. 개발된 함수는 훼손된 영상의 각 화소에 적용하여 원래의 화소 값을 복원하게 된다. 개발된 함수는 다양한 방법으로 훼손된 영상에 적용하여 실험하였는데, 실험 결과 제안된 방법이 기존 알고리즘에 비해 좋은 결과를 나타내는 것을 알 수 있었다.

에지 위치 추정을 통한 이진 파형의 복원 (Restoration of a Bi-level Waveform by Estimation of Edge Locations)

  • 김정태
    • 대한전기학회논문지:시스템및제어부문D
    • /
    • 제55권7호
    • /
    • pp.327-331
    • /
    • 2006
  • We have proposed an image restoration method for a bi-level waveforms whose number of edges is known to us. Based on the information, we parametrize a bi-level waveform using the locations of edges and restore the waveform by estimating the parameter. We estimated the locations by maximizing the correlation coefficients between the hi-level waveform and the measured waveform. In experiments using two dimensional barcode images of the PDF417 specification, the proposed method showed better performance than conventional methods in the sense that the proposed method was able to decode barcode images that were not decoded by the conventional methods.

회귀방법에 의한 초음파 진단기의 측면해상도 개선에 관한 연구 (A recursive scheme for improvement of the lateral resolution in B-scan ultrasonography)

  • 김선일;민병구;고명삼
    • 전기의세계
    • /
    • 제31권3호
    • /
    • pp.204-208
    • /
    • 1982
  • The objective of this paper is to present a digital method for improving the lateral resolution of the B-scan images in the medical applications of ultrasound. The method is based upon a mathematical model of the lateral blurring caused by the finite beam width of the transducers. This model provides a simple method of applying a recursive scheme for image restoration with fast computation time. The point spread function (P.S.F.) can be measured by the reflective signals after scanning the small pins located along the depth of interest. From the measured P.S.F., one can compute the coefficient matrices of the inverse discrete-time dynamic state variable equation of the blurring process. Then, a recursive scheme for deblurring is applied to the recorded B-scan to improve the lateral resolution. One major advantage of the present recursive scheme over the transform method is in its applicability for the space-variant imaging, such as in the case of the rotational movement of transducer.

  • PDF

인터레이스드 스캔방식 디지털 카메라의 떨림에 의한 영상블러 제거 (Deblurring of the Blurred Image Caused by the Vibration of the Interlaced Scan Type Digital Camera)

  • 전재춘
    • 한국측량학회지
    • /
    • 제23권2호
    • /
    • pp.165-175
    • /
    • 2005
  • 인터레이스 방식의 카메라가로부터 사진을 촬영시, 카메라가 움직인다면, 짝수와 홀수라인의 두 영상의 불인치인 블러가 발생한다. 본 논문은 인터레이스 방식의 카메라의 떨림에 의한 짝수와 홀수라인 영상간의 불일치를 제거하는 알고리즘을 제안하였다. 블러된 원 영상을 짝수라인과 홀수라인 영상으로 분리한다. 분리된 각 영상을 보간법을 이용하여 원 영상 크기의 영상을 생성한다. 만약 보간된 영상간의 큰 차이가 발생하면, 사진 촬영시 카메라가 움직인 경우이다 이 경우에는, 특징점 추출 및 정합, sub-pixel정합, 오류 정합된 광류제거, 영상모자이크를 통하여 불리된 두 영상으로부터 블러가 제거된 영상을 취득하는 것이다. 본 논문은 제안한 알고리즘이 카메라의 다양한 움직임의 영향으로 블러된 영상에서 선명한 영상을 생성 할 수 있음을 보였다.

Stack-Attention을 이용한 흐릿한 영상 강화 기법 (Blurred Image Enhancement Techniques Using Stack-Attention)

  • 박채림;이광일;조석제
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제12권2호
    • /
    • pp.83-90
    • /
    • 2023
  • 컴퓨터 비전에서 흐릿한 영상은 영상 인식률을 저하시키는 중요한 요인이다. 이것은 주로 카메라가 불안정하게 초점을 맞추지 못하거나, 노출시간동안 장면의 물체가 빠르게 움직일 때 발생한다. 흐릿한 영상은 시각적 품질을 크게 저하시켜 가시성을 약화시키며, 이러한 현상은 디지털카메라의 기술이 지속적으로 발전하고 있음에도 불구하고 빈번하게 일어난다. 본 논문에서는 합성곱 신경망으로 설계된 심층 멀티 패치 계층 네트워크(Deep multi patch hierarchical network)를 기반으로 수정된 빌딩 모듈을 대체하여 입력 영상의 디테일을 잡고 주의 집중 기법을 도입하여 흐릿한 영상 속 물체에 대한 초점을 다방면으로 맞추어 영상을 강화한다. 이것은 서로 다른 스케일에서 각각의 가중치를 측정 및 부여하여 흐림의 변화를 차별적으로 처리하고 영상의 거친 수준에서 미세한 수준까지 순차적으로 복원하여 글로벌한 영역과 로컬 영역 모두 조정한다. 이러한 과정을 통해 저하된 화질을 복구하고 효율적인 객체 인식 및 특징을 추출하며 색 항상성을 보완하는 우수한 결과를 보여준다.

Image deblurring via adaptive proximal conjugate gradient method

  • Pan, Han;Jing, Zhongliang;Li, Minzhe;Dong, Peng
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제9권11호
    • /
    • pp.4604-4622
    • /
    • 2015
  • It is not easy to reconstruct the geometrical characteristics of the distorted images captured by the devices. One of the most popular optimization methods is fast iterative shrinkage/ thresholding algorithm. In this paper, to deal with its approximation error and the turbulence of the decrease process, an adaptive proximal conjugate gradient (APCG) framework is proposed. It contains three stages. At first stage, a series of adaptive penalty matrices are generated iterate-to-iterate. Second, to trade off the reconstruction accuracy and the computational complexity of the resulting sub-problem, a practical solution is presented, which is characterized by solving the variable ellipsoidal-norm based sub-problem through exploiting the structure of the problem. Third, a correction step is introduced to improve the estimated accuracy. The numerical experiments of the proposed algorithm, in comparison to the favorable state-of-the-art methods, demonstrate the advantages of the proposed method and its potential.

고해상도 범색 영상을 위한 다중 단계 영상 복원 (Multi-stage Image Restoration for High Resolution Panchromatic Imagery)

  • 이상훈
    • 대한원격탐사학회지
    • /
    • 제32권6호
    • /
    • pp.551-566
    • /
    • 2016
  • 위성 원격 탐사에서는 센서 운영 환경으로 인하여 영상을 수집하는 동안 영상의 질 저하가 일어나며 이러한 영상의 질 저하는 관측된 자료로부터 유용한 정보를 확인하거나 추출하는 데 악 영향을 미치는 번짐 현상(blurring)과 잡음 (noise)을 야기시킨다. 특히 이러한 질 저하는 도시 지역과 같은 조밀한 구조를 가지는 scene으로부터 관측된 영상 자료의 분석에 더욱 영향을 끼친다. 본 연구는 고해상도 범색 영상 자료의 질 저하 현상을 개선시켜 영상이 포함하고 있는 복잡한 구조에 대한 자세한 분석의 정확성을 제고하기 위한 다중 단계 영상 복원 과정을 제안한다. 본 연구는 질 저하 현상을 모형화 하기 위해 Gaussian 가산 잡음과 Markov random field로 정의되는 공간적 연결성, 중심 화소와 이웃 화소 간의 거리에 비례하는 번짐을 가정하였다. 본 연구는 잡음 완화와 번짐 제거를 위해 Point-Jacobian Iteration Maximum A Posteriori (PJI-MAP) 추정 법을 제안한다. 그리고 화소 연결 후 지역 확장을 통한 영상 분할을 사용하였다. 본 연구는 지역 확장을 위하여 동질성과 대조성을 동시에 고려하는 비유사 계수를 제안하고 있다. 본 연구에서는 모의 자료 실험을 통하여 정량적 평가를 실시하였으며 2 개의 고해상도 범색 영상 자료에 대해 적용하여 복원의 효과에 대해 실험하였다. 사용된 원격 탐사 자료는 1 m급의 미국 LA지역에서 수집된 Dubaisat -2 자료와 0.7 m급의 한반도 대전 지역에서 수집된 KOMPSAT3 자료이다. 실험 결과는 제안된 다중 단계 복원 과정이 고해상 자료의 복잡한 구조의 자세한 분석에서 정확성 향상에 기여할 수 있다는 것을 보여주고 있다.

자이로 센서와 노출시간이 다른 두 장의 영상을 이용한 비균일 디블러 기법 (Non-uniform Deblur Algorithm using Gyro Sensor and Different Exposure Image Pair)

  • 류호형;송병철
    • 방송공학회논문지
    • /
    • 제21권2호
    • /
    • pp.200-209
    • /
    • 2016
  • 본 논문에서는 촬영 시 발생하는 블러 현상을 효율적으로 제거하기 위해 IMU 센서와 노출시간이 길고, 짧은 두 영상을 이용한 비균일 디블러 알고리즘을 제안한다. 종래 센서 정보를 이용한 블러 커널 추정 기법들은 센서 정보의 한계로 인해 성능이 만족스럽지 못하다. 그 한계를 극복하기 위해 우리는 노출시간이 서로 다른 여러 영상들을 이용한 커널 개선 과정을 제안하여, 추정된 커널의 정확도를 향상시킨다. 또한 종래 비균일 디블러 기법들이 블러 커널이 커질수록 심한 화질 열화를 겪는 문제점을 해결하기 위해 본 논문은 호모그래피 기반 잔여 디콘볼루션을 제안하여 디콘볼루션 과정에서 발생하는 링형 현상과 같은 화질 열화를 최소화한다. 실험 결과를 통해 제안 알고리즘의 화질이 기존 기법에 비해 주관적/객관적으로 현저하게 우수함을 볼 수 있다.