• 제목/요약/키워드: Correspondence Problem

검색결과 160건 처리시간 0.025초

Compression Artifact Reduction for 360-degree Images using Reference-based Deformable Convolutional Neural Network

  • Kim, Hee-Jae;Kang, Je-Won;Lee, Byung-Uk
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2021년도 추계학술대회
    • /
    • pp.41-44
    • /
    • 2021
  • In this paper, we propose an efficient reference-based compression artifact reduction network for 360-degree images in an equi-rectangular projection (ERP) domain. In our insight, conventional image restoration methods cannot be applied straightforwardly to 360-degree images due to the spherical distortion. To address this problem, we propose an adaptive disparity estimator using a deformable convolution to exploit correlation among 360-degree images. With the help of the proposed convolution, the disparity estimator establishes the spatial correspondence successfully between the ERPs and extract matched textures to be used for image restoration. The experimental results demonstrate that the proposed algorithm provides reliable high-quality textures from the reference and improves the quality of the restored image as compared to the state-of-the-art single image restoration methods.

  • PDF

Deep Reference-based Dynamic Scene Deblurring

  • Cunzhe Liu;Zhen Hua;Jinjiang Li
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제18권3호
    • /
    • pp.653-669
    • /
    • 2024
  • Dynamic scene deblurring is a complex computer vision problem owing to its difficulty to model mathematically. In this paper, we present a novel approach for image deblurring with the help of the sharp reference image, which utilizes the reference image for high-quality and high-frequency detail results. To better utilize the clear reference image, we develop an encoder-decoder network and two novel modules are designed to guide the network for better image restoration. The proposed Reference Extraction and Aggregation Module can effectively establish the correspondence between blurry image and reference image and explore the most relevant features for better blur removal and the proposed Spatial Feature Fusion Module enables the encoder to perceive blur information at different spatial scales. In the final, the multi-scale feature maps from the encoder and cascaded Reference Extraction and Aggregation Modules are integrated into the decoder for a global fusion and representation. Extensive quantitative and qualitative experimental results from the different benchmarks show the effectiveness of our proposed method.

상의 대응 문제 해결에 미치는 밝기 대비의 영향 (The effect of brightness contrast on resolving the correspondence problem)

  • 감기택;정찬섭
    • 인지과학
    • /
    • 제12권4호
    • /
    • pp.49-56
    • /
    • 2001
  • 입체시 계산 모형들은 국지적으로 대응 가능한 여러 대상들이 있는 경우 가설적인 부등 탐지기들간의 상호 작용을 통해 대응될 대상을 결정한다. 이 연구에서는 인간의 양안시 기제도 입체시 모형들의 가정과 유사하게 부등 탐지기들의 활성화 수준에 따라 대응될 대상을 선택하는 지를 알아보기 위해서 깊이가 다른 두 표면을 가지는 무선점 패턴을 입체 그림으로 사용하였다. 응시 표면과 같은 깊이에 놓여 있는 표면을 구성하는 점들은 무선적으로 선택되었으며(원 무선 패턴) 이 표면보다 앞에 놓여있는 표면을 구성할 점들은 원 무선 패턴의 각 점들과 다음과 같은 방식으로 짝지어졌다. 원 무선 패턴을 구성하는 점들의 위치를 발견하여 왼쪽 입체 그림에서는 무선 점들의 왼쪽 3분에 오른쪽 입체 그림에서는 무선 점들의 오른쪽 3분에 위치하도록 하여 6 분의 깊이에 해당하는 또 다른 표면을 만들었다. 원 무선점 패턴의 자기를 고정시킨 채 새로운 패턴의 밝기를 변화시키면 가설적인 탐지기들의 상대적인 활성화 수준이 서로 달라질 것을 추정할 수 있다. 상대적인 활성화 수준에 따라 대응될 대상이 변화되는 지를 알아보기 위해서 모든 점들의 위치는 고정시킨 채 두 표면을 구성하는 점들간의 상대적인 밝기를 변화시켜가면서 각 밝기 수준에서 두 표면의 깊이를 측정하였다. 쌍을 이루는 점들간의 밝기 차가 30% 이내인 조건에서는 3 분의 부등에 해당되는 하나의 표면이 지각되었지만, 두 점의 밝기가 타이가 날수록 이 표면 이외의 다른 표면과 더불어 모두 두개의 표면이 지각되었다. 특히 새로운 표면의 깊이는 무선점 패턴을 구성하는 점들과 추가된 점들의 상대적 밝기에 따라 달라겠다. 추가된 점들이 밝은 조건에서는 이 점들의 부등에 해당되는 깊이를 갖는 표면이 원 무선점 패턴이 밝은 조건에서는 무선점 패턴의 부등에 해당되는 깊이를 가진 표면이 추가적으로 지각되었다. 이러한 결과는 보다 활성화 된 탐지기들이 약한 탐지기들을 억제하여 있음을 시사한다.

  • PDF

다중 베이스라인 기반 질감 적응적 신뢰도 전파 스테레오 정합 기법 (Multibaseline based Stereo Matching Using Texture adaptive Belief Propagation Technique)

  • 김진형;고윤호
    • 전자공학회논문지
    • /
    • 제50권1호
    • /
    • pp.75-85
    • /
    • 2013
  • 스테레오 비전을 사용하여 거리정보를 획득하기 위해서는 스테레오 영상 쌍에서 대응점을 찾는 스테레오 매칭이 이루어져야 한다. 기존의 스테레오 비전은 주로 두 대의 카메라를 사용해서 양안시차를 획득하였다. 따라서 기존의 방법들은 베이스라인의 길이에 따른 정확도와 정밀도 사이의 이율배반적 관계를 해소하지 못하였다. 또한 근래에 사용되는 신뢰도 전파 기법의 경우 고정된 가중치 ${\lambda}$에 의하여 스테레오 정합 성능이 크게 좌우되는 문제점이 있었다. 본 논문에서는 이율배반적 문제를 해소하기 위해 다중 베이스라인 스테레오 비전에 기반을 둔 개선된 신뢰도 전파 스테레오 정합 기법을 제안한다. 제안된 기법은 국부-명백성 함수로 EMAD(Extended mean of absolute difference)를 계산한다. 그리고 제안된 기법은 가중치 ${\lambda}$를 지역적 질감 정보에 적응적으로 결정한다. 제안된 기법은 기존 기법보다 더 높은 정합 성능을 보여주며 적은 반복을 통해 최적해에 도달하였다. 정합 성능이 PSNR수치상 약 4.85dB만큼 증가하였다.

영상의 깊이정보 추출을 위한 weighted cost aggregation 기반의 스테레오 정합 기법 (Weighted cost aggregation approach for depth extraction of stereo images)

  • 윤희주;차의영
    • 한국정보통신학회논문지
    • /
    • 제13권6호
    • /
    • pp.1194-1199
    • /
    • 2009
  • 스테레오 비전 시스템(stereo vision system)은 2차원 영상정보를 이용하여 3차원 깊이 정보를 획득하는 데 유용한 방법으로, 그동안 많은 연구가 진행되었다. 3차원 깊이 정보를 획득하기 위해서는 영상의 대응점을 찾아야 하는데, 속도와 정확성을 동시에 만족시키기가 어렵다. 이러한 문제를 해결하기 위해, 본 논문에서는 적응적 가중치(weight)를 적용한 cost aggregation 기반의 스테레오 정합 기법을 제안한다. 이 방법은 스테레오 영상의 특징을 이용하여 가중치를 획득하고, 색상정보, 밝기정보에 거리정보를 이용하여 가중치를 적용한 후, 이를 이용하여 대응점을 찾아 깊이 정보를 추출한다. 제안된 방법의 성능을 평가하기 위하여 ground truth가 존재하는 다양한 스테레오 영상을 이용하여 실험하였으며, 실험 결과 다양한 영상에서도 향상된 결과를 보였다.

미용 부분의 유비쿼터스 구현에 따른 문제점과 대응전략에 관한 연구 (A Study about problem and a correspondence strategy along a beauty culture-Ubiquitous implementation)

  • 임진숙;강장묵
    • 디지털콘텐츠학회 논문지
    • /
    • 제5권3호
    • /
    • pp.163-170
    • /
    • 2004
  • 농업혁명, 산업혁명, 정보혁명과 맞먹는 제4의 혁명이 바로 유비쿼터스(Ubiquitous) 혁명이다. 과거의 농업혁명이나 산업혁명은 인류문명의 기반인 물리 공간의 혁명이었고, 월드와이드웹 서비스가 확대되면서 절정기를 맞은 정보화 혁명은 사이버 공간(Cyber Space)의 혁명이었다. 이에 반해 유비쿼터스 혁명은 물리 공간과 사이버 공간의 지능적 결합을 통한 온라인과 오프라인 공간이 통합된 공간에서 이뤄진다. 사이버 공간은 자연스럽게 생활공간과 결합되어 새로운 통합 공간을 창출한다. 그 공간은 아직까지 인류가 경험하지 못한 미지의 세계이자 무한한 기회 공간이다. 본 연구는 현재 진행 중인 유비쿼터스 기술의 개념과 현황 살펴본다. 또한 유비궈터스를 미용분야에 적용할 때의 문제점을 도출해보고 각 문제점을 해결할 수 있는 방안을 제시하였다. 특히 모든 기기간의 무선통신이 가능한 세상에서는 개인의 프라이버시에 대한 침해가 많이 발생할 소지가 많다. 이에 대한 정책적 기술적 해결방안을 제시함으로 향후 미용분야에 도래할 유비쿼터스 세상에 대한 철저한 준비에 유용한 자료가 될 것으로 사료된다.

  • PDF

영상의 깊이정보 추출을 위한 weighted cost aggregation 기반의 스테레오 정합 기법 (Weighted cost aggregation approach for depth extraction of stereo images)

  • 윤희주;차의영
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국해양정보통신학회 2009년도 춘계학술대회
    • /
    • pp.396-399
    • /
    • 2009
  • 스테레오 비전 시스템(stereo vision system)은 2차원 영상정보를 이용하여 3차원 깊이 정보를 획득하는 데 유용한 방법으로, 그동안 많은 연구가 진행되었다. 3차원 깊이 정보를 획득하기 위해서는 영상의 대응점을 찾아야 하는데, 속도와 정확성을 동시에 만족시키기가 어렵다. 이러한 문제를 해결하기 위해, 본 논문에서는 적응적 가중치(weight)를 적용한 cost aggregation 기반의 스테레오 정합 기법을 제안한다. 이 방법은 스테레오 영상의 특징을 이용하여 가중치를 획득하고, 색상정보, 밝기정보, 거리정보에 가중치를 적용한 후, 이를 이용하여 대응점을 찾아 깊이 정보를 추출한다. 제안된 방법의 성능을 평가하기 위하여 ground truth가 존재하는 다양한 스테레오 영상을 이용하여 실험하였으며, 실험 결과 다양한 영상에서도 향상된 결과를 보였다.

  • PDF

한국 행정구역체계의 문제점과 개편의 방향 (Problems of administrative area system in Korea and reforming direction)

  • 임석회
    • 대한지리학회지
    • /
    • 제29권1호
    • /
    • pp.65-83
    • /
    • 1994
  • 현행 행정구역체계의 기본골격은 조선시대와 일제초기에 만들어질 것으로 그간의 급속한 산업화와 도시화 및 교통, 통신의 발달에 제대로 상응하지 못하고 있다는 점에서 개 편의 필요성이 제기된다. 본 연구의 목적은 이러한 현행 행정구역체계의 가장 큰 문제점을 전체적으로 검토하고 그것의 합리적인 개편의 기본원칙과 방향을 모색하는 데 있다. 현행 행정구역체계의 가장 큰 문제점은 주민에 의해 자생적으로 형성된 실질적 공간체계와 관련 되어 있다는 것이다. 이러한 실질적 공간체계에 부합하기 위해서는 국토공간계획의 차원에 서 지역적 형평과 균형의 원리와 함께 중심도시와 배후지의 통합, 생활권의 계층체계와 행 정계층의 일치, 생활권의 범위와 행정구역의 일치 등을 원칙으로 한 행정구역개편이 이루어 져야 할 것이다.

  • PDF

매개변수로 제어가능한 운전자의 안전벨트 뻗침 모션 생성 (Parametrized Construction of Virtual Drivers' Reach Motion to Seat Belt)

  • 서혜원;코디에프레데릭;최우진;최형연
    • 한국CDE학회논문집
    • /
    • 제16권4호
    • /
    • pp.249-259
    • /
    • 2011
  • In this paper we present our work on the parameterized construction of virtual drivers' reach motion to seat belt, by using motion capture data. A user can generate a new reach motion by controlling a number of parameters. We approach the problem by using multiple sets of example reach motions and learning the relation between the labeling parameters and the motion data. The work is composed of three tasks. First, we construct a motion database using multiple sets of labeled motion clips obtained by using a motion capture device. This involves removing the redundancy of each motion clip by using PCA (Principal Component Analysis), and establishing temporal correspondence among different motion clips by automatic segmentation and piecewise time warping of each clip. Next, we compute motion blending functions by learning the relation between labeling parameters (age, hip base point (HBP), and height) and the motion parameters as represented by a set of PC coefficients. During runtime, on-line motion synthesis is accomplished by evaluating the motion blending function from the user-supplied control parameters.

에지 정보를 이용한 유전 알고리즘 기반의 다해상도 스테레오 정합 (A Multiresolution Stereo Matching Based on Genetic Algorithm using Edge Information)

  • 홍석근;조석제
    • 정보처리학회논문지B
    • /
    • 제17B권1호
    • /
    • pp.63-68
    • /
    • 2010
  • 본 논문은 스테레오 시각에서 에지 정보를 이용한 유전 알고리즘 기반의 다해상도 스테레오 영상 정합 방법을 제안하고자 한다. 정합 환경을 최적화 문제로 간주하여 유전 알고리즘을 이용하여 해를 찾는다. 비용함수는 스테레오 정합에서 주로 고려할 수 있는 제약 조건으로 구성하였다. 처리의 효율성을 높이기 위해, 영상 피라미드 방벙을 적용하여 최저해상도에서 최초 변위도를 계산한다. 그리고 최초 변위도는 다음 해상도로 전파되고, 보간된 후 변위 정제를 수행한다. 실험을 통해 제안한 방법이 변위 탐색 시간을 감소시킬 뿐만 아니라 정합의 타당성을 보증함을 확인하고자 한다.