• Title/Summary/Keyword: 업 샘플링

Search Result 77, Processing Time 0.045 seconds

Depth Image Upsampling Algorithm Using Selective Weight (선택적 가중치를 이용한 깊이 영상 업샘플링 알고리즘)

  • Shin, Soo-Yeon;Kim, Dong-Myung;Suh, Jae-Won
    • Journal of the Korea Institute of Information and Communication Engineering
    • /
    • v.21 no.7
    • /
    • pp.1371-1378
    • /
    • 2017
  • In this paper, we present an upsampling technique for depth map image using selective bilateral weights and a color weight using laplacian function. These techniques prevent color texture copy problem, which problem appears in existing upsamplers uses bilateral weight. First, we construct a high-resolution image using the bicubic interpolation technique. Next, we detect a color texture region using pixel value differences of depth and color image. If an interpolated pixel belongs to the color texture edge region, we calculate weighting values of spatial and depth in $3{\times}3$ neighboring pixels and compute the cost value to determine the boundary pixel value. Otherwise we use color weight instead of depth weight. Finally, the pixel value having minimum cost is determined as the pixel value of the high-resolution depth image. Simulation results show that the proposed algorithm achieves good performance in terns of PSNR comparison and subjective visual quality.

Efficient contrastive learning method through the effective hard negative sampling from DPR (DPR의 효과적인 하드 네거티브 샘플링을 통한 효율적인 대조학습 방법)

  • Seong-Heum Park;Hongjin Kim;Jin-Xia Huang;Oh-Woog Kwon;Harksoo Kim
    • Annual Conference on Human and Language Technology
    • /
    • 2022.10a
    • /
    • pp.348-353
    • /
    • 2022
  • 최근 신경망 기반의 언어모델이 발전함에 따라 대부분의 검색 모델에서는 Bi-encoder를 기반으로한 Dense retrieval 모델에 대한 연구가 진행되고 있다. 특히 DPR은 BM25를 통해 정답 문서와 유사한 정보를 가진 하드 네거티브를 사용하여 대조학습을 통해 성능을 더욱 끌어올린다. 그러나 BM25로 검색된 하드 네거티브는 term-base의 유사도를 통해 뽑히기 때문에, 의미적으로 비슷한 내용을 갖는 하드 네거티브의 역할을 제대로 수행하지 못하고 대조학습의 효율성을 낮출 가능성이 있다. 따라서 DRP의 대조학습에서 하드 네거티브의 역할을 본질적으로 수행할 수 있는 문서를 샘플링 하는 방법을 제시하고, 이때 얻은 하드 네거티브의 집합을 주기적으로 업데이트 하여 효과적으로 대조학습을 진행하는 방법을 제안한다. 지식 기반 대화 데이터셋인 MultiDoc2Dial을 통해 평가를 수행하였으며, 실험 결과 기존 방식보다 더 높은 성능을 나타낸다.

  • PDF

An Improved Recognition Technique for Bar Code Images Using Upsampling (업샘플링을 통한 바코드 이미지 인식 성능 개선)

  • Ahn, Heejune;Do, Thanh Tuan
    • The Journal of Korean Institute of Communications and Information Sciences
    • /
    • v.41 no.8
    • /
    • pp.911-913
    • /
    • 2016
  • Recently barcode detection using a camera is popular, but the recognition performance is low at the effectively low-resolution. The paper propose sub-pixel synchronization technique for better recognition performance. The experiments with ITF-18 demonstrates its performance gain (66% for CIF, 100% for VGA) against the existing recognition algorithms.

Comparison of Objective Metrics and 3D Evaluation Using Upsampled Depth Map (깊이맵 업샘플링을 이용한 객관적 메트릭과 3D 평가의 비교)

  • Mahmoudpou, Saeed;Kim, Manbae
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2014.11a
    • /
    • pp.156-157
    • /
    • 2014
  • 본 논문에서는 깊이맵 업샘플링을 이용하여 객관적 메트릭과 3D 주관적 평가 사이의 관계를 조사한다. 전자의 경우, 다양한 참조(full-reference) 및 무참조(no-reference) 평가도구가 깊이맵의 품질을 측정하기위해 적용되고, 3D평가는 주관적 평가로 얻는다. 이 두 개의 결과는 세 가지의 상관계수를 이용하여 상호 관련성을 찾은 후에, 최적으로 주관평가에 근접한 객관적 메트릭을 얻는다.

  • PDF

Hybrid disparity map generation method based on reliability (신뢰도를 기반한 혼합형 변위 지도 생성 방법)

  • Jang, Woo-Seok;Ho, Yo-Sung
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2015.07a
    • /
    • pp.73-74
    • /
    • 2015
  • 3 차원 컨텐츠 제작은 많은 관심을 받고 있는 분야이다. 변위 지도로 표현 가능한 깊이 정보는 3 차원 컨텐츠를 생성하는데 필수적이다. 본 논문에서는 깊이 카메라 및 스테레오 카메라를 이용하여 정확한 변위 지도를 생성하는 방법을 제안한다. 제안하는 방법은 스테레오 영상 사이의 변위를 예측하기 위해서 깊이 카메라 정보를 3 차원 워핑 방식에 의해서 좌우 카메라 위치로 투영한다. 투영된 깊이 정보는 스테레오 영상의 크기에 맞춰서 업샘플링된다. 최종적으로 업샘플링된 깊이 카메라 정보와 스테레오 정보가 결합되어 정확한 변위 지도를 생성한다. 실험 결과는 제안하는 방법이 기존의 단일 센서를 이용한 방식에 비해서 좀더 정확한 결과를 생성함을 보여준다.

  • PDF

Depth Upsampler Using Color and Depth Weight (색상정보와 깊이정보 가중치를 이용한 깊이영상 업샘플러)

  • Shin, Soo-Yeon;Kim, Dong-Myung;Suh, Jae-Won
    • The Journal of the Korea Contents Association
    • /
    • v.16 no.7
    • /
    • pp.431-438
    • /
    • 2016
  • In this paper, we present an upsampling technique for depth map image using color and depth weights. First, we construct a high-resolution image using the bilinear interpolation technique. Next, we detect a common edge region using RGB color space, HSV color space, and depth image. If an interpolated pixel belongs to the common edge region, we calculate weighting values of color and depth in $3{\times}3$ neighboring pixels and compute the cost value to determine the boundary pixel value. Finally, the pixel value having minimum cost is determined as the pixel value of the high-resolution depth image. Simulation results show that the proposed algorithm achieves good performance in terns of PSNR comparison and subjective visual quality.

Encoding Performance Analysis of Deep Learning based SHVC Inter-Layer Reference Picture Generation Method by Luma and Chroma Component (휘도 및 색차 성분에 따른 딥러닝 기반 SHVC 계층간 참조 픽처 생성 방법의 부호화 성능 분석)

  • Lee, Wooju;Lee, Minhun;Hwang, Gisu;Sung, Junyoung;Oh, Seoungjun
    • Proceedings of the Korean Society of Broadcast Engineers Conference
    • /
    • 2019.06a
    • /
    • pp.82-83
    • /
    • 2019
  • 본 논문에서는 휘도 및 색차 성분에 따른 SHVC 계층간 참조 픽처 생성 방법의 부호화 성능을 분석한다. SHVC 상위 계층에서는 하위 계층의 픽처를 DCT-IF 기반 업샘플링하여 사용한다. 상위 계층의 부호화 성능을 높이기 위해 딥러닝 기반 필터링을 이용하여 휘도, 색차 성분의 고주파 신호 복원이 부호화 성능에 미치는 영향을 분석한다. 기존 Y 성분에만 VDSR 네트워크를 이용하여 필터링을 적용하였을 때보다 색차 성분까지 필터링을 진행할 경우 최대 2.18%, 평균 1.5% 감소된 결과를 보였다.

  • PDF

Double Demodulation of a Ring Laser Dither Signal for Reducing the Dynamic Error of an Inertial Navigation System (관성항법장치의 동적오차 개선을 위한 링레이저 각진동 신호의 이중 복조방법)

  • Shim, Kyu-Min
    • Journal of the Korean Society for Aeronautical & Space Sciences
    • /
    • v.42 no.1
    • /
    • pp.82-89
    • /
    • 2014
  • This paper discusses the methods for reducing the sampling time quantization errors of the body dither type ring laser gyroscope. A ring laser gyroscope has the angle quantization error which is generated by the frequency counting method of the laser beat signal and sampling time quantization error which is generated by the demodulation method for eliminating the body dithering in which the sampling periods are fitted to the dither periods. Generally, because the dither periods are longer than the calculation periods of the inertial navigation system, vehicle navigation errors are produced by long time attitude update missing during the vehicle move with a high dynamical motion. In this paper, the double demodulation method is proposed for reducing the sampling time quantization error and its effects under the dynamic situation are confirmed by simulation.

Comparison of Objective Metrics and 3D Evaluation Using Upsampled Depth Map (깊이맵 업샘플링을 이용한 객관적 메트릭과 3D 평가의 비교)

  • Mahmoudpour, Saeed;Choi, Changyeol;Kim, Manbae
    • Journal of Broadcast Engineering
    • /
    • v.20 no.2
    • /
    • pp.204-214
    • /
    • 2015
  • Depth map upsampling is an approach to increase the spatial resolution of depth maps obtained from a depth camera. Depth map quality is closely related to 3D perception of stereoscopic image, multi-view image and holography. In general, the performance of upsampled depth map is evaluated by PSNR (Peak Signal to Noise Ratio). On the other hand, time-consuming 3D subjective tests requiring human subjects are carried out for examining the 3D perception as well as visual fatigue for 3D contents. Therefore, if an objective metric is closely correlated with a subjective test, the latter can be replaced by the objective metric. For this, this paper proposes a best metric by investigating the relationship between diverse objective metrics and 3D subjective tests. Diverse reference and no-reference metrics are adopted to evaluate the performance of upsampled depth maps. The subjective test is performed based on DSCQS test. From the utilization and analysis of three kinds of correlations, we validated that SSIM and Edge-PSNR can replace the subjective test.

A Block FIR Filtering Architecture for IF Digital Down Converter (IF 디지털 다운 컨버터의 블록 FIR 필터링 아키텍처)

  • Jang, Young-Beom
    • Journal of the Institute of Electronics Engineers of Korea SP
    • /
    • v.37 no.5
    • /
    • pp.115-123
    • /
    • 2000
  • In this paper, a block FIR(Finite Impulse Response) filtering architecture is proposed for IF digital down converter. Digital down converter consists of digital mixers. decimation filters and down samplers. In this proposed structure, it is shown that a efficient parallel decimation filter architecture can be produced by cancellation of inherent up sampling of the block filter and following down sampler Furthermore. it is shown that computational complexity of the proposed architecture is reduced by exploiting the block FIR structure and zero values of the digital mixers.

  • PDF