• 제목/요약/키워드: media depth

검색결과 1,029건 처리시간 0.023초

고품질의 고해상도 깊이 영상을 위한 컬러 영상과 깊이 영상을 결합한 깊이 영상 보간법 (Depth Image Interpolation using Fusion of color and depth Information)

  • 김지현;최진욱;손광훈
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 2011년도 추계학술대회
    • /
    • pp.8-10
    • /
    • 2011
  • 3D 콘텐츠를 획득하는 여러 가지 방법 중 2D-plus-Depth 구조는 다시점 영상을 얻을 수 있는 장점 때문에 최근 이에 관한 연구가 활발히 진행되고 있다. 이 구조를 통해서 고품질의 3D영상을 얻기 위해서는 무엇보다 고품질의 깊이 영상을 구현하는 것이 중요하다. 깊이 영상을 얻기 위해서 Time-of-Flight(ToF)방식의 깊이 센서가 활용되고 있는데 이 깊이 센서는 실시간으로 깊이 정보를 획득할 수 있지만 낮은 해상도와 노이즈가 발생한다는 단점이 있다. 따라서 깊이 영상의 특성을 보존하는 상환 변환을 하여야지만 고품질의 3D 콘텐츠를 제작할 수 있다. 주로 깊이 영상의 해상도를 높이기 위해서 Joint Bilateral Upsampling(JBU) 방식이 사용되고 있다. 하지만 이 방식은 4배 이상의 고 해상도 깊이 영상을 획득하는 데에는 적합하지 않다. 따라서 고해상도의 깊이 영상을 얻기 위해서 보간법을 수행하여 가이드 영상을 만든 후 Bilateral Filtering(BF)을 처리함으로써 영상의 품질을 향상시킨다. 본 논문에서는 2D-plus-Depth 구조에서 얻은 컬러 영상과 깊이 영상을 결합한 보간법을 통해서 깊이 영상의 특성을 살린 가이드 영상을 구현하는 방법을 제안한다. 실험 결과는 제안 방법이 기존 보간법보다 경계 영역 및 평활한 영역에서 깊이 영상의 특성을 잘 보존하는 것을 보여준다.

  • PDF

다시점 콘텐츠 생성을 위한 PMD 카메라 및 Kinect 비교 (Comparison with PMD depth camera and Kinect camera for Multi-View contents)

  • 송혁;최병호
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 2011년도 추계학술대회
    • /
    • pp.240-241
    • /
    • 2011
  • 자연스러운 3D 실감영상을 감상하기 위해서는 많은 시점의 영상이 필요하며 과거 스테레오 디스플레이 장치로부터 최근 그 시점 수가 크게 늘어난 디스플레이 장치로 기술 발전이 이뤄지고 있으며 이에 따라 다시점 콘텐츠를 생성하기 위한 다양한 기술이 개발되어 있다. 다시점 콘텐츠를 생성하기 위하여 ToF 카메라 및 적외선 패턴을 이용한 방법이 주로 이용되고 있으며 이를 활용한 다시점 콘텐츠 생성을 하는 시도가 이뤄지고 있다. ToF 카메라는 PMD사의 제품 및 SwissRanger 사의 제품이 대표적이며 적외선 패턴을 이용한 방식은 MS사의 Kinect가 대표적이며 본 제품들을 활용한 기술 비교를 통하여 다시점 콘텐츠 생성의 결과 및 이를 비교한 장단점을 구분하였다. PMD사의 ToF 카메라는 두 개 이상의 광원을 사용하여 Depth 추출시에 Hole 영역의 크기가 작으나 ToF 영상의 해상도가 매우 작아 고화질의 콘텐츠를 생성하기 위하여 별도의 영상처리 알고리즘이 요구되었다. 반면 MS사의 Kinect는 Depth 영상의 해상도가 상대적으로 커서 영상처리 알고리즘의 복잡도가 작아지나 Depth 추출을 위한 카메라와 RGB 카메라의 위치가 공간적으로 떨어져 있어 이를 보정하기 위한 알고리즘이 요구되며 다시점 변환시 화질에 있어 상대적으로 떨어지는 것으로 나타났다.

  • PDF

신뢰확산 알고리즘을 이용한 다해상도 영상에서 깊이영상의 생성과 처리에 관한 연구 (A Study on the Generation and Processing of Depth Map for Multi-resolution Image Using Belief Propagation Algorithm)

  • 지인호
    • 한국인터넷방송통신학회논문지
    • /
    • 제15권6호
    • /
    • pp.201-208
    • /
    • 2015
  • 3차원 입체 방송을 가능하게 하기 위해서는 실세계에 존재하는 한 사물에 대한 깊이 정보를 획득하여야 한다. 따라서 본 논문에서는 네트워크 알고리즘인 신뢰확산(belief propagation) 알고리즘을 다해상도 영역에서 적용하여 3차원 정보의 근간이 되는 변이(disparity) 영상이나 깊이(depth)영상을 정확하면서도 빠르게 생성하는 것을 목적으로 한다. 신뢰확산 알고리즘은 기본적으로 여러 번의 반복을 통하여 변이정보를 보다 정확하게 갱신하게 되어 많은 연산량과 넓은 탐색영역으로 인하여 성능의 수렴까지 오랜 시간이 걸린다. 다해상도 변환은 공간영역과 주파수영역 모두에서 우수한 해상도를 갖기 때문에 이를 이용하여 스테레오 정합의 연산 속도를 증가시키고 성능을 향상시키는 것을 보여주었다.

ASPPMVSNet: A high-receptive-field multiview stereo network for dense three-dimensional reconstruction

  • Saleh Saeed;Sungjun Lee;Yongju Cho;Unsang Park
    • ETRI Journal
    • /
    • 제44권6호
    • /
    • pp.1034-1046
    • /
    • 2022
  • The learning-based multiview stereo (MVS) methods for three-dimensional (3D) reconstruction generally use 3D volumes for depth inference. The quality of the reconstructed depth maps and the corresponding point clouds is directly influenced by the spatial resolution of the 3D volume. Consequently, these methods produce point clouds with sparse local regions because of the lack of the memory required to encode a high volume of information. Here, we apply the atrous spatial pyramid pooling (ASPP) module in MVS methods to obtain dense feature maps with multiscale, long-range, contextual information using high receptive fields. For a given 3D volume with the same spatial resolution as that in the MVS methods, the dense feature maps from the ASPP module encoded with superior information can produce dense point clouds without a high memory footprint. Furthermore, we propose a 3D loss for training the MVS networks, which improves the predicted depth values by 24.44%. The ASPP module provides state-of-the-art qualitative results by constructing relatively dense point clouds, which improves the DTU MVS dataset benchmarks by 2.25% compared with those achieved in the previous MVS methods.

컬러 및 깊이 데이터 변환을 이용하는 입체감 향상 (Stereoscopic Perception Improvement Using Color and Depth Transformation)

  • 길종인;장성은;서주하;김만배
    • 방송공학회논문지
    • /
    • 제16권4호
    • /
    • pp.584-595
    • /
    • 2011
  • 최근 RGB 영상과 깊이맵이 동시에 제작되어 공급되고 있다. 깊이맵은 사용자의 용도에 따라 다양한 형태로 변환되어 입체영상 제작에 사용된다. 깊이맵을 활용하는 기법이 새로이 소개되고 있는데, 한 예로 의료 분야에서 2D 영상의 컬러를 변환하여 지각 깊이감을 개선하는 영상처리 기술에 대한 관심이 높아지고 있다. 본 논문에서는 기존의 컬러 변환을 통한 2D 영상의 지각 깊이감 개선을 입체영상에 적용하여, 3D 지각 깊이감을 동시에 향상시키는 방법을 제안한다. 이를 위해 대조 변환 및 배경 다크닝 방법을 제안하고, 실험을 통해 제안 방법이 상기 목적을 얻을 수 있는 것을 검증하였다. 주관적 실험에서는 입체감 향상 및 피로도 측정을 통해 제안 방법의 성능 및 단점을 제시하였다.

3차원 영상을 위한 깊이 영상 압축 방법 (Depth compression method for 3D video)

  • 남정학;황능주;조광신;심동규;이수연;방건;허남호
    • 방송공학회논문지
    • /
    • 제15권5호
    • /
    • pp.703-706
    • /
    • 2010
  • 최근 3차원 영상 서비스의 보급과 함께 깊이 영상에 대한 부호화의 필요성이 대두되고 있으며, 이미 MPEG의 3DV/FTV 그룹에서는 깊이 영상에 대한 표준화를 진행 중에 있다. 기존의 깊이 영상 부호화는 컬러 영상의 참조 없이 독립적으로 부호화가 수행되었기 때문에 깊이 영상의 부호화 성능이 좋지 않았다. 본 논문에서는 깊이 영상에 대한 효율적인 부호화 방법으로써, 컬러와 깊이 영상에 대한 블록 모드의 유사성을 이용하여 컬러 영상의 블록 모드에 따라 깊이 영상의 블록 모드로 재배열하는 방법을 제안하였다. 실험결과 JSVM 기반의 깊이 영상 부호화 방법 대비 약 2.2%의 비트 감소를 얻었다.

질감과 깊이 특징 기반의 문자영역 추출 (Character Region Extraction Based on Texture and Depth Features)

  • 장석우;박영재;허문행
    • 한국산학기술학회논문지
    • /
    • 제14권2호
    • /
    • pp.885-892
    • /
    • 2013
  • 본 논문에서는 3차원의 입체영상으로부터 질감과 깊이 특징을 활용하여 영상 내에 존재하는 문자를 효과적으로 분할하는 방법을 제안한다. 제안된 문자 분할 방법은 크게 후보 문자영역 추출 단계, 문자영역 지역화 단계, 문자와 배경영역 분리 단계, 그리고 후보 문자영역 검증 단계의 네 가지 단계로 구성된다. 후보 문자영역 추출 단계에서는 입력된 영상에서 질감 특징을 이용해 문자영역이 존재하는 후보 영역을 분할하고, 문자영역 지역화 단계에서는 후보 문자영역 중에서 문자열만을 형성하는 영역을 추출한다. 그리고 문자와 배경 분리 단계에서는 지역화된 문자영역을 문자와 배경으로 분리하며, 후보 문자영역 검증 단계에서는 거리 특징을 활용하여 추출된 문자영역이 비 문자영역을 포함하지 않고 문자영역만을 포함하고 있는지를 최종적으로 검증한다. 실험에서는 제안된 방법을 여러 가지 영상에 적용하여 테스트 해 보았으며, 제안된 방법이 기존의 방법에 비해 보다 정확하게 문자영역을 추출함을 확인하였다.

식재기반 복원을 위한 유기질계 토양개량재의 효용성 (Effects of Soil Organic Amendment as Plant Growing Media Component for Restoration of Planting Ground)

  • 주진희;인다영;김원태;윤용한;최은영
    • 한국환경과학회지
    • /
    • 제24권11호
    • /
    • pp.1363-1370
    • /
    • 2015
  • This study was aimed to determine effects of soil organic amendment as plant growing media component on restoration of planting ground. The changes of soil physical and chemical properties and germination and growth of kentucky bluegrass (Poa pratensis L.) were investigated. For treatments, soil was excavated at depth of 0-50 cm (referred as $S_1$) and at depth of 50-100 cm (referred as $S_2$). Then the half amount of $S_1$ soil was mixed with the soil organic amendment (coir dust 40% (v/v), bottom ash 25%, leaf mold 25%, vermiculite 5%, carbonized rice hull 5%) at a rate of 6% (v/v) (referred as $S_1CC$) and also the half amount of $S_2$ soil was mixed with the soil organic amendment at a rate of 6% (v/v) (referred as $S_2CC$) on pot in a 16 cm diameter and 14 cm height. The experiment was replicated 3 times with 3 pots per replication in randomized block design, and 100 seeds were planted per pot. In results, there was no significant difference in soil pH among the treatments with a slight decrease in soil hydraulic conductivity. However, in the $S_1CC$ treatment, positive increases in soil chemical properties, including electrical conductivity, organic matter, phosphoric acid, total nitrogen, exchangeable cation, and cation exchange capacity. Also, the germination rate, plant height, and number of leaves were higher in the $S_1CC$ treatment than those in other treatments. These results suggest that the addition of organic amendment to the soil at depth of 0-50 cm might be proper for restoring planting ground.

시선 깊이 추정 기법을 이용한 OST-HMD 자동 스위칭 방법 (Method for Automatic Switching Screen of OST-HMD using Gaze Depth Estimation)

  • 이영호;신춘성
    • 스마트미디어저널
    • /
    • 제7권1호
    • /
    • pp.31-36
    • /
    • 2018
  • 본 논문에서는 시선 깊이 추정 기술을 이용한 OST-HMD의 자동화면 on/off 기능을 제안한다. 제안하는 방법은 MLP(Multi-layer Perceptron)을 이용하여 사용자의 시선 정보와 보는 물체의 거리를 학습 한 후, 시선 정보만 입력하여 거리를 추정한다. 학습 단계에서는 착용 할 수 있는 양안 추적기를 사용하여 시선 관련 특징을 얻는다. 그런 다음 이 특징을 다층 퍼셉트론 (MLP: Multi-layer Perceptron)에 입력하여 학습하고 모델을 생성한다. 추론 단계에서는 안구 추적기로부터 실시간으로 시선 관련 특징을 얻고 이를 MLP에 입력하여 추정 깊이 값을 얻는다. 마지막으로 HMD의 화면을 켜거나 끌 것인지 여부를 결정하기 위해 이 계산결과를 활용한다. 제안된 방법의 가능성을 평가하기 위해 프로토타입을 구현하고 실험을 수행하였다.

배달 애플리케이션을 통한 사용자 경험 비교분석 -배달의 민족, 요기요, 배달통을 중심으로- (Comparative Analysis of User Experience with Delivery Applications -Focused on BaeMin, Yogiyo, Baedaltong-)

  • 고은성;김승인
    • 디지털융복합연구
    • /
    • 제17권8호
    • /
    • pp.393-399
    • /
    • 2019
  • 본 연구는 국내의 대표적인 배달 애플리케이션 3곳을 비교분석 하기 위한 연구이다. 모바일 사용 증가에 따라 배달 애플리케이션의 사용 빈도는 나날이 늘고 있다. 그런데도 사용성에서는 아직도 문제가 제기되고 있다. 배달의 민족, 요기요, 배달통 이렇게 세 가지의 배달 애플리케이션의 사용성에 대한 선호도를 심층 면접을 통해 분석하였다. 사용자 경험 만족에 영향을 미치는 요인을 허니콤에 기반을 둔 7점 척도를 통해 확인하였고, 심층 면접과 7점 척도의 결과가 비슷하게 나옴으로써, 사용자들이 압도적으로 선호하는 배달 애플리케이션이 무엇이며 이유가 무엇인지 알 수가 있었다. 이 연구는 배달 애플리케이션에 대한 사용자 경험을 분석하고 각 업체의 장점을 도출시켜 애플리케이션에 적용하고, 더 나아가 면담을 통해 얻게 된 새로운 기술적 아이디어를 통해 애플리케이션의 서비스와 사용성을 높이는 데 의의가 있다.