• 제목/요약/키워드: Multiview images

Search Result 53, Processing Time 0.025 seconds

메쉬를 활용한 DIBR 기반 중간 영상 화질 향상 방법 연구 (A Study on Improving the Quality of DIBR Intermediate Images Using Meshes)

  • 김지성;김민영;조용주
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2014년도 추계학술대회
    • /
    • pp.822-823
    • /
    • 2014
  • 다시점 디스플레이용 영상은 주로 레퍼런스가 되는 컬러 카메라와 깊이 카메라의 영상을 입력 받아 DIBR (Depth Image Based Rendering) 기법을 활용, 3차원 점 구름 형태로 재구성 한 후 가상 카메라를 여러 시점에서 배치하여 중간 영상을 생성하여 조합하였다. 이렇게 다시점 중간 영상을 생성하면 원래의 시점에서는 구멍이 없었지만 다른 시점에서는 구멍(Hole)이 보이는 현상이 발생한다. 기존에는 틈새 영역을 채우는 알고리즘을 개발하거나 깊이 영상을 보정하여 개선시키는 방법을 연구하였으나 본 논문에서는 점 구름을 메시(Mesh)화 시키는 알고리즘 중 한 가지인 볼 피봇팅(Ball Pivoting) 방법을 적용시켜 중간 영상의 화질 개선 방법을 설명하고 있다. 마이크로소프트사의 발레와 브레이크 댄서 영상에 개발된 개선 방법을 적용시켜 보았고 PSNR로 비교할 때 약 0.18~1.19정도의 향상을 보임을 확인하였다. 본 논문을 통해 개선 방법과 실험방법, 그리고 결과에 대해 설명한다.

  • PDF

다수의 카메라를 활용한 고해상도 3차원 객체 복원 시스템 (High-resolution 3D Object Reconstruction using Multiple Cameras)

  • 황성수;유지성;김희동;김수정;팽경현;김성대
    • 전자공학회논문지
    • /
    • 제50권10호
    • /
    • pp.150-161
    • /
    • 2013
  • 본 논문에서는 다수의 카메라들을 이용하여 3차원 공간상에 있는 물체에 대한 다중 시점 영상들을 획득하고, 그 영상들로부터 해당 3차원 물체에 대한 기하학적인 형상 및 질감 정보를 추정하여, 그 물체에 대한 고해상도 3차원 콘텐츠를 효율적으로 제작하는 새로운 시스템을 제안한다. 지금까지 다양한 다중 시점 영상 기반 3차원 객체 복원 시스템들이 제안되었지만 다중 시점 기반 3차원 객체 복원이 많은 메모리와 계산량을 필요로 하기 때문에 고해상도의 3차원 콘텐츠를 얻는 데에는 어려움이 있었다. 3차원 복원에 필요한 계산량 및 메모리량을 줄이기 위해 제안 시스템은 객체의 다중 시점을 촬영한 영상 내에서 객체가 존재할 수 있는 영역을 사전에 설정하여 객체 윤곽선 추출 과정을 빠르게 수행한다. 그리고 체인코드를 활용하여 실루엣 영상을 표현하고 3차원-2차원 투영 및 역투영 관계를 1차원 호모그래피를 통해 표현하여 객체의 비주얼 헐을 빠르게 계산한다. 복원된 3차원 객체의 기하정보는 3차원 선분 기반의 표현 기법인 DoCube를 활용하여 적은 데이터양으로 표현하였으며, 3차원 메시 생성 및 텍스쳐 맵핑을 수행하여 최종적인 3차원 객체를 생성한다. 실험 결과 제안 시스템이 $800{\times}800{\times}800$ 해상도의 3차원 객체 복원을 프레임 당 2.2초에 수행하는 것을 확인하였다.

그래픽스 응용을 위한 다시점 텍스처 및 깊이 정보의 근접 무손실 부호화 (Near-lossless Coding of Multiview Texture and Depth Information for Graphics Applications)

  • 윤승욱;호요성
    • 대한전자공학회논문지SP
    • /
    • 제46권1호
    • /
    • pp.41-48
    • /
    • 2009
  • 본 논문에서는 복잡한 삼차원 장면을 다시점 텍스처와 깊이맵을 이용해 표현하고 이를 부호화하는 기법을 제안한다. 이를 위해 입력 다시점 데이터를 압축된 텍스처 및 깊이맵쌍 포맷으로 변환하고 제안한 코덱인 X-Codec을 통해 손실을 최소화하면서 부호화 효율을 향상시킨다. 우선 제안한 부호화 시스템은 다시점 색상과 깊이영상을 입력으로 사용하므로 기존의 기하학 기반 렌더링 기법과 달리 렌더링 속도가 장면의 복잡도가 아닌 입력 영상의 해상도에 따라 좌우된다. 또한, 영상을 블록 단위로 나누어 부호화와 복호화를 수행하기 때문에 임의 영역 접근이 용이하고 그래픽스 프로세싱 유닛을 이용한 실시간 렌더링이 가능하다. 실험결과 제안한 방법은 다시점 데이터를 이용한 다시점 렌더링, 선택적 복호화, 깊이정보를 이용한 삼차원 장면의 조작 등 다양한 기능을 동시에 제공하므로 대용량 데이터로부터 삼차원 장면을 탐색하는 그래픽스 응용에 유용하다.

다시점 동영상에서의 효율적인 변이 벡터 압축 기법 (Multi-view video coding using efficient disparity vector prediction)

  • 김용태;손광훈
    • 방송공학회논문지
    • /
    • 제10권4호통권29호
    • /
    • pp.621-631
    • /
    • 2005
  • 다시점 동영상 부호화기의 성능을 향상시키기 위해서 본 논문에서는 평행식 카메라 구조에서의 효율적인 변이 벡터 예측을 이용한 부호화 방식을 제안한다 변이 벡터는 움직임 벡터와는 달리 다시점 카메라 구조 정보로부터 예측이 가능하다. 이러한 성질을 이용하여 예측하여 구한 예측 벡터와 직접 추정한 변이 벡터와의 차이값을 부호화한다. 그러므로 변이 벡터 부호화의 성능을 향상시키기 위해서 정교한 변이 벡터의 예측이 필요하다. 기존의 벡터 예측 방식은 미리 부호화된 주위 블록의 변이 벡터를 이용하여 현재 블록의 변이 벡터를 예측하지만 제안 알고리듬은 다시점 영상간의 상관성을 이용한다. 본 논문에서는 5시점 동영상에 대해서 차벡터의 엔트로피와 절대 평균값을 구하는 실험을 수행하였다. 실험 결과를 통해서 기존의 공간적인 상관성만을 이용하여 변이 벡터를 부호화하는 방식보다 제안 알고리듬이 우수한 성능을 보임을 확인하였다. 제안 알고리듬은 기존알고리듬과 비교하여 영상의 화질을 유지하면서 $30{\~}40\%$의 부호화 효율을 증가시킨다.

Framework for Content-Based Image Identification with Standardized Multiview Features

  • Das, Rik;Thepade, Sudeep;Ghosh, Saurav
    • ETRI Journal
    • /
    • 제38권1호
    • /
    • pp.174-184
    • /
    • 2016
  • Information identification with image data by means of low-level visual features has evolved as a challenging research domain. Conventional text-based mapping of image data has been gradually replaced by content-based techniques of image identification. Feature extraction from image content plays a crucial role in facilitating content-based detection processes. In this paper, the authors have proposed four different techniques for multiview feature extraction from images. The efficiency of extracted feature vectors for content-based image classification and retrieval is evaluated by means of fusion-based and data standardization-based techniques. It is observed that the latter surpasses the former. The proposed methods outclass state-of-the-art techniques for content-based image identification and show an average increase in precision of 17.71% and 22.78% for classification and retrieval, respectively. Three public datasets - Wang; Oliva and Torralba (OT-Scene); and Corel - are used for verification purposes. The research findings are statistically validated by conducting a paired t-test.

Voxel-wise UV parameterization and view-dependent texture synthesis for immersive rendering of truncated signed distance field scene model

  • Kim, Soowoong;Kang, Jungwon
    • ETRI Journal
    • /
    • 제44권1호
    • /
    • pp.51-61
    • /
    • 2022
  • In this paper, we introduced a novel voxel-wise UV parameterization and view-dependent texture synthesis for the immersive rendering of a truncated signed distance field (TSDF) scene model. The proposed UV parameterization delegates a precomputed UV map to each voxel using the UV map lookup table and consequently, enabling efficient and high-quality texture mapping without a complex process. By leveraging the convenient UV parameterization, our view-dependent texture synthesis method extracts a set of local texture maps for each voxel from the multiview color images and separates them into a single view-independent diffuse map and a set of weight coefficients for an orthogonal specular map basis. Furthermore, the view-dependent specular maps for an arbitrary view are estimated by combining the specular weights of each source view using the location of the arbitrary and source viewpoints to generate the view-dependent textures for arbitrary views. The experimental results demonstrate that the proposed method effectively synthesizes texture for an arbitrary view, thereby enabling the visualization of view-dependent effects, such as specularity and mirror reflection.

체적 홀로그래픽 메모리를 이용한 다시점 스테레오스코픽 디스플레이 (Multiview Stereoscopic Display based on Volume Holographic Memory)

  • 이승현;손광철;심원섭;양훈기;김은수
    • 한국통신학회논문지
    • /
    • 제25권5A호
    • /
    • pp.688-695
    • /
    • 2000
  • 본 논문에서는 체적 홀로그래픽 메모리 저장 기술을 이용한 다시점 스테레오스코픽 디스플레이 시스템을 제안하였다. 디스플레이 평면에서 다시점 3D 영상을 관찰할 수 있도록 공간 다중화된 평면 기준파와 각 다중화된 명면 물체파를 간섭시킨 후 광굴절 매질에 기록하였다. 재생시 다안식 영상으로 구성된 물체파가 시분할적으로 update 되며 브래그 조건을 만족시켜면, 출력 평면에서 다안식 스테레오 영상을 관찰할 수 있다. 체적 홀로그램을 이용한 다시점 디스플레이시스템의 실험과 이론적인 분석을 하였다.

  • PDF

RGB 이미지에서 트랜스포머 기반 고밀도 3D 재구성 (Transformer-based dense 3D reconstruction from RGB images)

  • 서가가;고서;문명운;조경은
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2022년도 추계학술발표대회
    • /
    • pp.646-647
    • /
    • 2022
  • Multiview stereo (MVS) 3D reconstruction of a scene from images is a fundamental computer vision problem that has been thoroughly researched in recent times. Traditionally, MVS approaches create dense correspondences by constructing regularizations and hand-crafted similarity metrics. Although these techniques have achieved excellent results in the best Lambertian conditions, traditional MVS algorithms still contain a lot of artifacts. Therefore, in this study, we suggest using a transformer network to accelerate the MVS reconstruction. The network is based on a transformer model and can extract dense features with 3D consistency and global context, which are necessary to provide accurate matching for MVS.

다시점 영상 생성을 위한 DIBR 기반의 깊이 정확도 향상 방법 (Enhancement Method of Depth Accuracy in DIBR-Based Multiview Image Generation)

  • 김민영;조용주;박경신
    • 정보처리학회논문지:컴퓨터 및 통신 시스템
    • /
    • 제5권9호
    • /
    • pp.237-246
    • /
    • 2016
  • DIBR (Depth Image Based Rendering)은 동일 시점의 색상 영상과 깊이 영상을 참조해서 임의 개수의 중간 시점 영상을 생성하는 기법으로 무안경식 다시점 입체 디스플레이를 위한 콘텐츠 제작에 활용할 수 있다. 본 연구에서는 DIBR 기법을 사용해서 생성되는 다시점 중간 영상의 객관적 품질에 깊이 정확도가 미치는 영향에 대해 설명한다. 본 연구는 먼저 사람이 인지할 수 없는 범위에서 왜곡을 보장하기 위한 최소 깊이 양자화 계수를 도출한다. 그리고 장면 구성의 특성에 따라 같은 양자화 수준에서 깊이 정보의 정확도를 효과적으로 표현하기 위한 비균등 영역분할 양자화 방법을 선형 양자화와 비교 분석한 결과를 제시한다.

3-D Display;Electro-holography Based

  • Son, Jung-Young;Kim, Dae-Sik;Cha, Kyung-Hun
    • 한국정보디스플레이학회:학술대회논문집
    • /
    • 한국정보디스플레이학회 2006년도 6th International Meeting on Information Display
    • /
    • pp.1553-1560
    • /
    • 2006
  • The idea of displaying hologram electronically has been existed since mid $1960^{th}$. But it is still in the beginning stage due to the lacks of proper means of displaying and recording, which will bear the large amount of data contained in the hologram though holographic video and digital holography have demonstrated the possibility of displaying and photographing hologram electronically. It is expected that holography based 3 dimensional imaging system will be introduced much later than that on multiview 3 dimensional imaging methods which are being developed to generate more realistic and natural image than high definition plane images.

  • PDF