Iterative Matching Cost Update based Multi-view Stereo Matching Algorithm for 3D Reconstruction and View Synthesis

3차원 복원 및 시점 합성을 위한 반복적인 매칭 비용 업데이트 기반의 다시점 스테레오 매칭 알고리즘

  • Lee, Min-Jae (Kyungpook national university, School of electronics engineering) ;
  • Park, Soon-Yong (Kyungpook national university, School of electronics engineering) ;
  • Um, Gi-Mun (Digital Broadcasting Research Division, Electronics and Telecommunications, Research Institute) ;
  • Cheong, Won-Sik (Digital Broadcasting Research Division, Electronics and Telecommunications, Research Institute) ;
  • Yun, Joungil (Digital Broadcasting Research Division, Electronics and Telecommunications, Research Institute) ;
  • Lee, Jinhwan (Digital Broadcasting Research Division, Electronics and Telecommunications, Research Institute)
  • 이민재 (경북대학교 전자공학부) ;
  • 박순용 (경북대학교 전자공학부) ;
  • 엄기문 (한국전자통신연구원 통신미디어연구소 실감미디어연구실) ;
  • 정원식 (한국전자통신연구원 통신미디어연구소 실감미디어연구실) ;
  • 윤정일 (한국전자통신연구원 통신미디어연구소 실감미디어연구실) ;
  • 이진환 (한국전자통신연구원 통신미디어연구소 실감미디어연구실)
  • Published : 2020.07.13

Abstract

본 논문에서는 정밀한 3차원 복원 및 시점 합성을 위해 매칭 비용을 반복적으로 업데이트하는 Generalized Soft 3D Reconstruction (GenSoft3D) 알고리즘을 제안한다. 먼저 다시점 영상들과 카메라 자세정보가 주어지면 GenSoft3D는 볼륨 기반의 다시점 스테레오 매칭 알고리즘으로 시점별 초기 매칭 비용 볼륨 및 시차 맵을 계산한다. 그 후 정제 과정에서 각 시점은 모든 시차 맵을 이용하여 표면 확률 및 가시 확률을 계산한다. 표면 확률은 초기 매칭 비용 업데이트에 사용하며, 가시 확률은 폐색 영역의 정확한 시차를 계산하기 위해 사용된다. 해당 정제 과정을 일정 횟수 반복할 경우 시점별 고정밀의 시차 맵 획득이 가능하다. 또한 시차 맵의 정확도가 향상됨에 따라 정확한 시점 합성이 가능하다.

Keywords