Multi-Resolution MBS Technique for Intermediate Image Synthesis

중간 영상 합성을 위한 다해상도 다기선 스테레오 정합 기법

In this paper, we propose a depth information extraction method for intermediate image synthesis. As stereo matching method, MBS(Multiple-Baseline Stereo) method has been proposed, in which the matching accuracy increases by using the multiple camera, but there are some inherent problems such as computational complexity, boundary overreach(BO) in depth map, and occlusion. So, we propose the modified version of MBS so called Multi-Resolution MBS(MR-MBS). Moreover, we also propose an adaptive occlusion area processing technique to improve the accuracy of the depth information in occlusion area.

본 논문에서는 중간 영상 합성을 위한 거리 정보 추출에 관한 방법을 제안한다. 거리 정보의 추출을 위한 스테레오 정합 방법 중 여러 대의 카메라를 사용함으로써 정합의 정확도를 높인 MBS(Multiple-Baseline Stereo) 방법이 있다. 그러나 MBS 방법은 정합창을 고려함으로써 깊이맵의 경계선 연장(boundary overreach) 문제를 가져왔고 또한 폐색 영역에 대한 적절한 처리 방법을 제시하지 않고 있다. 또한 정확도를 높이기 위하여 처리 시간의 증가를 가져왔다. 본 논문에서는 정합창을 사용함으로써 발생하는 깊이맵의 경계선 연장 문제를 해결하며 처리시간을 줄일 수 있는 방법론으로서 계층적 방법인 MR-MBS (Multi-Resolution MBS) 방법을 제시한다. 또한 폐색 영역에 대한 처리 방법으로 카메라 배치를 고려한 적응적 폐색 영역 처리 방법을 제안한다.