• 전자공학회논문지CI
• /
• 제49권3호
• /
• pp.27-33
• /
• 2012

텔레프레즌스(tele-presence)와 원격조정(tele-operation) 기술은 멀리 떨어진 사용자에게 몰입감이 높은(immersive) 장면이나 모바일 로봇 등의 제어 환경을 제공한다. 본 논문에서는 호모그래피(homography) 정보 기반의 카메라 추적기술을 이용한 텔레프레즌스 시스템이 제안된다. 먼저 카메라가 탑재된 HMD(head mounted display)를 착용한 사용자의 머리 움직임을 카메라 추적기술로 분석한다. 그리고 전방향(omni-directional) 카메라를 장착한 로봇으로부터 입력되는 파노라마 영상에서 사용자의 시야(field of view)에 해당하는 장면을 생성하여 HMD를 통해 디스플레이한다. 사용자의 움직임을 추정하는 과정에서 3차원 평면으로 구성된 공간의 호모그래피 정보를 이용하며, 실제로 측정된 3차원 데이터를 기준으로 마커기반의 ARToolkit을 이용하는 방법과 호모그래피 기반 방법의 정확도를 각각 비교하였다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2011년도 하계학술대회
• /
• pp.417-419
• /
• 2011

근래 다양한 형태의 멀티미디어 콘텐츠가 광범위하게 소비됨에 따라 단방향의 평면적 콘텐츠가 제공하는 시점의 한계에서 벗어나 사용자에게 보다 다양한 시점의 영상을 제공함으로써 사용자가 원하는 시점을 선택할 수 있는 실감형 콘텐츠에 대한 욕구가 증가하고 있다. 이러한 실감형 콘텐츠 중 하나인 파노라마 영상은 다수의 카메라를 통해 획득된 영상들을 하나의 영상으로 이어 붙여 넓은 시야의 영상을 제공함으로써 증대된 현장감과 몰입감을 제공하며 사용자 시점의 자유도를 증가시킬 수 있다. 본 고에서는 다수 영상의 스티칭 시 발생하는 고스팅 영향(ghosting effect)를 최소화 하기 위한 칼럼 시차 최소화 (Column Disparity Minimaization)기반의 멀티밴드 블랜딩(Multiband blending)을 소개 하고자 한다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 1998년도 가을 학술발표논문집 Vol.25 No.2 (2)
• /
• pp.550-552
• /
• 1998

스포츠 비디오는 역동적인 특성과 비정형적인 구조를 가지고 있으므로 뉴스와 같은 정형적인 비디오와는 달리 분석이 쉽지 않다. 본 논문에서는 이러한 어려움을 극복하기 위하여 축구 경기에서 하이라이트를 추출하여 색인하고 이에 대하여 선수 위치 추적, 파노라마 영상 구성, 경기장 모델 상에서의 선수 이동 궤적 도시 등을 수행하는 방법을 제안한다. 이를 위하여 제한된 색상의 HSV 영상을 구성하여 골대와 선수 위치를 추적하고, 움직임 벡터를 추출하여 카메라 동작을 분석하였으며 경기장 모델 구성을 위해 경기장 내의 특징점을 추출하여 투영 변환을 수행하였다. 실험 결과를 통해서 제안된 방법이 축구 경기 비디오 분석에 효율적으로 이용될 수 있음을 확인할 수 있다.

• 디지털콘텐츠학회 논문지
• /
• 제8권3호
• /
• pp.365-370
• /
• 2007

본 논문에서는 환경 탐색을 위한 영상 기반 환경을 자동으로 생성하기 위한 새로운 모자이크 기법을 제안 한다. 제안된 방법은 영상의 투영 변환 행렬을 이용하여 한 영상 위에 다른 영상을 합성 한다. 특징 모델을 기반한 정합을 이용하여 영상을 모자이크를 구현하고 구맵핑을 통해 시각에 따라 변형되어 몰입감을 주는 영상 기반 환경을 생성한다, 특히, 취득한 영상간의 카메라 회전 성분에 강건한 기준 특징 벡터 필터링 방법을 제안하며 실험을 통해 그 유용성을 검증한다.

• 정보처리학회논문지B
• /
• 제8B권4호
• /
• pp.411-418
• /
• 2001

비디오 하이라이트(highlights)는 원래의 비디오 보다 짧고 많은 양의 의미를 갖는다. 기존의 파노라마 형태의 추상화 기법은 여러 프레임을 하나의 프레임으로 모자이크하는 형태이었고, TV 드라마 하이라이트 방법은 카메라의 이동이나 특수효과에 의존하기 때문에 스포츠 비디오에 적용은 부적합하다. 이 논문에서는 축구 비디오를 대상으로 시각정보와 자막을 이용하는 새로운 비디오 하이라이트 생성 방법과 이벤트 기반 비디오 인덱싱 방법을 제안한다. 하이라이트 생성은 하이라이트 생성 규칙에 따라 자막에 의해 추출된 TIT을 중심으로 시각정보에 의해 추출된 샷을 합성하여 생성하였고, 인덱싱은 자막으로 추출된 샷은 주요소로, 시각정보에 의해 추출된 샷은 부가적 요소로 구성하였다. 실험에서는 샷 추출기법 중 대표적인 컬러히스토그램과 $\chi$$^2$히스토그램과의 성능을 비교하여 제안한 하이라이트 기법이 다른 방식보다 우수함을 증명하였다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2018년도 추계학술발표대회
• /
• pp.504-508
• /
• 2018

최근 ICT 산업게는 가상현실에 주목하고 있다. 시공간의 제약을 극복하고 실제 체험하는것과 비슷한 효과를 제공하는 VR 콘텐츠는 향후 유통 분야에도 폭넓은 활용이 예상된다. 대부분의 O2O 서비스에서 사용하고 있는 VR 기술은 단순히 360도 파노라마 형식의 사진을 보여주거나 VR 카메라로 중계 방송을 하는 콘텐츠가 대부분이었다. 따라서 본 논문에서는 3차원 VR 영상 스트리밍 서비스를 이용한 콘텐츠를 O2O 부동산 중개 서비스에 접목하여 360VR 컨텐츠 확장 가능성을 제시하고자 한다.

• 한국멀티미디어학회논문지
• /
• 제24권4호
• /
• pp.538-549
• /
• 2021

In this paper, we introduce a technique for 360-degree panoramic video streaming with multiple virtual cameras in real-time. The proposed technique consists of generating 360-degree panoramic video data by ORB feature point detection, texture transformation, panoramic video data compression, and RTSP-based video streaming transmission. Especially, the generating process of 360-degree panoramic video data and texture transformation are accelerated by CUDA for complex processing such as camera calibration, stitching, blending, encoding. Our experiment evaluated the frames per second (fps) of the transmitted 360-degree panoramic video. Experimental results verified that our technique takes at least 30fps at 4K output resolution, which indicates that it can both generates and transmits 360-degree panoramic video data in real time.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2022년도 하계학술대회
• /
• pp.847-850
• /
• 2022

최근 가상 현실(Virtual Reality), 파노라마(Panorama) 영상 등에 관한 관심과 수요가 증가함에 따라 고해상도 영상을 얻기 위한 영상 스티칭(Image Stitching)에 관한 연구가 활발하게 진행되고 있다. 영상 스티칭은 다수의 영상을 하나의 영상으로 합성해 카메라의 좁은 시야각 문제를 해결함으로써 사용자에게 몰입감과 현장감을 제공할 수 있는 기술이다. 영상 스티칭에 있어 특징점 추출 및 매칭 과정의 정확도는 스티칭 영상의 품질을 결정짓는 핵심적인 요소이지만, 기존의 특징점 추출 및 매칭 방법은 밝기가 어둡고 선명도가 낮은 영상의 스티칭에서 정확도가 저하될 수 있고 생성된 스티칭 영상의 품질 또한 저하될 수 있다는 제한 사항이 있다. 이에 본 논문에서는 앞선 제한적 영상에 대하여 특징점 추출 및 매칭의 정확도를 높여 스티칭 영상의 품질을 높이기 위하여 SuperPoint와 SuperGLUE를 활용한 입력 영상의 밝기 적응형 영상 스티칭 방법을 제안하고자 한다.

• 방송공학회논문지
• /
• 제25권5호
• /
• pp.685-697
• /
• 2020

파노라마(Panorama) 및 360도 영상과 같은 몰입형(Immersive) 미디어 영상은 영상 내 공간을 사용자가 직접 방문한 것 같은 현장감을 제공해야하므로 실제 세계의 모습을 사실 그대로 나타낼 수 있어야 한다. 그러나 파노라마 및 360도 영상에서는 촬영 카메라들간의 시차(Parallax)로 인해 사물이 사라지거나 중복해서 나타나는 현상이 나타나며, 이와 같은 시차 왜곡은 사용자의 콘텐츠 몰입을 방해할 수 있다. 이에 따라서, 시차 왜곡을 극복하기 위한 많은 동영상 스티칭 알고리즘이 제안되고 있지만, Object detection 모듈의 낮은 성능과 Seam 생성 방식 등의 제한으로 여전히 시차 왜곡이 발생하고 있다. 이에 본 논문에서는 기존 동영상 스티칭 기술의 제한 사항을 분석하고, 해당 동영상 스티칭 기술의 제한을 극복하기 위하여 LDPM(Local Differential Pixel Mean) 영상 평가를 활용한 동영상 스티칭의 시차 왜곡 검출 및 정정 방법을 제안한다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제23권5호
• /
• pp.9-17
• /
• 2017

시청자의 시야를 콘텐츠로 가득 채워주어 강한 몰입감을 제공하는 다면 영상 제작을 위해서는 다수의 카메라를 이용한 촬영이 요구된다. 이러한 촬영 시나리오에서는 다수의 카메라에 의해 촬영되고 있는 화면들이 하나의 콘텐츠로써 어떻게 보여질지 혹은 실제 상영관에서 어떻게 보여질지 확인하는 모니터링 과정이 매우 중요하다. 기존의 특수 포맷 영상 촬영에 관한 연구들은 모두 스테레오스코픽 입체 영상이나 파노라마 영상 등 각자의 목적에 집중하여 이루어져 왔으며, 최근 확산되고 있는 세 개의 면을 이용한 다면 상영관에 최적화된 콘텐츠 제작에 관한 연구는 부재하다. 본 논문에서는 세 대의 카메라를 제어할 수 있는 리그와 다면 영상 포맷에 특화된 모니터링 소프트웨어를 이용한 다면 콘텐츠 현장 촬영 시스템을 제안한다. 제안된 리그는 카메라 간의 각도를 정밀하게 조절하여 세 대의 카메라로 넓은 화각을 촬영할 수 있으며, 원격 통신을 통해 모니터링 소프트웨어와 연동된다. 모니터링 소프트웨어는 실시간으로 들어오는 영상들을 자동으로 정렬해주며, 수신 받은 리그의 각도에 따라 영상의 정렬이 자동으로 업데이트된다. 또한 촬영 시에 얻어진 정렬 정보를 후반작업에 사용할 수 있게 함으로써, 제작 효율을 크게 향상시킨다.