• 전기전자학회논문지
• /
• 제24권4호
• /
• pp.1050-1057
• /
• 2020

실감형 360도 미디어는 기존 영상보다 고품질, 초대용량으로 영상의 크기가 크며, 다양한 렌더링 방식을 사용하여 기존방식으로 이미지 처리할 경우 영상인식 속도가 느려지는 문제가 있다. 또한, 실감형 360도 미디어의 특성상 특정 장소에서 카메라를 고정시켜 한 장면만 촬영하는 경우가 대부분이기 때문에, 모든 영상에서 특징정보를 추출할 필요가 없다. 본 논문에서는 실감형 360 미디어의 프레임 추출과정, 프레임 다운사이징, 구형 형태의 렌더링 과정을 거치고, 렌더링 과정에서 영상을 16개 프레임으로 분할 캡처하여 캡처된 프레임에서 객체 정보가 많은 중앙 부분에서 픽셀당 RGB 벡터와 딥 러닝을 이용하여 객체를 추출한 뒤, 객체 특징정보를 이용하여 대표 프레임을 선정하는 방법을 제안한다.

• 한국콘텐츠학회논문지
• /
• 제21권8호
• /
• pp.79-88
• /
• 2021

코로나19로 인해 공연계가 심각한 위기에 직면하게 되었고 이를 해결하기 위한 방안 중 하나로 비대면 공연 영상화가 활발히 진행되고 있다. 그러나 비대면 공연영상은 몇 가지 문제를 드러내기 시작했다. 첫째, 경제적 이유로 고 퀄리티 촬영이 힘든 단체가 많고, 둘째, 공연의 특성을 느낄 수 없다는 것이다. 이를 해결할 방안으로 360도 VR공연영상이 부각되고 있다. 이에 본 연구는 360도 VR공연영상의 제작과정은 어떻게 진행 되는 지를 연극<공기 없는 세계>와 동화콘서트<자라는 자라> 공연을 통해 살펴보았다. 그 결과 '실제감을 통한 현장성'과 '촬영의 편이성', '배우연기의 연속성'이란 세 가지 효과를 확인할 수 있었다. 그와 더불어 '전문촬영업체의 부족', '비싼 관람 장비', '플랫폼의 부재', '카메라 기술력의 한계' 등 여러 문제점을 발견하였고, 이를 근거로 360도 VR공연영상의 활용을 위한 해결방안을 제안할 수 있었다.

• 한국전자통신학회논문지
• /
• 제13권6호
• /
• pp.1293-1300
• /
• 2018

$360^{\circ}$ 영상은 많은 영상정보를 담고 있어 유용하나, 눈에 보이는 물체의 방향과 그 물체의 소리가 들려오는 방향이 다른 경우 시청자에게 피로도를 느끼게 하여 감각적 이질감이 증대되어 그 활용도가 떨어지고 있다. 이에 본 논문에서는 $360^{\circ}$ 영상에서 시선에 따른 음향 정위가 얼마나 일치하는지를 백분율로 나타내는 기준을 제안하며, 제시한 영상 음향 정위 일치율을 이용하여 몰입도를 증대시키는 $360^{\circ}$ 영상의 제작 가능성을 제시한다. 제안한 영상 음향 정위 일치율은, 입체음향 콘텐츠 제작, 재생 솔루션의 정위 성능을 측정, 평가에 유용하고, 더욱 실감성 높은 시스템을 제작하는데 기여할 것으로 기대한다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2019년도 추계학술대회
• /
• pp.73-75
• /
• 2019

360°VR 영상은 카메라에서 촬영된 여러 영상들을 이어 붙이는 작업인 스티칭(Stitching)을 통하여 만들 수 있다. 스티칭은 영상들을 이어 붙이기 위해 각 영상의 특징점을 추출하는 특징점 추출, 특징점간 유사도를 비교하여 유사한 특징점끼리 매칭시키는 특징점 매칭, 특징점 매칭 과정에서 획득한 호모그래피 매트릭스를 이용한 이미지 와핑, 각 영상 간의 부자연스러운 경계선을 제거하는 블렌딩 과정을 거친다. 고품질의 360°VR 영상을 획득하기 위해서는 영상의 개수를 증가시킬 필요가 있고, 이로 인해 스티칭 과정에서 소요되는 시간이 증가한다. 본 논문에서는 카메라 센서 정보를 이용해 유사한 영상끼리 클러스터링하여, 한번에 스티칭이 진행되는 영상의 수를 감소시키고, 멀티 스레드를 이용하여 각 그룹의 스티칭을 병렬적으로 진행한 뒤, 최종적으로 스티칭하여 최종 360°VR 영상을 획득하는 과정을 제안한다.

• 디지털융복합연구
• /
• 제15권8호
• /
• pp.375-381
• /
• 2017

2017년 3월 16일 개봉한 미국 영화 미녀와 야수(Beauty and Beast, 2017)는 21일 동안에(4월6일 까지) 한국 국내에서 박스오피스를 4,273,401명으로 누적되었다. 이런 영화 흥행 수입을 따르면 영화 등 영상 시장이 급속도로 성장하고 있으며, 발달된 정보기술에 따라 PLF (Premium Large-Format) 영상의 관심도가 높아지고 있다. PLF 영상은 관객들에게 극대화된 몰입감을 선사할 수 있고 새로운 시각의 향연을 펼칠 수 있기 때문이다. 본 연구는 PLF 플랫폼에서 가장 중요한 이슈로 떠오르고 있는 아이맥스, 스크린 X 그리고 360도 서큘러 스크린을 중심으로 이 3 가지 PLF 플랫폼에 대한 개념과 특징을 분석 한 후 차이점을 비교 한다. 이 연구 결과에 따라 이 3가지 PLF 플랫폼에 대하여 더 쉽게 이해할 수 있고, 더불어 향후 PLF 영상이 관객들에게 극대화된 몰입감을 선사할 수 있는 콘텐츠를 제작하기 위한 특징들을 분석하고, 개념에 대한 연구를 하였으며 본 논문은 영상콘텐츠 관련 연구자와 산업계 종사자들에게 향후 도움이 될 수 있는 연구 논문으로 사료 될 것을 기대한다. 그리고 향후 각 PLF 영상 콘텐츠 제작 방식을 연구하며, 시각효과를 극대화한 콘텐츠에 대한 연구를 목표로 한다.

• 디지털콘텐츠학회 논문지
• /
• 제19권9호
• /
• pp.1631-1639
• /
• 2018

VR 360 영상 콘텐츠는 이전 영상 콘텐츠와는 달리 필연적으로 관객이 부분적인 감상을 하게 되므로, 이에 대한 새로운 영상 언어 연구가 필요하다. 본 연구에서는 특히 VR 360 영상 콘텐츠가 360도로 배경이 확장되므로, 그 안에서 사건 요소와 배경 요소의 적절한 배치가 관객들의 시선을 유도하는데 주요한 역할을 하게 될 것이라는 점에 주목하였다. 따라서 본 연구에서는 서사적 관점에서 사건 요소 및 배경 요소의 배치에 초점을 맞춰, 선정 사례들의 양상을 분석하였다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2022년도 하계학술대회
• /
• pp.839-842
• /
• 2022

실감적인 가상 현실을 위해서는 고화질의 360 도 영상 스트리밍이 필요하다. 그러나 이는 높은 대역폭과 연산량을 요구하기 때문에 일반적인 가상 현실 기기로는 감당하기 힘들다. 이를 보완하기 위한 360 도 영상 부호화 및 전송 기술이 활발히 연구되고 있으며, 대표적으로 사용자 시점 기반 타일 스트리밍 기법 등이 있다. 본 논문은 기존의 CTU 기반 스트리밍과 타일 기반 스트리밍과 함께 복호기 적응적인 단일 계층 타일 바인딩을 활용한 타일기반 스트리밍의 부호화 및 복호화 성능을 비교한다. 수행된 실험결과, 단일 계층 타일 바인딩을 활용한 타일 스트리밍 방법이 기존의 타일 스트리밍 기법에 비해 유사한 비트율 성능에 대비하여 복호화 시간에서 큰 이득을 볼 수 있음을 확인하였다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2021년도 하계학술대회
• /
• pp.112-115
• /
• 2021

최근 가상현실 및 증강 현실에 대한 관심도가 높아지면서, 깊이 추정, 객체 인식, 영상 분할 등의 다양한 컴퓨터 비전 알고리즘을 360° 영상에 적용하는 연구가 활발히 진행되고 있다. 이 중, 다수의 RGB 카메라를 활용하여 3 차원 정보를 추출하는 깊이 추정 기술은 보다 나은 몰입감을 제공하기 위한 핵심 기술이다. 그러나 깊이 추정 알고리즘의 객관적 성능 평가를 위한 정제된 360° 영상 데이터셋은 극히 부족하며, 이로 인하여 관련 분야 연구에 한계가 있다. 따라서 본 논문에서는 객관적인 알고리즘 성능 평가가 가능하며, 정제된 360° 동영상 데이터셋을 제안하고, 추후 다양한 360° 영상 응용 알고리즘 개발에 활용하고자 한다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2020년도 춘계학술발표대회
• /
• pp.600-603
• /
• 2020

360 영상은 시청자가 시야방향을 결정하는 3DoF(3 Degree of Freedom)를 지원한다. 본 연구에서는 다수의 360 영상에서 깊이 정보를 획득하고, 이를 DIBR (Depth -based Image Rendering) 기법을 사용하여 임의 시점 시청기능을 제공하는 6DoF(6 Degree of Freedom) 영상제작 기법을 제안한다. 이를 위하여 기존의 평면 다시점 영상기법을 확장하여 360 ERP 투영 영상으로부터 카메라의 파라미터 예측을 하는 방법과 깊이영상 추출 방법을 설계 및 구현하고 그 성능을 조사하였으며, OpenGL 그래픽스기반의 RVS(Reference View Synthesizer) 라이브러리를 사용하여 DIBR을 적용하였다.

• 전기전자학회논문지
• /
• 제24권2호
• /
• pp.529-535
• /
• 2020

4차 산업의 주요 기술로 실감형 360도 영상 콘텐츠가 주목받고 있다. 전 세계 실감형 360도 영상 콘텐츠의 시장 규모는 2018년 67억 달러에서 2020년 약 700억 달러까지 증가될 것이라고 전망하고 있다. 하지만 대부분 실감형 360도 영상 콘텐츠가 웹하드, 토렌트 등의 불법 유통망을 통해 유통되고 있어 불법복제로 인한 피해가 증가하고 있다. 이러한 불법 유통을 막기 위하여 기존 2D 영상은 불법저작물 필터링 기술을 사용하고 있다. 그러나 초고화질을 지원하고 두 대 이상의 카메라를 통해 촬영된 영상을 하나의 영상에 담는 실감형 360도 영상 콘텐츠의 특징 때문에 왜곡 영역이 존재하여 기존 2D 영상에 적용된 기술을 그대로 사용하기엔 다소 무리가 있다. 또한, 초고화질에 따른 특징점 데이터량 증가와 이에 따른 처리 속도 문제와 같은 기술적 한계가 존재한다. 본 논문에서는 이러한 문제를 해결하기 위하여 왜곡이 심한 영역을 제외한 객체 식별 영역을 선정하고, 식별 영역에서 딥 러닝 기술을 이용하여 객체를 인식하고 인식된 객체의 정보를 이용하여 특징 벡터를 추출하는 특징점 추출 및 식별 방법을 제안한다. 제안한 방법은 기존에 제안 되었던 스티칭 영역을 이용한 실감형 콘텐츠 특징점 추출방법과 비교하여 성능의 우수성을 보였다.