• Journal of Broadcast Engineering
• /
• v.23 no.5
• /
• pp.656-668
• /
• 2018

VR (Virtual Reality) is one of the important research topics in the field of multimedia application system. The quality of the visual data composed from multiple pictures depends on the performance of stitching technique. The stitching module consists of feature extraction, mapping of those, warping, seam finding, and blending. In this paper, we proposed a preprocessing scheme to provide the efficient mask for seam finder. Incorporating of the proposed mask removes the distortion, such as ghost and blurring, in the stitched image. The simulation results show that the proposed algorithm outperforms other conventional techniques in the respect of the subjective quality and the computational complexity.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2018.11a
• /
• pp.145-147
• /
• 2018

다수의 일반 카메라로 촬영한 영상들로 360도 영상을 제작하는 경우 다수의 영상 간 동일한 영역을 찾고 기하학 보정을 위한 영상 스티칭 기술이 필요하다. 영상 스티칭 기술은 여러 영상에서 추출한 특징점들의 유사도를 비교하여 영상들을 이어 붙여 큰 하나의 영상으로 만드는 것이다. 본 논문에서는 비콘이 부착된 공연장을 가정하여, 비콘을 통해서 촬영자의 위치를 대략적으로 파악하고, 사용자가 어플리케이션을 통하여 전송한 영상과 영상의 방위각, FOV(Field Of View)들을 이용하여 실내에서 촬영된 영상들을 스티칭 대상 영상들로 필터링하는 방법을 제안한다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2016.04a
• /
• pp.166-167
• /
• 2016

CCTV는 다양한 목적을 위해 24시간 영상을 녹화하지만 현재 시스템으로 사각지대 없는 CCTV 시스템은 다수의 카메라를 설치하여만 한다. 최근 360도 CCTV의 등장으로 동시에 사각지대 없는 촬영이 가능하지만 아직은 해상도, 이미지 변환과 같은 기술적인 개선 연구가 지속적으로 보완되어야 하는 상황이다. 본 논문에서는 천정, 바닥, 벽에 부착된 360도 CCTV 촬영된 이미지를 안드로이드 모바일 기기에서 변환할 수 있는 앱을 개발하여 이동중에 촬영영상을 모니터링할 수 있도록 한다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2016.04a
• /
• pp.171-174
• /
• 2016

2016년 CES(Consumer Electronic Show)의 가장 큰 이슈는 드론과 VR이었다. 드론을 사용한 다양한 산업 기술의 발전과 VR을 사용한 새로운 시각효과는 사람들에게 많은 관심을 불러일으켰다. 드론과 VR의 영상기술의 발전과 발맞추어 액션 카메라와 360도 카메라의 기술도 발달하고 있다. 본 논문에서는 Drone과 360도 카메라, VR을 사용한 드론뷰 콘텐츠를 설계한다. 드론뷰 콘텐츠란 드론을 사용하여 로드뷰를 촬영하는 것을 의미한다. 드론뷰 콘텐츠를 활용한 시스템은 사용자가 지도상에서 찾고자 하는 지점의 좌표나 주소를 입력하면 모바일과 VR을 통해 해당 위치의 영상정보를 보여줄 수 있다. 또한 본 논문에서는 naver, daum, google에서 제공하는 기존의 국내 로드뷰 서비스와는 차별화된 해당 콘텐츠의 특징에 대해 기술하였다. 마지막으로 해당 시스템의 구현방법에 대해 설명하며, 시스템의 차후 확장성에 대해 연구하였다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2019.11a
• /
• pp.252-255
• /
• 2019

본 논문에서 Equirectangular projection(ERP) 영상을 행동 인식 모델에 입력하기전 제안하는 전처리를 통하여 성능을 향상시키는 것을 보인다. ERP 영상의 특성상 행동 인식을 하는데 불필요한 영역이 일반적인 2D 카메라로 촬영한 영상보다 많다. 또한 행동 인식은 사람이 Object of Interest(OOI)이다. 따라서 객체 인식모델로 인간 객체를 인식한 후 Region of Interest(ROI)를 추출하여 불필요한 영역을 없애고, 왜곡 또한 줄어든다. 본 논문에서 제안하는 기법으로 전처리 후 CNN-LSTM 모델로 성능을 테스트했다. 제안하는 방법으로 전처리를 한 데이터와 하지 않은 데이터로 행동 인식을 한 정확도로 비교하였으며 제안하는 기법으로 전처리 한 데이터로 행동 인식을 한 경우 데이터의 특성에 따라 다르지만, 최대 61%까지 성능향상을 보였다.

• Broadcasting and Media Magazine
• /
• v.24 no.2
• /
• pp.63-72
• /
• 2019

디스플레이 소자 평면에서부터 육안으로 관찰 가능한 입체영상 영역까지의 물리적인 거리 조절을 바탕으로 공간상에서 재현될 수 있는 3차원 영상에 대한 기대감은 다양한 형태의 디지털 홀로그래픽 디스플레이를 개발하는 주요한 요인이 되어 왔다. 공간 광 변조기의 픽셀 크기에 의존하는 디지털 홀로그램 영상의 시야각과 픽셀 수에 의존하는 홀로그램 영상 크기로 인한 제약 사항들을 극복하는 방법을 토대로 다수의 시청자가 동일한 3차원 영상을 관찰할 수 있는 홀로그래픽 디스플레이에 대한 연구가 나타나기 시작하였다. 본 고에서는 테이블 형태의 공간상에서 관찰 가능한 디지털 홀로그램 기술에 관한 연구 동향을 소개하고자 한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2020.07a
• /
• pp.47-50
• /
• 2020

최근 Panorama와 360도 영상이 대표되는 몰입형(Immersive) 미디어 콘텐츠의 사용이 증가하고 있다. 몰입형 영상 콘텐츠는 사용자에게 현장감을 제공해야 하지만, 촬영 카메라 간의 시차(Parallax)로 인해 영상 콘텐츠에서 시차 왜곡이 발생할 수 있고, 이는 사용자의 콘텐츠 몰입을 제한하기 때문에 해당 영상 콘텐츠의 제작 기술인 영상 스티칭의 높은 정확도가 요구되고 있다. 지금까지 스티칭 영상의 시차 왜곡을 줄이기 위하여 다중 호모그래피 추정 방법과 Seam Optimization 방법이 제안되었지만, 영상 내 사물 배치에 따라 기술 적용이 제한될 수 있다. 이에 본 논문에서는 Mask R-CNN을 활용하여 사물을 세그먼트화하고, 사물의 종류에 따라 각각 다른 가중치 적용을 통해 시차 왜곡을 방지하며, 영상 내 사물의 배치에 따라 시차 왜곡이 발생할 상황에서는 사용자의 인지 중요도가 낮은 사물로 시차 왜곡을 유도하는 영상 스티칭 방법을 제안한다.

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2022.10a
• /
• pp.481-483
• /
• 2022

This study was based on 360-degree VR images, the next-generation media representative. Among the elderly living in nursing homes with low cognitive ability, we would like to study ways to effectively search maps using 2D images when searching maps directly through user scenarios.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2016.11a
• /
• pp.126-128
• /
• 2016

최근 VR은 다양한 장르에 콘텐츠를 융합함으로써 사용자에게 공간의 제약 없이 현장감 제공이 가능해짐에 따라 관심을 받기 시작했다. 또한 실감 콘텐츠 기술 확보가 가능해짐에 따라 다양한 사용자 체험형 콘텐츠 개발도 가능해지고 있다. 하지만 국내에서 VR산업은 게임분야를 제외하고 활용정도가 낮다. 이에 본 논문에서는 실감형 가상 여행 콘텐츠를 제작하여 HMD에 디스플레이하는 방법을 제안 및 구현한다. 360도 영상과 VR로 표출했기 때문에 개인방송 여행 콘텐츠에서 사용자에게 현지에서 직접 경험하는 듯한 몰입감과 현장감을 제공하고, 사용자 인터페이스를 접목하여 양방향 통신이 가능하도록 설계하여 콘텐츠를 체험하는데 편리성을 극대화하였다.

• Journal of Korea Multimedia Society
• /
• v.21 no.2
• /
• pp.289-299
• /
• 2018

The 360 degree panoramas are picture of a wide range of images on one screen, so we can see a fairly wide range at a time. In particular, cylinderical panoramas are the most widely used spherical image, and its left and right viewing angles reach 360 degree, so you can observe front, rear, left, and right at once. Using 360 degree panorama, all directions can be monitored at the same time, so all directions can be effectively monitored compared to other methods. In this paper, we develop a system to recognize and track the movement of moving objects on a 360 degree panorama, and then present and verify the experimental results. For this goals, first, we developed a system to recognize moving objects in 360 degree panorama using DoF(Difference of Frame) algorithm. Second, based on the TLD algorithm, we developed an application that can track a specific single moving object in a 360 degree panorama and presented the experimental results.