• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2017.11a
• /
• pp.32-33
• /
• 2017

최근 영상처리 기술 및 방송통신의 발전으로 실감이 극대화되는 실감형 서비스에 대한 사용자 요구가 증가하였다. 이에 실감형 서비스로 자유선택시점 서비스에 대한 연구가 진행중이다. 자유선택시점 서비스는 사업자가 일반적으로 제공하는 뷰 외에 사용자가 원하는 뷰를 선택해 시청할 수 있는 서비스이다. 자유선택시점 서비스를 제공하기 위해서는 하나의 콘텐츠를 다양한 시점으로 취득해야하며, 사용자가 원하는 시점에 해당되는 영상을 실시간으로 반응해 제공해야한다. 본 논문에서는 자유선택시점 비디오의 실시간 시점 이동을 위한 수신 구조를 설계하고 제안한다. 제안하는 수신 구조는 시청자의 시점 이동에 맞춰 실시간으로 시점을 이동하여 사용자가 원하는 시점의 영상을 재생할 수 있다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2018.06a
• /
• pp.11-14
• /
• 2018

본 논문에서는 실시간 고화질 360 영상 전송을 위해 사용자 시점에 기반한 타일 분할 기법을 적용하고 360 영상을 가상현실 기기 화면에 표현하여 주관적 화질 평가를 위한 플랫폼을 구현한다. 사용자 시점에 기반한 고화질 360 영상 전송을 위한 방안으로, 분할된 영상에서 전송되지 않은 영상으로의 움직임 참조 문제를 해결하기 위해 적용된 MCTS (motion constrained tile sets) 기술과 실시간으로 사용자 시점에 위치한 타일들만 추출할 수 있도록 미리 구성된 타일 정보들을 포함하는 EIS (extraction information sets) SEI, 사용자 시점에 위치한 타일 정보만 추출해내고 영상을 분할 및 추출해주는 Extractor, 실제 추출된 영상 정보를 이용해 가상현실 기기 화면에 표현하는 방법에 대한 구현 내용을 설명한다. 따라서 제안된 구현물을 기반으로 고화질 360 영상 전송을 수행하면, 사용자 시점 영역의 영상만 전송하여 불필요한 영상 전송을 하지 않게 되어 화질 대비 낮은 대역폭의 향상된 실시간 전송 영상을 얻을 수 있다.

• Information and Communications Magazine
• /
• v.28 no.6
• /
• pp.11-20
• /
• 2011

근래 다양한 형태의 멀티미디어 콘텐츠가 광범위하게 소비됨에 따라 단방향의 평면적 콘텐츠가 제공하는 시점의 한계에서 벗어나 사용자에게 보다 다양한 시점의 영상을 제공함으로써 사용자가 원하는 시점을 선택할 수 있는 실감형 콘텐츠에 대한 욕구가 증가하고 있다. 이러한 실감형 콘텐츠 중 하나인 파노라마 영상은 다수의 카메라를 통해 획득된 영상들을 하나의 영상으로 이어 붙여 넓은 시야의 영상을 제공함으로써 증대된 현장감과 몰입감을 제공하며 사용자 시점의 자유도를 증가시킬 수 있다. 사용자에게 파노라마 서비스를 제공할 때 마우스, 리모콘과 같은 정형적인 인터페이스가 아니라 사용자의 선호도에 따라 손쉽게 파노라마 공간을 제어할 수 있는 사용자 친화적인 인터페이스 기술이 함께 제공된다면 사용자가 느낄 수 있는 현실감과 몰입감은 배가될 것이다. 따라서 본 고에서는 현존하는 파노라마 기술 및 사용자 인터페이스 기술의 동향에 대해 알아보고, 상기 기술들의 결합을 통해 보다 사실적인 미디어 소비 환경을 제공하기 위한 사용자 친화적인 고품질의 휴먼융합형 파노라마 서비스에 대해 소개하고자 한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2021.06a
• /
• pp.242-245
• /
• 2021

시청자의 시점 위치를 선택하여 360VR 콘텐츠를 경험하는 다중시점 또는 자유시점 360VR 콘텐츠의 전송은 매우 높은 대역폭을 소비하게 된다. 특히 다중 사용자가 존재하는 셀룰러 환경에서는 특정 사용자에게 한정된 대역폭만을 할당할 수 있으므로 불가피하게 전송 품질 악화 또는 전송 지연을 겪게 된다. 다중시점(multi-viewpoint) 360VR 콘텐츠의 경우 시청자가 시점의 위치를 변경하면 해당 위치의 콘텐츠를 전송하므로, 한정된 대역폭이 주어지는 통신환경에서 시점을 이동할 때 마다 큰 전송 지연을 겪게되어 사용자 경험이 매우 떨어지는 것을 예상할 수 있다. 본 논문에서는 다시점 360 비디오에서 시점 변경을 시도할 때 전송지연을 줄이기 위하여 주변 위치의 영상을 적절히 Pre-Loading 하는 전송방식을 고려하고, 실질적인 5G 네트워크 환경에서 시점 변환에 따른 지연시간 성능을 분석하였다. 특정 수준 이하로 지연시간을 낮추기 위해서는 사용자 이동패턴에 대한 적절한 예측 기법이 요구되며, 정확도에 따른 지연시간 감소를 실험을 통하여 확인하였다.

• Journal of Digital Convergence
• /
• v.18 no.6
• /
• pp.93-98
• /
• 2020

In this paper, we proposed a technique in which subtitles are followed according to changes in the user's viewpoint in 360 VR. Create a Sphere object in Unity's Scene and insert a 360-degree image on the surface of the Sphere object. At this time, the ReverseNormals script is used to convert the viewpoint to the inside. The SightOrbitproved script is used to modify the camera view. Use this script to set the environment in which subtitles can move depending on the viewpoint. Next, add the 3D text (subtitle) that the user wants to the lower layer of the main camera and build a 360 VR object. The 3D text subtitles implemented through this study were compared according to the change of the user's viewpoint. As a result, as the viewpoint changes, normal subtitles flow out of line of sight according to the user's point of view, but 3D Text subtitles move according to the user's point of view, and it can be seen that the user can always view the subtitles.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• fall
• /
• pp.197-200
• /
• 2021

몰입형 고품질 가상 현실 영상 스트리밍을 위한 360도 영상 부호화 및 전송 기술 중 하나로 사용자 시점 기반 타일 스트리밍 기법이 활발히 연구되고 있다. 360도 영상은 용량이 크기 때문에 개별 타일 기반 스트리밍 방법을 사용해 사용자 시점만 보내는 것이 효율적이다. 본 논문은 시점 기반 가상 현실 영상 복호화 시스템을 위한 복호기 적응적 타일 클러스터링 알고리즘을 제안한다. 제안하는 방법은 클라이언트의 복호기가 최대로 복호화 가능한 해상도를 탐색한 후, 사용자 시점 데이터와 복호기 적응적 타일 클러스터링 알고리즘을 이용해 클러스터화할 복수 개의 사용자 시점 타일들의 목록을 생성한 후, 타일 병합기를 이용해 타일들을 병합하여 클러스터 비트스트림을 생성한다. 이후 클라이언트는 병합된 클러스터 비트스트림들을 복호화한 후 사용자 시점을 생성한다. 제안하는 방법을 이용하면 클라이언트의 복호기 환경에 제약받지 않는 복호화가 가능하며, 제안하는 방법 중 하나인 4K_clustering 방법의 경우 8%의 복호화 속도 개선 효과를 얻을 수 있어 몰입형 고품질 가상 현실 영상을 위한 실시간 타일 스트리밍이 가능하다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2011.07a
• /
• pp.539-540
• /
• 2011

IPTV와 같은 양방향성을 가지는 방송 시청 환경에서 시청자들이 다수의 카메라로 획득된 다양한 시점의 방송 콘텐츠를 능동적으로 소비할 수 있도록 시점제어 서비스 플랫폼을 개발하였다. 시점제어 서비스 플랫폼은 사용자의 인터랙션에 따라 변화가 일어나는 장면을 저작하기 위한 시점제어형 장면 저작도구와 사용자의 인터랙션에 따라 장면을 재생하는 시점제어형 콘텐츠 재생기로 구성된다. 상기 장면 구성을 위해서 본 논문에서는 MPEG-4 LASeR 표준을 이용하였으며, 장면 정보와 AV 엘리먼트리 스트림을 포함하는 파일 포맷으로 ISO 베이스 미디어 파일 포맷을 사용하였다. 한편 저작자의 의도에 따라 장면을 자유롭게 구성할 수 있는 시점제어형 콘텐츠를 기존 TV 리모콘으로 제어하기 불편한 점이 있으므로, 사용자의 시선으로 장면을 제어할 수 있도록 시선추적 기술을 개발하였다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2018.06a
• /
• pp.92-95
• /
• 2018

가상 현실을 위한 360 영상 비디오 전송기술이 활발히 연구되고 있다. 그러나 현재 가상현실 기기의 컴퓨팅 연산능력과 대역폭은 고화질 360 영상을 재생하기에 한계가 있다. 이 한계를 극복하기 위해 본 논문은 High Efficiency Video Coding (HEVC)와 Scalability Extension of HEVC (SHVC)를 활용하여 타일 기반의 360 도 영상 전송 기법을 제안한다. 제안하는 HEVC 와 SHVC 인코더는 타일을 독립적으로 전송 할 수 있는 비트 스트림을 생성한다. 제안하는 추출기는 사용자 시점에 해당하는 타일의 비트 스트림을 추출한다. 제안하는 기법에 의해 추출된 SHVC 비트스트림의 기본계층은 전체화면을 나타내며, 강화계층은 사용자 시점에 해당하는 타일로 구성된다. 제안하는 HEVC 인코더를 사용할 때에는 저화질과 고화질을 따로 인코딩하여 고화질만 사용자 시점에 해당하는 타일을 추출한다. 전체화면을 고화질로 보내는 대신에 전체화면을 저화질로, 사용자화면을 고화질로 보내기 때문에 제안하는 기법은 디코더의 컴퓨팅 연산과 네트워크 bitrate 를 대폭 줄일 수 있다. 본 제안 기법의 실험 결과는 전체화면 전송 대비 47%이상의 bitrate 를 줄인다.

• 한국게임학회지
• /
• v.6 no.1
• /
• pp.48-51
• /
• 2009

디지털콘텐츠 산업분류체계를 비롯한 기존 방식으로는 현재의 디지털콘텐츠를 통찰력 있게 보기 힘듭니다. 이는 디지털콘텐츠 일반에 대한 인식의 틀이 부실한 탓입니다. 넓은 의미의 텍스트에서, 시점(視點)은 인식의 틀입니다. 문학과 미술, 영화와 관련된 콘텐츠 하부영역에서는 시점 연구가 체계적으로 이루어져 왔습니다. 이러한 시점 연구결과들을 통합하고 정리하여 디지털콘텐츠에 접목시켰습니다. 연구자는 콘텐츠와 그것의 사용자에 대한 관계를 두가지 기준으로 구분하였습니다. 하나는 콘텐츠와 사용자 자아인 페르소나 사이에 성립되는 '맥락인지적시점(ContextualView)'이고 나머지 하나는 콘텐츠를 비추는 눈인 '시각적시점(CameraView)'입니다. 맥락인지적시점은다시 '인물', '상대', '관객'으로 구분하였고 시각적시점은 '일인칭', '이인칭', '삼인칭'으로구분하였습니다. 그리고 이를 씨실과 날실로 연결하여 'CCmatrix'라 하였습니다. 그리고 월드 오브워크래프트를 'CCmatrix'로 분석하고 캐릭터 수준별로 일정한 패턴을 발견하였습니다. 또 다른 활용으로는 디지털콘텐츠의 시점역사를 정리하고 활용가능성을 보였습니다.

• Journal of the Institute of Electronics Engineers of Korea SP
• /
• v.45 no.4
• /
• pp.22-31
• /
• 2008

In this paper, we propose a new approach for efficient multiview stereo matching and virtual view generation, which are key technologies for 3DTV. We propose semi N-view & N-depth framework to estimate disparity maps efficiently and correctly. This framework reduces the redundancy on disparity estimation by using the information of neighboring views. The proposed method provides a user 2D/3D freeview video, and the user can select 2D/3D modes of freeview video. Experimental results show that the proposed method yields the accurate disparity maps and the synthesized novel view is satisfactory enough to provide user seamless freeview videos.