• 방송공학회논문지
• /
• 제13권6호
• /
• pp.930-940
• /
• 2008

본 논문은 동기화된 다중화 기법을 사용하는 고화질 다시점 비디오 전송 시스템의 프로토타입을 제안한다. 제안된 동기화된 다중화 기법은 비디오 획득 과정에서 동기화를 고려하고 전송하는 동안의 상호적인 시점 선택을 위한 다중화를 고려한다. IEEE 1394 인터페이스를 통해 다수의 HDV 캠코더들로부터 비디오 획득시의 동기화를 위하여 카메라와 서버 사이의 전역시간 (global time)을 사용하여 MPEG-2로 부호화된 비디오 스트림들 간의 기준 시간 차이를 추정(예측)하고 MPEG-2 시스템의 시간 모델을 수정함을 통하여 비디오 스트림들의 기준 시간 차이를 보정한다. 이와 함께 상호적인 시점 전환을 위해서 MPEG-2 TS (transport stream)에서 다중화를 수행한다. 최종적으로 제안하는 동기화된 다중화 기법을 사용하여 사용자들은 동기화된 고화질 시점 비디오를 재생할 수 있다.

• 한국통신학회논문지
• /
• 제34권10B호
• /
• pp.1093-1103
• /
• 2009

본 논문에서는 효율적인 보조 정보 생성을 통한 새로운 분산 다시점 비디오 코딩 기법을 제안한다. 분산 비디오 코딩은 원영상과 디코더에서 생성한 보조 정보 간의 오차를 채널 코딩 기법으로 정정한다. 따라서 보조 정보를 정확히 만들수록 분산 비디오 코딩의 성능은 좋아지게 된다. 제안한 기법에서는 깊이지도를 기반으로 하는 다시점 비디오 코딩에 분산 비디오 코딩 기법을 적용한다. 또한 깊이지도를 이용한 3차원 워핑을 통해 인접한 시점의 영상으로부터 보조 정보를 생성하고, 3차원 워핑과 시간 축 상의 인접한 영상을 이용하는 MCTI(motion compensated temporal interpolation)를 효율적으로 혼합하여 사용한다. 실험 결과 제안한 기법으로 생성한 보조 정보는 MCTI와 3차원 위핑을 따로 사용한 방법보다 평균 0.97dB의 PSNR이 향상되었음을 알 수 있었다. 또한 R-D 곡선 상에서 동일 PSNR 대비 평균 8.01%의 비트율이 감소되었다.

• Journal of Electrical Engineering and Technology
• /
• 제9권5호
• /
• pp.1762-1773
• /
• 2014

In this paper, a distributed image coding scheme for multi-view video through an efficient generation of side information is proposed. A distributed video coding technique corrects the errors in the side information, which is generated with the original image, by using the channel coding technique at the decoder. Therefore, the more correct the generated side information is, the better the performance of distributed video coding. The proposed technique is to apply the distributed video coding schemes to the image coding for multi-view video. It generates side information by selectively and efficiently using both 3-dimensional warping based on the depth map with spatially adjacent frames and motion-compensated temporal interpolation with temporally adjacent frames. In this scheme the difference between the adjacent frames, the sizes of the motion vectors for the adjacent blocks, and the edge information are used as the selection criteria. From the experiments, it was observed that the quality of the side information generated by the proposed technique was improved by the average peak signal-to-noise ratio of 0.97dB than the one by motion-compensated temporal interpolation or 3-dimensional warping. The result from analyzing the rate-distortion curves revealed that the proposed scheme could reduce the bit-rate by 8.01% on average at the same peak signal-to-noise ratio value, compared to previous work.

• 한국정보과학회논문지:컴퓨팅의 실제 및 레터
• /
• 제13권4호
• /
• pp.205-212
• /
• 2007

본 논문에서는 시점변환이 가능한 고화질 다시점 비디오 전송 시스템의 디자인 및 구현에 관해 소개한다. 다시점 비디오는 기존의 방송 시스템에 실감성과 몰입감을 증가시키는 차세대 방송 컨텐츠로 각광 받고 있다. 하지만 다시점 비디오 전송 시스템을 구축하기 위해서는 고비용의 하드웨어 컴포넌트들이 필요하고 충분한 대역폭이 요구된다. 본 프로토타입 시스템은 고비용 및 전송 대역폭의 문제를 해결하기 위해서 소프트웨어 기반의 시스템 컴포넌트와 IP 멀티케스트를 이용한 전송에 중점을 둔다. 또한 유동적으로 시점 및 사용자의 수를 화장할 수 있는 시스템 디자인을 고려한다. 본 논문에서는 소프트웨어 기반의 시스템 컴포넌트로 다중화와 역다중화의 구현과 얼굴 추적을 통한 시점전환 기법을 소개한다. 또한 선도망/연구망으로 구성된 실제 네트워크 상황에서 전송 시현을 통해 사용자에게 실감성과 몰입감을 제공할 수 있음을 보여준다.

• 한국멀티미디어학회논문지
• /
• 제17권3호
• /
• pp.333-341
• /
• 2014

다시점 비디오는 하나의 3차원 장면을 여러 시점에서 다수의 카메라로 촬영한 동영상으로 다시점 비디오 부호화는 카메라의 수에 비례하여 데이터의 양이 증가하기 때문에 계산량을 줄일 수 있는 다시점 비디오 부호화 기술이 필요하다. 본 논문에서 다시점 비디오의 부호화를 위한 움직임 추정의 계산량을 줄이면서 화질을 유지하는 움직임 추정 기법을 제안한다. 제안한 움직임 추정 기법은 움직임 벡터의 분포 특성을 이용한 효과적인 초기 종료 움직임 추정 기법이다. 제안한 움직임 추정기법은 계층적 움직임 추정 기법으로 다중 사각형 탐색 패턴, 래스터 탐색 패턴, 수정된 다이아몬드 탐색 패턴 그리고 작은 다이아몬드 탐색으로 이루어져있다. 제안한 기법의 성능은 JMVC의 고속 움직임 추정 기법인 TZ 탐색 기법과 전역 탐색 기법(FS)의 성능과 비교한 경우, 영상 화질과 비트량을 비슷하지만 움직임 추정 속도를 각각 약 1.7~4.5배, 90배 향상시킨다.

• 한국차세대컴퓨팅학회논문지
• /
• 제14권6호
• /
• pp.7-14
• /
• 2018

다중 뷰 비디오로부터 두드러진 정보 추출은 인터뷰, 인트라 뷰간 상관관계와 계산 비용 때문에 매우 어려운 영역입니다. 매우 높은 계산 복잡성을 지닌 멀티 뷰 비디오에서 키프레임을 추출하기 위해 개발된 몇 가지 기술이 있습니다. 이 논문에서, 우리는 내부에 존재하는 엔트로피와 복잡한 정보를 사용하여 멀티 뷰 비디오의 키프레임 추출 접근 방식을 제시합니다. 첫 번째 단계에서는 프레임 사이의 SSIM값을 기반으로 각 보기에서 전체 비디오의 대표 샷을 추출합니다. 두 번째 단계에서는 서로 다른 보기의 모든 샷 프레임에 대한 엔트로피와 복잡성 점수가 계산됩니다. 마지막으로 엔트로피와 복잡성 점수가 가장 높은 프레임은 키 프레임으로 간주됩니다. 제안된 시스템은 사용 가능한 Office벤치마크 데이터 세에서 주관적으로 평가되며, 정확성과 시간 복잡성의 측면에서 결과는 편리합니다.

• 인터넷정보학회논문지
• /
• 제20권1호
• /
• pp.47-55
• /
• 2019

Free-viewpoint video (FVV) service provides multi viewpoints of contents and synthesizes intermediate video files which are not captured on some view angles so that enables users to watch as they choose wherever they want. Synthesizing video is necessary technique to provide FVV video service, because every video of the FVV contents for different view angles cannot be stored to the content server physically. For the reason, fast view synthesis can improve the quality of video service and increase user's satisfaction. One of the studies for FVV service, a method was proposed to transmit FVV service based on DASH (Dynamic Adaptive Streaming over HTTP). There is big advantage on using DASH that it is commonly used to transport video service. However, the method was only a conceptual proposal, so it is difficult to implement the system using the proposal. In this paper, we propose an implementation method to provide real-time FVV service smoothly. We suggest a system structure and operation method on the server and client side in detail, which is to be applicable to synthesize video quickly. Also, we suggest generating FVV service map additionally which controls a FVV service overall. We manage real-time information of the whole service through the service map. The service can be controlled by reducing the possible delay from network situation.

• 한국콘텐츠학회논문지
• /
• 제14권2호
• /
• pp.39-47
• /
• 2014

개인용 스마트 디바이스의 빠른 발전과 역동적 보급은 개인 사용자들을 영상시청 중심의 소비자에서 영상의 촬영에서 공유로 확장된 프로슈머로 변화 시키고 있다. 이러한 변화 속에서 방송영상에 비견되는 소비가 발생되고 지속적으로 생산 및 공유되는 사용자 제작 영상(User Created Video,UCV)이 다양한 콘텐츠 서비스가 가능한 플랫폼으로 주목을 받고 있다. 특히 경험의 공유 목적으로 제작되는 UCV는 복수의 사용자들이 한정된 시간, 공간의 동일한 이벤트로부터 촬영된 것으로, 방송영상과 유사하게 동일한 이벤트를 다양한 앵글의 카메라로 촬영된다. 본 논문에서는 UCV의 다시점적 특성을 제시하고, 이러한 특징을 기반하여 동일한 이벤트에서 촬영된 UCV를 앵글 전환하며 시청할 수 있는 다시점 UCV 서비스를 제안하였다. 또한 사용자 만족도 설문을 통해 중복영역이 포함된 UCV의 시청방식으로 다시점 UCV 서비스를 기존의 선형적 시청방식보다 더 선호함을 알 수 있었다.

• 방송공학회논문지
• /
• 제24권5호
• /
• pp.743-754
• /
• 2019

사용자 움직임 적응적 360 비디오 스트리밍을 지원하는 three degrees of freedom plus (3DoF+), 6DoF를 위한 시스템은 여러 위치에서 촬영된 다수의 고화질 360 비디오 전송을 요구한다. 이를 위해 본 논문에서는 사용자 시점에 대응하는 고화질 360 비디오 제공을 위해 3DoF+ 360 비디오 중복성 제거 기법을 적용하고 잔여 비디오를 하나의 영상으로 병합하여 압축 후 전송하는 시스템을 구현한다. 3DoF+ 360 비디오 간 중복성 제거를 위한 3D warping을 기반으로 하는 뷰 간 중복성 제거 기술과 비디오 복원에 필요한 타일들만 추출 및 병합해주는 잔여 뷰 병합 기술에 대한 구현 내용을 설명한다. 제안된 시스템을 기반으로 3DoF+ 360 비디오 전송을 수행하면, 기존 high-efficiency video coding (HEVC)을 사용하여 전송했을 때 대비 최대 20.14%의 BD-rate 감소가 가능함을 확인하였다.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제5권2호
• /
• pp.390-407
• /
• 2011

Three-dimensional (3D) video technologies are becoming increasingly popular, as it can provide users with high quality and immersive experiences. However, color inconsistency between the camera views is an urgent problem to be solved in multi-view imaging. In this paper, a perception-based color correction method for multi-view images is proposed. In the proposed method, human visual sensitivity (VS) and visual attention (VA) models are incorporated into the correction process. Firstly, the VS property is used to reduce the computational complexity by removing these visual insensitive regions. Secondly, the VA property is used to improve the perceptual quality of local VA regions by performing VA-dependent color correction. Experimental results show that compared with other color correction methods, the proposed method can greatly promote the perceptual quality of local VA regions greatly and reduce the computational complexity, and obtain higher coding performance.