• 한국융합학회논문지
• /
• 제10권12호
• /
• pp.43-52
• /
• 2019

최근 5G의 등장에 따라 국내 스트리밍 시장에서는 360 VR(Virtual Reality) 서비스가 주목받고 있다. 하지만 기존 IPTV(Internet Protocol Television)의 360 VR 영상 서비스에서 사용자가 고품질로 느끼기 위해서는 8K 이상의 영상이 요구 되지만 현재는 4K 정도의 영상이 서비스되어 사용자의 만족도가 높지 않다. 8K 이상의 영상의 경우 비트율(bitrate)이 하나의 QAM 채널로 전송할 수 있는 38.8107mbps 이상이다. 때문에, 현재 IPTV 방송 케이블망 환경에서 8K 이상의 영상을 스트리밍 하는 것은 불가능 하다. 이에 본 논문에서는 8K이상의 360 VR 서비스를 위해 다수의 QAM 채널을 사용하여 영상을 분리 분산하여 전송하는 방식을 제안하고 설계 하였다. 그리고 IPTV 방송 수신기에서 댁내의 디스플레이 장치로 저지연 스트리밍을 할 수 있는 엣지 스트리밍 방식을 제안하고 구현하였다. 그리고 실험을 통해 100mbps 미만의 네트워크 대역폭을 사용하여 500ms 미만의 뷰포트(Viewport) 전환 지연 시간을 갖는 360 VR스트리밍을 할 수 있음을 확인하였다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2019년도 추계학술대회
• /
• pp.256-258
• /
• 2019

최근 MPEG-Immersive 표준화 그룹에서는 여러 위치에 존재하는 다수의 360 영상을 취득하고 처리하여 사용자에게 제한적인 화면 전환 이동에 따른 운동 시차(motion parallex)를 제공하는 3 degrees of freedom plus (3DoF+) 기술에 관한 표준화가 진행되고 있다. 이러한 3DoF+ 표준화 기술에서의 압축은 기존의 HEVC 코덱을 사용하나, 현재 존재하는 360 영상 사용자 시점 기반 스트리밍 기법을 3DoF+ 스트리밍에 적용하기 위해서는 기존의 360 영상과 다르게 영상 서로 간의 참조과정으로 인한 의존성으로 문제가 존재한다. 본 논문에서는 해당 문제점을 서술하고, MCTS(Motion-Constrained Tile Set)를 사용하여 보다 적은 디코더와 사용자 시점에 맞게 효율적으로 영상을 전송할 수 있는 MCTS 기반 타일 그룹 분할 방법을 제안한다.

• 인터넷정보학회논문지
• /
• 제22권3호
• /
• pp.1-8
• /
• 2021

가상 현실 공간에서 head-mounted display(HMD)를 통한 실감형 미디어를 제공하기 위해서는 초고화질 및 초고해상도의 전방위 360도 영상 전송이 필요하고, 이는 높은 대역폭 및 연산량을 요구한다. 이를 극복하기 위해 360도 영상에 대한 타일 기반 분할 기법을 사용하여 사용자 시점 기반 선택적 스트리밍 기법이 사용될 수 있다. 본 논문은 16K 초고화질 360도 영상 및 종래에 널리 쓰이는 4K 360도 영상에서의 사용자 시점 기반 타일 스트리밍 기법의 성능 평가를 소개한다. 16K 초고화질 360도 영상에 타일 스트리밍 기법을 적용하였을 때, 영상 전체 부호화 및 전송 방법 대비 42.47%의 bjotegaard delta rate(BD-rate) 절감을 확인하였고, 4K 360도 영상 타일 스트리밍 시 26.41%의 BD-rate 절감이 이루어지는 것을 확인하였다. 따라서, 타일 스트리밍이 초고해상도 영상에 더 효율적임을 확인하였다.

• 방송공학회논문지
• /
• 제23권4호
• /
• pp.549-558
• /
• 2018

360 VR(Virtual Reality) 비디오와 같이 고품질의 비디오를 기존 케이블 망에서 IPTV 또는 OTT(Over the Top) SettopBox과 같은 저사양 미디어 서비스 기기를 통해 저지연 라이브 스트리밍 서비스를 할 수 있도록 MPEG DASH(Dynamic Adaptive Streaming over HTTP) 기반의 스트리밍 서버를 설계하고 구현하였다. 또한, 서버 응답 지연 시간을 줄이기 위해 스트리밍 영상 파일(MPD, Segment Files)을 메모리상에 캐싱 하여 서비스 할 수 있는 관리 프로세스를 설계하고 적용하였다. 그리고 실험을 통해 bitrate가 50,000kbps 이상이고, 8K@60P 급의 고품질 분할 영상 스트리밍을 지원하는 것을 확인하였다

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2019년도 하계학술대회
• /
• pp.166-168
• /
• 2019

본 논문에서는 타일(tile) 기반 360 영상 스트리밍을 위해 Motion Constrained Tile Set(MCTS)을 적용하여 부호화된 영상을 독립적으로 전송하였을 때 독립적인 타일들을 하나의 영상으로 병합하는(merge) 기법의 제한점을 논의하고 타일 병합기를 구현한다. 360 영상 스트리밍 환경에서 타일 병합 기법을 적용하기 위한 방안으로, 시간적 및 공간적 독립성을 가진 타일들로 구성된 영상들을 이용하여 영상의 특성과 슬라이스 정보를 대체하여 병합된 영상을 생성하는 방법을 제안한다. 또한, 타일들을 병합을 하기 위해 일부 영상의 정보를 파싱하여 병합되는 영상 정보를 생성함으로써 송신단의 영상 정보를 이용하지 않고도 영상 병합이 가능해진다. 따라서, 제안하는 방식을 이용하면 미리 구성된 영상 정보로 병합하는 방법으로부터 더 나아가 영상 특성으로 인한 제한점을 해결하여 서로 다른 영상으로부터 분할된 타일들을 하나의 영상으로 병합할 수 있다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2020년도 하계학술대회
• /
• pp.51-54
• /
• 2020

본 논문에서는 360 도 VR 영상을 전송하는 기법의 일종인 타일 기반 전송을 MMT(MPEG Media Transport) 프로토콜 기반으로 구현하기 위하여 영상의 공간 분할 정보를 전달하는 방법을 소개한다. 360 도 VR 영상 전송은 대용량 미디어 전송인 동시에 사용자의 움직임에 따라 신속하게 적응적 영상을 전달해야 한다. 타일 기반 전송은 HEVC(High Efficiency Video Coding)의 MCTS(Motion Constrained Tile Sets) 기법을 이용하여 뷰포트에 해당하는 타일들을 고화질로 전달함으로써 이러한 요구사항을 해결한다. 반면, MMT 프로토콜은 초저지연 고화질 영상 전송에 유리한 기술로써 사용자의 시점 변화에 따라 기민하게 영상의 품질을 변환시킬 수 있다. 따라서 HEVC 의 SEI(Supplemental Enhancement Information) 메시지에 포함되는 타일들의 공간 분할 정보를 MMT 프로토콜에 적용하는 방식에 따라 적응적 타일 기반 전송 기법의 효율을 높일 수 있다.

• 한국정보통신학회논문지
• /
• 제16권3호
• /
• pp.476-481
• /
• 2012

최근 QoS/QoE 기술의 일환으로 HTTP에 기초한 적응적 스트리밍 기술이 주목받고 있다. 이에 본 논문에서는, HTTP에 기초한 동적 적응적 스트리밍 기술에 대해 알아본다. 이를 기반으로 HTTP상에서 동적 적응적 스트리밍 시스템을 설계 및 구현 하였다. 이 시스템은 MPEG2-TS 파일의 비트율별 변환, Segment 분할, MPD(Media Presentation Description)의 생성과 서버와 클라이언트 간의 동적이고 적응적인 네트워크 환경에서 MPD File의 분석을 통한 비트율별 플레이어로 구성된다. 이는 다양한 네트워크 환경에서 지속적이고, 원활한 영상의 재생을 위해 다양한 멀티미디어 분야에 활용될 것이다.

• 한국정보통신학회:학술대회논문집
• /
• 한국정보통신학회 2012년도 춘계학술대회
• /
• pp.488-490
• /
• 2012

오늘날 QoS/QoE 기술의 일환인 HTTP를 활용한 동적 적응적 스트리밍 기술이 이슈화 되고 있다. 본 논문에서는 HTTP를 활용한 동적 적응적 스트리밍 기술에 대해 연구하였다. 이를 기반으로 HTTP를 활용한 동적 적응적 스트리밍 시스템을 설계 및 구현하였다. 본 시스템에서는 MPEG2-TS 파일에 대해 비트율별 변환, 일정 시간 별 Segment의 분할, 앞에서의 파일들을 참고하여 최종적으로 전송에서 활용되는 MPD(Media Presentation Description) File의 생성과 서버와 클라이언트 간의 스트리밍에 대해 HTTP를 활용한 동적이고 적응적인 네트워크 환경에서의 비트율별 스트리머로 구성된다. 이는 불특정 다수의 네트워크 환경에서 끊김없는 지속적인 영상의 재생을 위한 다양한 스트리밍 분야와 멀티미디어 분야에 활용될 것이다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2018년도 하계학술대회
• /
• pp.326-328
• /
• 2018

최근 4K/8K 급 초고품질 콘텐츠의 서비스에 관심이 집중되는 만큼 스트리밍 서비스에 대한 연구도 활발히 이루어지고 있다. 하지만 단일 PC 성능의 한계로 인해 SW 기반 영상 처리에 어려움을 겪고 있다. 본 논문에서는 분산 처리를 통해 실시간 영상 처리가 가능하도록 시스템을 제안한다. 제안한 시스템은 영상 패킷 분석 및 분할, 분산 트랜스코딩, 패킷 통합 단계로 이루어지며 Hadoop 과 Spark 를 이용하여 실시간 분산 처리를 지원한다. 실험 결과는 초고품질 입력 영상($3840{\times}2160@60Hz$, YCbCr 4:2:2, 10-bit)에 대해 평균 74.47fps 의 트랜스코딩 속도를 보인다.

• 한국정보과학회논문지:시스템및이론
• /
• 제33권1_2호
• /
• pp.137-146
• /
• 2006

일반적인 동영상 스트리밍 시스템은 좁은 시각영역을 갖는 동영상을 원격의 사용자에게 제공한다. 서버 측에 팬/틸트(pan/tilt) 카메라를 부착한 시스템은 클라이언트가 카메라의 방향을 조작할 수 있도록 함으로써 보다 넓은 시각영역을 제공할 수 있다. 하지만, 하드웨어 팬/틸트 카메라를 이용한 스트리밍 시스템은 다수의 사용자가 동시에 접속할 경우, 모든 사용자에게 각자가 원하는 시점에서의 영상을 제공할 수 없으며, 카메라 이동에 의한 지연이 발생한다는 단점이 있다. 본 논문에서는 소프트웨어 팬/틸트 카메라를 구현하였으며, 이를 이용한 새로운 파노라마 동영상 스트리밍 시스템을 제안한다. 제안된 시스템은 넓은 시각영역을 가지는 파노라마 영상을 획득한 후, 각 사용자에게 원하는 부분영상을 제공함으로써 다수의 사용자에게 자유로운 시점 이동을 제공해 준다. 이때, 방대한 양의 파노라마 동영상을 원격의 사용자에게 전송하기 위해서는 효율적인 압축 방법이 요구된다. 본 논문에서는 전체 영상을 좁은 스트립 영상들로 분할하고, 클라이언트 측에서 원하는 시각영역에 해당하는 스트립 영상들만을 독립적으로 압축하는 적응성 스트립 압축 기법을 제안한다. 제안된 시스템은 적응성 스트립 압축 기법을 사용하여 파노라마 동영상을 압축, 전송함으로써 사용자의 시각영역 변화 및 새로운 사용자의 접속에 빠르게 대응할 수 있으며 클라이언트 전송 시 데이터 양을 효과적으로 감소시킬 수 있다.