• 한국정보과학회논문지:컴퓨팅의 실제 및 레터
• /
• 제16권6호
• /
• pp.737-741
• /
• 2010

연동형 방송 서비스 구현 시 배경이 되는 오디오/비디오 스트림과 오버레이 되는 데이터 콘텐츠의 시간 동기화는 중요한 문제이다. 그러나 현재 MPEG-4 환경에서는 절대적인 시간 값을 바탕으로 각각의 데이터를 동기화하는 기초적인 방법을 이용하고 있다. 따라서 본 논문에서는 연동형 방송 콘텐츠 개발 시 효율적인 데이터 동기화를 위해 비디오 콘텐츠의 내용에 따라 데이터 콘텐츠의 내용이 변화하는 내용 기반 동기화 기법을 제안한다. 제안하는 내용 기반 동기화 기법은 장면 키워드를 바탕으로 BIFS 노드를 확장 정의하고 MPEG-7의 메타데이터를 이용하여 구현되었다.

• ETRI Journal
• /
• 제38권5호
• /
• pp.868-878
• /
• 2016

A multi-screen environment provides a new opportunity for digital signage applications, where various irregularly shaped screens are employed as an effective means for advertisements and information. A formation method applicable to numerous irregularly shaped screens is proposed to provide a new perspective on digital signage applications. The crucial part of the proposed method comes from the geometric sensing of each screen and the formation of a virtual screen where geometrically aligned content extraction and encoding are employed for content transmission to each screen. In addition, a software-based synchronization method for the proposed system is proposed to address the frame-level synchronization between screens. The experimental results of the proposed method show an improved performance of the frame-level synchronization, where the inconsistency between frames is not identified.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제14권8호
• /
• pp.3473-3487
• /
• 2020

In this paper, we present a new approach to creating speech animation with emotional expressions using a small set of example models. To generate realistic facial animation, two example models called key visemes and expressions are used for lip-synchronization and facial expressions, respectively. The key visemes represent lip shapes of phonemes such as vowels and consonants while the key expressions represent basic emotions of a face. Our approach utilizes a text-to-speech (TTS) system to create a phonetic transcript for the speech animation. Based on a phonetic transcript, a sequence of speech animation is synthesized by interpolating the corresponding sequence of key visemes. Using an input parameter vector, the key expressions are blended by a method of scattered data interpolation. During the synthesizing process, an importance-based scheme is introduced to combine both lip-synchronization and facial expressions into one animation sequence in real time (over 120Hz). The proposed approach can be applied to diverse types of digital content and applications that use facial animation with high accuracy (over 90%) in speech recognition.

• 한국통신학회논문지
• /
• 제37C권12호
• /
• pp.1185-1194
• /
• 2012

본 논문은 한정된 대역폭을 갖는 기존채널을 통한 지상파 3DTV 서비스 화질의 한계를 극복하기 위한 비실시간 콘텐츠 연동형 지상파 3DTV 방송 규격을 제안한다. 본 규격을 통한 서비스에서는 유휴시간의 대역폭을 활용하여 하나의 스테레오스코픽 시점 영상을 비실시간 콘텐츠로 전송한 후, 실시간 방송 신호를 통해 전송되는 나머지 시점의 영상과 동기화하여 재생함으로써 기존 3DTV 보다 향상된 스테레오스코픽 영상을 제공한다. 상기 서비스의 실현을 위해서는 다른 시간에 이종 매체를 통해 전송된 데이터들을 동기화하기 위한 새로운 방안이 요구되며, 이에 본 논문에서는 동기신호를 생성하여 실시간 방송 신호와 함께 다중화하는 방식의 기술적 해결책을 제시하고, 이를 기반으로 한 고화질 지상파 3DTV 방송 규격을 제안하고자 한다. 본 논문에서 제안한 기술 규격은 2DTV 방송과의 호환성을 유지하는 동시에 기존 시스템의 변경을 최소화하여 비실시간 콘텐츠와 방송 신호간의 정밀한 동기화를 통한 고화질 3DTV 서비스를 제공할 수 있다.

• 전기학회논문지
• /
• 제66권3호
• /
• pp.575-580
• /
• 2017

In these days, the big-size and high resolution multimedia file is widely used through networks. To transfer and service effectively, the internet network technology is necessary to substitute broadcasting. Normally Content Delivery Network(CDN) is widely used in conventional internet for multimedia services. But it has a small bandwidth to service. So to solve this problems, many researchers have suggest the protocol for download, content distribution/saving, server synchronization, caching, pushing rate, and streaming etc. But all of these has some defects like low resolution, packets loss and delay, real application implementations etc. So, this paper suggests a new method of network protocol based on P2P collaboration and user's content using information. And it evaluated the performance of suggested method. As the results, it showed the effectiveness of 4 performances indices : download speed, decreasing rate of connected user in same time, adaptive hit ratio, traffic decreasing rate.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제11권8호
• /
• pp.4077-4091
• /
• 2017

This paper presents the design of a broadcasting scenario and system for an 8K-resolution content. Due to an 8K content is four times larger than the 4K content in terms of size, many technologies such as content acquisition, video coding, and transmission are required to deal with it. Therefore, high-quality video and audio for 8K (ultra-high definition television) service is not possible to be transmitted only using the current terrestrial broadcasting system. The proposed broadcasting system divides the 8K content into four 4K contents by area, and each area is hierarchically encoded by Scalable High-efficiency Video Coding (SHVC) into three layers: L0, L1, and L2. Every part of the 8K video content divided into areas and hierarchy is independently treated. These parts are transmitted over heterogeneous networks such as digital broadcasting and broadband networks after going through several processes of generating signal messages, encapsulation, and packetization based on MPEG media transport. We propose three methods of generating streams at the sending entity to merge the divided streams into the original content at the receiving entity. First, we design the composition information, which defines the presentation structure for displays. Second, a descriptor for content synchronization is included in the signal message. Finally, we define the rules for generating "packet_id" among the packet header fields and design the transmission scheduler to acquire the divided streams quickly. We implement the 8K broadcasting system by adapting the proposed methods and show that the 8K-resolution contents are stably received and serviced with a low delay.

• 한국멀티미디어학회논문지
• /
• 제13권2호
• /
• pp.308-315
• /
• 2010

Web2.0 시대가 도래함에 따라 웹 상에는 사용자에 의해 제작된 미디어간의 상호교환이 활발히 이루어지고 있다. 뿐만 아니라 콘텐츠 공유 사이트의 비약적인 성장을 바탕으로 미디어 콘텐츠 공유의 장이 활성화되었고, 이러한 환경 속에 비전문가에 의해 제작된 콘텐츠의 수가 증가하였다. 비전문가에 의해 제작된 콘텐츠는 촬영된 그대로의 영상만을 담고 있는 단순미디어에 그치기 때문에 단순미디어에 효과와 액션과 같은 실감을 부여하기 위한 방안으로 융합 미디어 미들웨어를 제안하며 이를 통해 제작자와 사용자의 만족감을 증대시킬 수 있으며, 영상은 한층 더 인상적인 콘텐츠로 발전할 수 있다. 실감 서비스를 제공하기 위한 융합 미디어 미들웨어는 MPEG-7을 기반으로 입력 받은 영상을 씬(scene) 단위로 분류하며, 세분화된 영상 사이에 이미지, 텍스트, 사운드 등과 같은 효과를 삽입함으로써 기존의 단순미디어를 실감효과가 부여한다. 입력영상과 실감효과를 연계시키기 위하여 MPEG-21에서 제공하는 BSD 코드를 이용하며 이를 통해 미디어간의 동기화(intra synchronization)를 제어한다. 본 논문에서 제안한 융합 미디어 미들웨어를 통하여 비전문가에 의한 콘텐츠는 다중미디어로서의 가치를 지니게 되며, 새로운 유통의 흐름을 창출할 수 있는 효과를 얻을 수 있다.

• 한국컴퓨터정보학회논문지
• /
• 제17권10호
• /
• pp.137-143
• /
• 2012

학습자들은 스마트 디바이스를 이용하여 언제 어디서나 인터넷 접속을 통한 각종 학습처리까지 가능하다. 일상생활에서 계속적으로 스마트 디바이스를 이용할 수 있는 인터넷의 자유를 얻는 만큼 학습자들의 다양한 학습(learning) 서비스 요구와 이용 또한 활발해 진 것이다. 이점에서 요구하는 학습의 관련된 자료들을 동시에 제공할 수 있는 조화로운 융합형 학습 서비스를 제공하는 새로운 이-러닝 연구의 필요성이 높아지고 있다. 융합형 학습 서비스는 하나의 혹은 여러 디바이스를 통해 복합 미디어를 구성하는 각각의 콘텐츠간의 조화로운 동기화는 중요 조건이다. 현재는 대표적으로 융합미디어간의 동기화를 제공하는 방법은 콘텐츠간 절대적인 시간 값을 맞추는 방법이다. 그러나 이 방법은 콘텐츠를 전송시 시간적인 딜레이 발생한다. 또한 콘텐츠의 지속시간에 대한 절대적인 시간값을 직접 입력해야하는 번거로움이 있으며, 콘텐츠 작성 시 여러 문제들이 발생한다. 본 논문에는 동기화 문제를 해결 할 수 있는 내용에 따른 하모나이징 동기화 기법 모델(Harmonizing Sync Model)을 제고하고자 한다. 내용에 따른 동기화 기법은 학습 콘텐츠를 집합관계를 효과적으로 모델링 하여 다양한 학습 융합미디어를 갖춘 스마트러닝 개념이다.

• 한국정보과학회논문지:데이타베이스
• /
• 제27권2호
• /
• pp.185-198
• /
• 2000

최근 폭발적인 증가를 보이고 있는 멀티미디어 자료의 양과 그 자료들을 이용할 수 있는 하드웨어의 발전은 멀티미디어 상연물을 이용하는 여러 응용 분야에 대한 관심을 촉발시키고 있다. 이에 멀티미디어 상연물의 효과적인 이용을 위해서는 멀티미디어 상연물과 DBMS와의 통합이 필요하다. 이 논문에서는 내용(content)에 근거한 상연물 검색과 검색 처리 기술의 문제를 다룬다. 현재 멀티미디어 상연물 제작 도구(authoring tool)들은 멀티미디어 상연물을 상연 그래프(presentation graph)를 이용하여 표현하고 있으며 상연 그래프는 DAG(directed acyclic graph)이다. 각 노드는 같은 타입의 미디어 스트림을 나타내며 에지는 스트림간의 상연 순서와 동기화 (synchronization) 방법을 나타낸다. 각각의 스트럼에 포함된 정보, 이 정보들간의 순서, 그리고 스트럼간의 상연 순서는 상연의 내용을 구성한다. GCalculus/S(GCalculus with Set Operators)는 calculus에 바탕을 둔 검색언어이며 멀티미디어 자료들의 물리적 특정과 내용을 다룰 수 있다. 개개의 노드 안에서의 정보의 변화와 노드 사이의 순서는 시간 연산자(temporal operator) Next, Connected, Until을 이용하여 표현한다. 검색의 처리를 위하여 객체 대수(object algebra)인 O-Algebra를 확장한다.

• 방송공학회논문지
• /
• 제24권2호
• /
• pp.329-340
• /
• 2019

최근 국내 지상파 UHD(Ultra-High Definition) 방송과 같은 고품질 AV(Audio-Video) 서비스가 증가하면서 그에 맞춰 방송 기술도 진화하게 되면서 방송 표준 또한 새롭게 정의하게 되었다. 또한, 네트워크 기술이 발달함에 따라, 콘텐츠가 해당 나라뿐 아니라 세계적으로 소비되고 있다. 그에 맞춰 국가 및 지역적 환경 등에 맞춰 적합한 콘텐츠를 제공하는 방안인 콘텐츠 삽입 기술이 필요할 것으로 보인다. 본 논문은 지상파 UHD 방송의 전송 표준 DASH(Dynamic Adaptive Streaming over HTTP)/ROUTE(Real time Object delivery Over Unidirectional Transport) 및 MMT(MPEG Media Transport)를 기반으로 방송망과 통신망의 이종 망 환경 하에 ATSC (Advanced Television Systems Committee) 3.0 Event Signaling 표준을 활용한 콘텐츠 삽입 서비스 시스템 모델 및 동기화 방안을 제안한다. 또한, 해당 서비스가 방송 표준을 만족하는 환경에서 동작함을 검증한다.