• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2009년도 IWAIT
• /
• pp.267-272
• /
• 2009

Video digests provide an effective way of confirming a video content rapidly due to their very compact form. By watching a digest, users can easily check whether a specific content is worth seeing in full. The impression created by the digest greatly influences the user's choice in selecting video contents. We propose a novel method of automatic digest creation that evokes a joyful impression through the created digest by exploiting smile/laughter facial expressions as emotional cues of joy from video. We assume that a digest presenting smiling/laughing faces appeals to the user since he/she is assured that the smile/laughter expression is caused by joyful events inside the video. For detecting smile/laughter faces we have developed a neural network based method for classifying facial expressions. Video segmentation is performed by automatic shot detection. For creating joyful digests, appropriate shots are automatically selected by shot ranking based on the smile/laughter detection result. We report the results of user trials conducted for assessing the visual impression with automatically created 'joyful' digests produced by our system. The results show that users tend to prefer emotional digests containing laughter faces. This result suggests that the attractiveness of automatically created video digests can be improved by extracting emotional cues of the contents through automatic facial expression analysis as proposed in this paper.

• 방송공학회논문지
• /
• 제7권2호
• /
• pp.79-87
• /
• 2002

지난 10여년간의 디지털 비디오와 관련 멀티미디어처리 기술의 빠른 발전은 비디오 내용의 이해에 기반한 키프레임 기반의 내용요약과 같은 여러 가지의 비선형적 비디오 브라우징 방법들을 가능하게 하였다. 그러나 스토리보드나 목차와 같은 키프레임 기반의 사용자 인터페이스들은 텔레비전 환경에 익숙한 대다수의 일반 사용자들에게는 여전히 사용하기 어렵다는 단점이 있으며, 이러한 사용자 인터페이스의 구성 또한 실시간 처리를 지원하지 않고 있어 서비스 제공자를 배제한 일반 방송 환경에서 사용하기 어렵다는 단점을 가지고 있다. 본 논문에서는 이러한 단점들을 극복하며 동시에 사용자들이 사용하기 편리한 비선형적 비디오 브라우징 기술들을 제안하며, 이를 지원하기 위한 실시간 비디오 인덱싱 기술을 제안하고 있다. 즉 구조기반의 건너뛰기와 요약보기 기능은 실시간 비디오 인덱싱 기술에 기반하여, 사용자들이 기존의 비디오 레코더의 리모콘과 같은 간단한 사용으로 원하는 장면을 쉽게 찾아갈 수 있도록 하여 주며, 간단한 요약 기능을 제공하여 짧은 시간에 전체의 내용을 이해할 수 있도록 하여 준다.

• 방송공학회논문지
• /
• 제5권1호
• /
• pp.82-93
• /
• 2000

최근 디지털 비디오 데이터가 급격히 증가하고 대중화됨에 따라 이를 활용하기 위한 효율적인 접근 기법이 절실히 요구되고 있다. 비디오 요약(video summarization) 기법은 의미적으로 중요한 요점만으로 전체 비디오를 표현하는 것으로 비디오 내용에 대한 전반적인 개관(overview)을 제공할 뿐만 아니라 브라우징(browsing) 등의 유용한 접근 기능을 제공한다. 본 논문에서는 의미적으로 중요한 내용을 포함하는 비디오 주요구간(highlight segment) 검출을 통한 새로운 동적 요약(dynamic summarization) 기법과 생성된 요약 정보 표현을 위하여 MPEG-7에 제안한 요약 기술구조(DS : Description Scheme)에 대하여 기술한다. 본 논문의 기술구조는 다중 계층의 하이라이트(highlight), 계층적 브라우징, 사용자 주문형 요약 등의 기능을 통하여 비디오의 개관 및 효율적인 브라우징, 네비게이션(navigation)을 가능하게 한다. 또한, 제안하는 비디오 요약 기법 및 요약 기술구조의 실현 가능성 및 기능 구현을 확인하기 위하여 축구 비디오에 대한 적용 실례를 제시한다.

• 방송공학회논문지
• /
• 제10권3호
• /
• pp.422-435
• /
• 2005

디지털 방송은 아날로그 방송에 비해 시청자의 선호에 기반한 방송 서비스를 제공함으로써, 시청자에게 개인화된 TV시청환경을 위한 기술적 배경을 제공할 수 있다. 하지만, 현재의 디지털 방송은 개개인에 따라 차별화 된 방송 서비스에 관련하여 전자 프로그램 가이드 (EPG) 나 초기 단계의 데이터 방송 정도의 한계를 보여주고 있다. 따라서, 본 논문에서는 진보된 개인화된 방송 서비스를 시청자에게 제공함으로써, 보다 시청자 개인에게 차별성과 편의성을 제공하는 방송 환경을 개발하고자 한다. 상기의 목적을 위하여, 시청자의 행위를 최소화할 수 있는 지능형 방송 시스템과 단순한 콘텐츠 부가정보가 아닌, 콘텐츠 레벨의 시멘틱(semantic) 정보에 기반한 방송 서비스들을 제안한다 지능적인 방송 시스템을 구현하기 위해, 지능형 에이전트 기술을 적용하고 콘텐츠의 시멘틱 정보의 생성을 위하여, MPEG-7 과 TV-Anytime Forum (TVAF)의 규격을 이용하였다. 콘텐츠 레벨의 방송 서비스들로써 사용자 단말에서 실시간 콘텐츠 필터링(filtering)과 개인화된 비디오 스키밍(skimming) 서비스들을 설계하였다. 본 논문에서는 제안된 시스템의 유용함을 증명하기 위하여 멀티 에이전트 플랫폼을 이용한 테스트 베드를 제작하고, 이를 기반으로 제안하는 방송 서비스들을 입증하였다.