• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2001년도 추계학술발표논문집 (상)
• /
• pp.237-240
• /
• 2001

비디오 데이터의 효율적인 저장, 관리를 위해서는 장면전환 검출을 통한 비디오 분할 기술에 대한 연구가 필요하다. 기존의 장면전환 검출 알고리즘은 복호화에 의한 연산량 및 프레임들간의 비교에 의한 연산량이 많고 잡음에 의한 오검출 및 미검출이 발생하게 된다. 본 논문에서는 MPEG 압축 비디오에서 압축 영역에서의 타른 장면전환 검출을 위한 최적의 검색 간격을 유도하였고, 검색간격 내의 B 프레임의 방향성을 직접 추출하여 장면전환검출에 이용하므로 빠르고 정확한 장면전환 검출 알고리즘을 제안한다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2018년도 추계학술발표대회
• /
• pp.742-745
• /
• 2018

장면 그래프는 영상 내 물체들의 정보를 나타내는 지식 그래프이다. 본 논문에서는 3차원 공간에서 에이전트의 탐색을 통해, 장면 그래프를 생성하는 모델을 제안한다. 3차원 공간에 대한 장면 그래프는 물체들의 위치, 종류, 속성뿐만 아니라 물체들 간의 관계 정보를 포함한다. 이에 따라 장면 그래프는 다양한 문제 해결에 기초 데이터로써 활용될 수 있다. 본 논문은 장면 그래프를 생성하기 위해 필요한 기능들을 정의하고, 기능에 따라 4가지 부분 네트워크들을 제안한다. 또한 각 부분 네트워크들의 학습 및 성능 평가를 위해, 3차원 실내 가상환경인 AI2-THOR에서 데이터들을 수집하였고, 다양한 실험을 통해 각 부분 네트워크들의 성능을 검증하였다.

• 한국컴퓨터정보학회:학술대회논문집
• /
• 한국컴퓨터정보학회 2011년도 제44차 하계학술발표논문집 19권2호
• /
• pp.55-57
• /
• 2011

장면 전환 검출은 비디오를 구조화하고 비디오 연산을 수행하는데 필수적인 요소이다. 본 문에서는 기존에 제시된 컬러 히스토그램과 x2 히스토그램을 합성한 새로운 방법의 장면 전환 검출 방법을 제시한다. 특히 이 방법은 비디오 프레임들의 차이값 추출 방법들의 단점을 극복하고 장점을 최대한 활용한 방법이다. 그리고 매우 빠르게 화면이 지나가는 급진적 장면 전환 검출에서 느리게 화면이 진행하는 점진적 장면 전환 검출까지 모두 검출할 수 있다. 실험을 통해서 본 방법이 기존의 방법보다 우수하다는 것을 보여주고 있다.

• 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
• /
• 한국정보과학회언어공학연구회 2023년도 제35회 한글 및 한국어 정보처리 학술대회
• /
• pp.372-376
• /
• 2023

본 연구에서는 비디오 하이라이트 검출 및 장면 추출을 위한 경량화된 모델인 Visual Context Learner (VCL)을 제안한다. 기존 연구에서는 매개변수가 고정된 CLIP을 비롯한 여러 피쳐 추출기에 학습 가능한 DETR과 같은 트랜스포머를 이어붙여서 학습을 한다. 하지만 본 연구는 경량화된 구조로 하이라이트 검출 성능을 개선시킬 수 있음을 보인다. 그리고 해당 형태로 장면 추출도 가능함을 보이며 장면 추출의 추가 연구 가능성을 시사한다. VCL은 매개변수가 고정된 CLIP에 학습가능한 프롬프트와 MLP로 하이라이트 검출과 장면 추출을 진행한다. 총 2,141개의 학습가능한 매개변수를 사용하여 하이라이트 검출의 HIT@1(>=Very Good) 성능을 기존 CLIP보다 2.71% 개선된 성능과 최소한의 장면 추출 성능을 보인다.

• 방송공학회논문지
• /
• 제18권1호
• /
• pp.43-58
• /
• 2013

리치미디어 서비스는 비디오, 오디오, 텍스트와 같은 다수의 멀티미디어 요소들을 동시에 소비할 수 있으며 시청자의 요구사항을 수용하여 개인화된 데이터에 대한 이용이 가능한 대화형 미디어 서비스를 뜻한다. MPEG(Moving Picture Expert Group)에서는 BIFS(Binary Format for Scenes)와 LASeR(Light Application Scene Representation)를 제정함으로써 리치미디어 서비스를 위한 방안을 제시하였다. 상기 두 표준은 다수의 미디어 콘텐츠간의 시간적, 공간적 배치에 대한 정보와 콘텐츠 간 상호작용을 기술한 장면 구성 정보를 이용함으로써 리치미디어 서비스를 가능하게 하였다. 그러나 기존의 리치미디어 서비스에서는 사용자 및 서비스에 의해서 장면 구성 정보가 변경될 때마다 매번 단말이 가진 기존의 장면 구성 정보를 삭제하고 새로운 장면 구성 정보를 생성 및 분석해야하는 비효율적인 방법으로 장면 전환이 이루어진다. 따라서 본 논문에서는 DOM(Document Object Model) update라는 웹문서 데이터 인터페이스 규격을 사용하여 보다 효율적이고 동적인 장면 구성 변경 방안을 제시하여 장면 전환의 시간적 단축 효과와 장면전환에 따른 화면의 정지 등의 불연속성을 제거하는 효과를 검증하였다.

• 한국산학기술학회논문지
• /
• 제17권11호
• /
• pp.437-442
• /
• 2016

음악과 영화는 시간예술로서의 공통점을 갖고 있다. 음악은 영화의 대사와 장면의 빈 공간을 채우거나 특정 장면의 앞이나 뒤에 나옴으로써 사건의 흐름을 암시하고 장면의 여운을 지속시키는 기능을 한다. 따라서 영화음악 작곡가들은 인물의 성격 묘사와 이미지의 부여, 극적인 장면의 강조 등 영화의 대사만으로 부족한 효과들을 음악을 통해 구축하고자 하며 영화의 특정 장면이나 인물의 성격에 맞는 적절한 음악을 찾기 위해, 혹은 창조하기 위해 고심한다. 그들은 모티브나 선율, 리듬이나 화음, 음악 스타일 등 음악의 요소를 특정 캐릭터나 장면의 분위기와 연관시키려는 시도를 함에 있어 극작가와 맞먹는 영감을 보여준다. 본 논문에서는 1950년대를 전후로 한 영화음악 작곡가들의 작곡 기법들을 중심으로 주제의 사용방식, 조성 구조와 작품 속에서 다양하게 나타나는 주제들 간의 상호 연관, 리듬 패턴 등을 분석함으로써 장면의 효과를 깊게 하거나 스토리의 한 측면에 집중하게 만드는 음악적 악센트의 방법들을 연구하고자 한다. 알렉스 노스나 휴고 프리드호퍼, 버나드 허먼, 데이비드 랙신 같은 할리우드 작곡가들의 작곡 기법을 중심으로 하여 영화의 중요 시퀀스와 음악의 악센트가 어떻게 조화를 이루는 가를 실제 장면과 음악을 통하여 고찰하였다.

• 정보처리학회논문지B
• /
• 제11B권3호
• /
• pp.353-360
• /
• 2004

최근까지 MPEG으로 압축된 영상의 장면전환점 검출에 관한 연구가 많이 진행되어왔다. 그러나 대체로 디코딩 과정을 거친 후 픽셀단위의 비교를 통해 장면전환점을 검출하는 경우가 많았다. 이 경우 디코딩 과정에서의 많은 계산에 의해 실시간 적용에 부적합하게 된다. 최근에는 압축영역에서의 정보만을 이용해 장면전환점을 검출하는 연구가 많이 진행되고 있으며, 본 논문에서는 압축영역에서 장면전환점을 검출하면서도 보다 빠르고 정확한 검출이 이루어지도록 I픽처 단위의 블록과 P픽처 단위의 내부블록으로 나눈 후 I블록별 검사를 통해 장면전환이 검출된 블록에 대해서 P블록별 검사를 수행하고 최종적으로 B적처까지의 검사를 통해 정확한 장면전환점을 찾는 순차접근법을 제안한다. 순차 접근법은 대부분의 처리가 압축영역에서 이루어지고 또한 블록단위의 결사를 하므로 불필요한 픽처들의 검사과정을 줄여서 보다 빠른 장면전환점 검출이 가능하다 순차접근법은 빠른 처리속도와 함께 정확한 검색이 가능하도록 최적의 알고리즘을 사용하고 있다.

• 정보처리학회논문지B
• /
• 제12B권5호
• /
• pp.617-630
• /
• 2005

일반적인 장면전환 검출방법은 연속적인 두 영상의 특징 값을 비교하여 일정한 임계값 이상일 경우 장면전환으로 판단한다. 그러나 기존의 장면전환을 검출하는 알고리즘은 장면전환을 검출하는데 있어서 프레임의 특징 값을 추출하기 위하여 복호화 과정에서 많은 시간이 소비되었고 단지 연속적인 두 영상의 특징 값을 비교하기 때문에 빛의 변화나 물체의 움직임에 따른 오검출 문제를 나타내었다. 본 논문에서는 MPEG 압축 영역에서 매크로블록 정보를 직접 추출 및 이용하여 효과적인 장면 전환 검출을 위한 알고리즘을 제안한다 제안한 알고리즘은 MPEG에서 매크로블록 정보를 직접 추출하고 이용하므로 기존의 알고리즘의 문제점인 많은 연산량 문제를 개선하였고, 연속된 프레임과의 비교를 통한 장면전환 검출이 아닌 이전 또는 이후 영상과의 연관성을 분석하여 장면전환된 프레임을 검출함으로 빛의 변화나 물체의 움직임과 같은 오검출 문제를 해결할 수 있는 알고리즘을 제안한다 제안한 알고리즘은 MPEG 데이터를 대상으로 한 실험을 통해 기존의 히스토그램을 이용한 알고리즘보다 빠르고 정확하게 검출할 수 있음을 보이고, 실험 결과를 통해 성능을 분석하였다.

• 한국정보과학회논문지:소프트웨어및응용
• /
• 제31권12호
• /
• pp.1621-1627
• /
• 2004

장면전환에 따른 화질열화는 예상 비트량과 실제 부호화량의 차이가 많을 때 발생한다. 특히 장면전환이 P화면에서 발생된 경우에는 장면전환이 발생된 P화면뿐만 아니라, P화면을 참조하는 화면들의 화질에 심각한 열화가 발생한다. 본 논문에서는 장면전환이 발생했을 때 부적절한 비트율 제어의 원인을 토대로 장면전환 화면과 이후 화면들의 화질을 개선하는 방법을 제시하였다. 장면전환 화면에는 추가비트를 할당하는 기존 방법과 예상 비트를 인트라 화면의 부호화 수준으로 할당하는 새로운 방법을 적용하였다. 그리고 장면전환 이후 화면들에는 예상 비트 할당을 장면전환 발생이전 화면의 부호화 수준으로 할당하는 방법을 제안하여 화질을 개선시켰다. 실험 결과 제안하는 알고리즘이 기존 알고리즘보다 화질향상이 있었고, TM5와 비교해서는 0.5∼1.2dB의 PSNR 향상을 보였다.

• 디지털콘텐츠학회 논문지
• /
• 제16권4호
• /
• pp.645-650
• /
• 2015

본 논문에서는 완성도 높은 3D 콘텐츠가 부족한 상황에서 고품질의 3D 콘텐츠 제작을 위한 입체 값 분석을 통한 과도한 입체 장면 및 장면 전환 영상을 검출하여 3D 콘텐츠 제작 가이드라인에 맞는 안정적인 입체 영상을 제작할 수 있는 입체 값 분석 기술을 제안한다. 입력된 좌, 우 영상을 이용하여 탐색범위 제한을 통하여 깊이 맵을 구하고 상영되는 스크린 크기에 맞춰 전경 및 배경의 대상 물체의 돌출 영역과 후퇴 영역의 입체 값을 계산한다. 돌출과 후퇴영역이 3D 입체 영상 제작 가이드라인에 벗어나는 장면 및 이전 장면과 과도하게 입체 값 변화가 일어나는 장면을 검출한다. 입체 값 분석 툴을 통해 검출된 장면은 후반 작업에서 입체 값 조절을 통해 안정적인 3D 입체 영상을 제작하는데 도움을 줄 수 있다.