• ETRI Journal
• /
• 제35권6호
• /
• pp.1105-1114
• /
• 2013

Owing to the large number of video programs available, a method for accessing preferred videos efficiently through personalized video summaries and clips is needed. The automatic recognition of user states when viewing a video is essential for extracting meaningful video segments. Although there have been many studies on emotion recognition using various user responses, electroencephalogram (EEG)-based research on preference recognition of videos is at its very early stages. This paper proposes classification models based on linear and nonlinear classifiers using EEG features of band power (BP) values and asymmetry scores for four preference classes. As a result, the quadratic-discriminant-analysis-based model using BP features achieves a classification accuracy of 97.39% (${\pm}0.73%$), and the models based on the other nonlinear classifiers using the BP features achieve an accuracy of over 96%, which is superior to that of previous work only for binary preference classification. The result proves that the proposed approach is sufficient for employment in personalized video segmentation with high accuracy and classification power.

• 한국음향학회지
• /
• 제28권2호
• /
• pp.112-118
• /
• 2009

본 논문은 모바일 단말기, Digital Video Recorder (DVR) 등에 적용할 수 있는 뮤직비디오 브라우징 시스템을 위한 실시간 중요 구간 검출 알고리즘을 제안한다. 입력된 뮤직비디오는 음악 신호와 영상 신호로 분리되어 음악 신호에서는 에너지기반의 음악 특징값 최고점기반의 구조분석을 통해 음악의 후렴 구간을 포함하는 음악 하이라이트 구간을 검출하고, SVM AdaBoost 학습방식에서 생성된 모델을 이용해 음악신호를 분위기별로 자동 분류한다. 음악신호로부터 검출된 음악 하이라이트 구간과 영상신호로부터 검출된 가수, 주인공의 얼굴이 나오는 영상장면을 결합하여 최종적으로 중요구간이 결정된다. 제안된 방식을 통해 사용자는 모바일 단말기나 DVR에 저장되어 있는 다양한 뮤직비디오들을 분위기별로 선택한 후에 뮤직비디오의 30초 내외의 중요구간을 빠르게 브라우징하여 자신이 원하는 뮤직비디오를 선택할 수 있게 된다. 제안된 알고리즘의 성능을 측정하기 위해 200개의 뮤직비디오를 정해진 수동 뮤직비디오 구간과 비교하여 MOS 테스트를 실행한 결과 제안된 방식에서 검출된 중요 구간이 수동으로 정해진 구간보다 사용자 만족도 측면에서 우수한 결과를 나타내었다.

• 감성과학
• /
• 제26권3호
• /
• pp.15-28
• /
• 2023

본 연구는 정서 자극 유형 중 일상생활과 가장 유사한 정서 경험을 유발하는 자연주의적 자극인 영상 자극을 활용하여 정서표상의 유사성과 개인 간 반응 일관성을 살펴보기 위해 수행되었다. 이를 위해 다차원척도법을 실시하여 영상 자극이 핵심정서 차원에 위치하는지 확인하고, 참가자 간 분류분석을 사용하여 영상들이 정서유형 별로 구분이 잘 이루어지는지, 영상 자극에 대한 참가자들의 정서표상이 일관적인지 검증하였다. 또한 참가자간 상관분석을 통해 각 영상 자극에 대한 정서표상이 참가자들간 유사한지 추가적으로 확인하였다. 다차원척도법 결과, 정서유발 영상들이 정서가 차원에서 유의하게 구분되어 Russell(1980)의 핵심정서차원을 부분적으로 지지하였다. 분류분석 결과, 각 영상이 정서유형에 따라 잘 분류되고 예측되었다. 마지막으로, 참가자간 상관분석을 통해 정서 반응 일관성이 각 영상의 정서유형에 따라 다르게 나타남을 확인하였다. 본 연구는 영상 자극에 대한 정서표상과 정서 반응 일관성이 정서 유형에 따라 차이가 있음을 시사한다.

• 한국콘텐츠학회논문지
• /
• 제16권2호
• /
• pp.332-343
• /
• 2016

디지털 기술의 발달과 함께 색 정보를 획득하고 색 정보를 다양한 콘텐츠와 결합하여 활용할 수 있는 새로운 방법들이 등장하고 있다. 색은 이미지의 요소로서 이미지와 관련된 정보를 주거나 우리의 감성에 영향을 준다. 또한, 색 자극에 의한 감성의 변화나 감각의 변화는 인지 기능에 변화를 가져온다. 본 연구는 인지 기능에 있어서 사용자의 감성에 따른 색 오버레이의 효과에 대해 조사한다. 이 목적에 따라, 20대 성인 남녀 각각 10명을 대상으로 영상을 이용하여 긍정적인 감정과 부정적인 감정을 유도 한 후에 적색/주황색/녹색 오버레이를 적용했을 때의 문제 풀이 능력을 테스트 하였다. 실험 분석 결과 긍정적인 감정 상태에서는 적색이 문제 풀이 능력을 저하시켰고, 부정적인 감정 상태에서는 녹색이 문제풀이 능력을 향상 시켰다. 또한, 색 오버레이 적용애 따른 초기 감정 상태가 인지에 주는 영향을 분석한 결과, 색 오버레이 적용시에는 초기 감정 상태에 따른 차이가 발생하지 않는 반면, 색 오버레이 미적용시에는 긍정적 감정 상태에서 언어 인지 능력이 통계적으로 유의미하게 부정적인 감정 상태에서 보다 향상됨을 보였다.

• 방송공학회논문지
• /
• 제27권4호
• /
• pp.499-510
• /
• 2022

본 논문에서는 영상 편집이 익숙하지 않은 시니어 동영상 크리에이터를 위한 동영상 편집 시스템을 설명한다. 영상분석 기술을 이용하여 편집소스 동영상을 분석하여 각종 정보를 제공하고, 자동으로 일부 장면을 삭제한다. 사용자가 다수의 소스 콘텐츠를 입력하였을 때, RNN(Recurrent Neural Network) 기술을 기반으로 샷 단위로 분할하고, 이 중 동영상 편집에서 배제할 부분을 구분한다. 각 샷 별로 중요도를 계산하여 샷 단위로 자동 삭제가 가능하도록 한다. 중요도 계산을 위해서 동영상 초점 정보를 추출하여 활용하는데, 이는 초점이 맞지 않는 영상 또는 흔들린 영상을 배제할 수 있도록 한다. 이후 시스템은 객체 인식을 수행하고, 얼굴이 나온 영상에 대해서 감정, 나이, 성별 등의 정보를 추출하여 사용자에게 제공한다. 사용자는 이런 정보를 활용하여 동영상을 제작한다. 동영상에 자막을 삽입하는 등 동영상을 꾸미기 위한 기능들도 포함되어 있으며, 이런 기능들을 활용할 시, 사용자의 과거 정보를 이용해서 선호 디자인을 쉽게 찾을 수 있도록 앞서 배치하고 있다. 시니어 동영상 크리에이터들이 본 시스템을 통해서 쉽고 빠르게 동영상 콘텐츠를 제작할 수 있다.

• 감성과학
• /
• 제7권3호
• /
• pp.51-56
• /
• 2004

감성을 구성하는 중요한 요소인 각성은 자율신경계 반응으로 잘 측정될 수 있음이 보고되고 있다. 그러나 자율신경계 반응만으로 각성차원과 쾌차원으로 구성된 전체감성을 측정할 수 있을지는 의문이다. 본 연구는 자율신경계 반응으로 전체 감성을 평가할 수 있는지 그 생리적 변수는 무엇인지를 분석하였다. 15명의 대학생을 대상으로 실험 목적을 위하여 제작된 8개의 동영상으로 다양한 감성을 유발했으며 자율신경계의 대표적 생리신화인 맥파(PPG), 피부저항(GSR), 피부온도(SKT)를 측정하였다. 자극제시후 주관적 감성평가를 실시하였다. 주관적 감성경험은 크게 3가지 요인으로 구성된 것으로 확인되었으며, 그 중에서 2개의 요인과 생리적 지표를 대응시키는 방안이 탐색되었다. 그 결과, 생리적 지표는 신체적으로 흥분할수록 감성경험에 따라 더욱 분명한 차이를 드러내지만 흥분수준이 낮은 경우에는 생리적인 지표만으로는 감성경험을 예측하기 어려웠다. 흥분과 평온함을 제외한 다른 감성 요인은 생리적인 지표와 직접 대응이 쉽지 않은데, 이는 상관관계가 없어서가 아니라 모든 생리지표와 감성간에 복합적인 관계가 있기 때문이었다. 특히 SKT는 흥분-평온함만을 반영하는 GSR, PPG와는 달리 불쾌-유쾌 경험과도 상관이 있는 것으로 나타났다. 따라서 SKT 지표와 불쾌-유쾌 감성 차원의 대응 가능성이 논의되었다.

• 한국음향학회지
• /
• 제34권3호
• /
• pp.247-255
• /
• 2015

본 논문은 자동으로 분류된 음악 신호의 감정을 기반으로 하는 음악 검색 의 성능을 분석하였다. 음성, 영상 등의 다른 미디어 신호와 마찬가지로 음악은 인간에게 특정한 감정을 불러일으킬 수 있다. 이러한 감정은 사람들이 음악을 검색할 때 중요한 고려요소가 될 수 있다. 그렇지만 아직까지 음악의 감정을 직접 인식하여 음악 검색을 수행하고 성능을 검증한 경우는 거의 없었다. 본 논문에서는 음악 감정을 표현하는 주요한 세 축인 유발성, 활성, 긴장 과 기본 5대 감정인 행복, 슬픔, 위안, 분노, 불안의 정도를 구하고, 그 값들의 유사도를 기반으로 음악 검색을 수행하였다. 장르와 가수 데이터셋에서 실험을 수행하였다. 제안된 감정 기반 음악 검색 성능은 기존의 특징 기반 방법의 성능에 대비해서 최대 75 % 수준의 검색 정확도를 보였다. 또한 특징 기반 방법을 제안된 감정 기반 방법과 병합할 경우 최대 14 % 검색 성능 향상을 이룰 수 있었다.

• 한국감성과학회:학술대회논문집
• /
• 한국감성과학회 2009년도 추계학술대회
• /
• pp.107-110
• /
• 2009

본 연구에서는 동영상 자극이 제시되었을 때 시각적으로 느껴지는 감성을 자율신경계 반응, 동공반응 그리고 주관 설문으로 평가하였다. 20~27세 사이의 대학생 남녀 20명이 실험에 참여 하였고 뉴스, 다큐멘터리1, 다큐멘터리2, 사랑, 스포츠 그리고 전쟁의 6가지 장르의 동영상에서 Gamma, Hue, Lightness 그리고 Saturation의 4가지 화질변수가 변경된 영상을 시각자극으로 제시하였다. 장르를 다르게 한 실험이 총 6회 진행되었으며 장르별로 기본영상 1개와 화질변수가 변경된 영상 16개가 무작위 순서로 제시되었다. 1회 실험이 진행되는 약 14분 동안 PPG, SKT 그리고 GSR 센서를 착용하여 생리 반응을 측정하였고 눈 영상을 기록하여 동공 반응을 측정하였다. 시각자극에 대한 주관적 평가를 위해 1~7점 척도의 불쾌도, 긴장도 그리고 피로도 항목의 설문을 실시하였다. 생리반응, 동공반응 그리고 주관설문 결과를 화질변수 별로 나누고 일원배치 분산분석을 실시하여 차이가 있는지를 확인하였다. 그 결과 시각 감성이 어떤 화질변수에 의해 유발되는지 확인할 수 있었다.

• 한국초등과학교육학회지:초등과학교육
• /
• 제38권2호
• /
• pp.244-262
• /
• 2019

The purpose of this study is to explore how the practical knowledge used by an elementary school science teacher during learner-centered science instruction can promote elementary students' construction of positive emotion. Using an auto-ethnographic approach over a period of three months, the researchers collected students' interest diaries, post interviews with students, video recordings in science classes, and students' personal diaries and analyzed them by means of the constant comparative method. In this way, the researchers categorized the structure of the practical knowledge held by the teacher and explained how it was applied in learner-centered science instruction to promote students' construction of positive emotion. Three images of an elementary science teacher's practical knowledge emerged and can be categorized under the following headings: 1) 'From science classroom to science $caf{\acute{e}}$', 2) 'Pleasant experiment class for all students and the teacher', and 3) 'A science class for students who were marginalized'. These images were backed up by principles and rules, and the teacher came to embody these images as he implemented these rules. This study also discusses how the impact of a science teacher's practical knowledge on students' construction of positive emotions can be interpreted as promoting positive outcomes rather than negative sanctions, meeting students' expectation from lab activities, and meeting the specific needs of marginalized students in a science class.

• 디자인학연구
• /
• 제19권2호
• /
• pp.343-354
• /
• 2006

인간의 감성은 주관적이고 개인적이며, 직관적이고 모호한 것이어서 정의하기도 힘들고, 따라서 측정하기는 더욱 어려운 과제이다. 일반적으로 감성의 측정방법은 사용자의 주관적인 평가를 토대로 하는 심리적 측정방법과 생리신호를 이용하는 생리적 측정방법으로 크게 나눌 수 있다. 하지만 이 두 가지방법 모두 한계를 가지고 있다. 따라서 본 연구에서는 디자인분야에서 접근이 용이하고 자연스러운 환경 하에서 사용자의 감성을 측정할 수 있는 방법을 제안하였다. 우선 사용자가 제품을 사용하는 도중에 유발되는 인간의 감성변화를 나타낼 수 있는 감성어휘들과 대표감성들을 추출하여 제품을 사용하는 도중에 표출되는 사용자의 감성을 측정하기에 적합한 주관적 평가스케일을 도출하였다. 이를 통해 심리적 측정방법의 한계점을 보완하여 제품을 사용하면서 표출되는 사용자의 감성을 효과적으로 측정할 수 있는 도구를 개발하였다. 개발된 소프트웨어(Video TAME)의 실험 진행 모듈에서는 실험 참여자가 실험실에서 자신이 태스크를 수행하였던 장면을 녹화한 동영상을 직접 재생해 보면서 자신의 감성변화를 평가할 수 있다. 실험 분석 모듈에서는 연구자가 각 태스크별로 전체적인 실험 내용을 재생하면서 실험 결과를 확인할 수 있고, 마이크로소프트 엑셀로 내보내기 위하여 다양한 측면에서 자료를 분석할 수 있다. 본 연구를 통해 개발된 도구는 제품을 사용하면서 자연스럽게 표출되는 사용자의 감성을 효과적으로 측정하기 위한 도구로 활용할 수 있을 것이다.