• 제목/요약/키워드: facial gestures

검색결과 46건 처리시간 0.017초

딥러닝 기반의 얼굴과 제스처 인식을 활용한 원격 제어 (Remote Control System using Face and Gesture Recognition based on Deep Learning)

  • 황기태;이재문;정인환
    • 한국인터넷방송통신학회논문지
    • /
    • 제20권6호
    • /
    • pp.115-121
    • /
    • 2020
  • IoT 기술과 이 확산됨에 따라 얼굴 인식을 활용하는 다양한 응용들이 등장하고 있다. 본 논문은 딥러닝 기반의 얼굴 인식과 손 제스처 인식을 활용하는 원격 제어 시스템을 설계 구현한 내용을 기술한다. 얼굴 인식을 활용하는 응용시스템은 카메라로부터 실시간으로 영상을 촬영하는 부분과 영상으로부터 얼굴을 인식하는 부분, 그리고 인식된 결과를 활용하는 부분으로 구성된다. 영상을 실시간으로 촬영하기 위해서 어디서나 장착 가능한 싱글보드 컴퓨터인 라즈베리파이를 이용하고, 서버 컴퓨터에는 FaceNet 모델을 활용하여 얼굴 인식 소프트웨어를 개발하고 OpenCV를 이용한 손 제스처 인식 소프트웨어도 개발하였다. 사용자를 알려진 사용자와 위험한 사용자 그리고 모르는 사용자의 3 그룹으로 구분하고, 얼굴 인식과 손 제스처가 모두 통과된 알려진 사용자에 대해서만 자동 도어락을 오픈하는 응용을 설계 구현하였다.

챗봇의 사회적 현존감을 위한 비언어적 감정 표현 방식 (Non-verbal Emotional Expressions for Social Presence of Chatbot Interface)

  • 강민정
    • 한국콘텐츠학회논문지
    • /
    • 제21권1호
    • /
    • pp.1-11
    • /
    • 2021
  • 챗봇과 친밀한 관계를 느끼고 대화에 몰입감을 높이기 위해 인간의 감정을 정확히 인지하고 그에 적합한 감정적 반응을 표현하는 인공지능 연구가 활발히 진행되고 있다. 따라서 본 연구에서는 챗봇이 감정을 표현할 때 사람같이 느끼게 하는 사회적 현존감을 높이는 비언어적 표현 방식에 대해서 밝히고자 한다. 본 연구는 우선 배경연구를 진행하여 표정이 가장 감정을 잘 드러내는 비언어적 표현이며 움직임은 관계몰입에 중요하다는 것을 파악하였다. 이를 바탕으로 감정에 따라 사회적 현존감이 느껴지는 표현 방식을 밝히기 위해 5가지 기본 감정인, 기쁨, 슬픔, 놀람, 두려움, 화남을 동적 텍스트, 동적 제스처, 정적 표정 이모티콘으로 자극물을 준비하여 설문조사를 통해 가장 사회적 현존감이 느껴지는 표현 방식을 각 감정별로 택하도록 하였다. 설문 결과 기쁨과 같은 긍정적이고 각성 상태가 높은 감정에서는 동적인 표현이, 슬픔과 화남과 같은 부정적인 감정에서는 정적 표정 이모티콘이, 놀람, 두려움과 같은 중립적 감정의 경우 의미를 확실히 알 수 있는 동적 텍스트가 주로 선택되었다. 본 연구 결과는 챗봇 개발 시 감정을 표현하는 방식을 정할 때 중요한 참고자료가 될 것으로 기대한다.

지능형 전시 서비스 구현을 위한 멀티모달 감정 상태 추정 모형 (Multimodal Emotional State Estimation Model for Implementation of Intelligent Exhibition Services)

  • 이기천;최소윤;김재경;안현철
    • 지능정보연구
    • /
    • 제20권1호
    • /
    • pp.1-14
    • /
    • 2014
  • 최근 관람객의 반응에 따라 실시간으로 대응하여 관객의 몰입과 만족도를 증대시키는 인터랙티브 전시 서비스에 대한 학계와 산업계의 관심이 높아지고 있다. 이러한 인터랙티브 전시 서비스를 효과적으로 구현하기 위해서는 관객의 반응을 통해 해당 관객이 느끼는 감정 상태를 추정할 수 있는 지능형 기술의 도입이 요구된다. 인간의 감정 상태를 추정하기 위한 시도들은 많은 연구들에서 이루어져 왔고, 그 중 대부분은 사람의 얼굴 표정이나 소리 반응을 통해 감정 상태를 추정하는 방식을 도입하고 있다. 하지만, 최근 소개되고 있는 연구들에 따르면 단일 반응이 아닌 여러 반응을 종합적으로 고려하는 이른바 멀티 모달(multimodal) 접근을 사용했을 경우, 인간의 감정 상태를 보다 정확하게 추정할 수 있다. 이러한 배경에서 본 연구는 키넥트 센서를 통해 측정되는 관객의 얼굴 표정, 몸짓, 움직임 등을 종합적으로 고려한 새로운 멀티모달 감정 상태 추정 모형을 제안하고 있다. 제안모형의 예측 기법으로는 방대한 양의 데이터를 효과적으로 처리하기 위해, 몬테칼로(Monte Carlo) 방법인 계층화 샘플링(stratified sampling) 방법에 기반한 다중회귀분석을 적용하였다. 제안 모형의 성능을 검증하기 위해, 15명의 피실험자로부터 274개의 독립 및 종속변수들로 구성된 602,599건의 관측 데이터를 수집하여 여기에 제안 모형을 적용해 보았다. 그 결과 10~15% 이내의 평균오차 범위 내에서 피실험자의 쾌/불쾌도(valence) 및 각성도(arousal) 상태를 정확하게 추정할 수 있음을 확인할 수 있었다. 이러한 본 연구의 제안 모형은 비교적 구현이 간단하면서도 안정성이 높아, 향후 지능형 전시 서비스 및 기타 원격학습이나 광고 분야 등에 효과적으로 활용될 수 있을 것으로 기대된다.

무용의 스토리텔링 구조연구 (Structural Study on Dance Story-Telling)

  • 김기화;백현순
    • 한국콘텐츠학회논문지
    • /
    • 제12권1호
    • /
    • pp.265-274
    • /
    • 2012
  • 본 연구는 무용예술의 신체적 언어가 서사적 담론체계로서 스토리텔링의 담론방식을 수용할 수 있는가를 연구목적으로 하고 있다. 무용은 무용수와 무대미술의 관계형성을 통해서 비유 은유 상징 등의 다양한 문학적 장치들로 담론의 체계를 형성할 수 있다. 스토리텔링의 개념에서 무용의 서사적 구성요소를 발현하는가에 대한 논의는 다음과 같다. 사물적 요소로서 배경은 무대미술과 무용수의 행위적 요소들에 의해서 시공간적 배경이 제시가능하며, 인물설정도 무용수는 그 자체가 1인칭 화자인 동시에 평면적인 인물성격 묘사가 가능하다. 무용의 사건적 요소는 무대미술의 요소들이 1차적인 사건적 동기의 배경을 제시하고, 무용수의 다양한 인간관계로서 독무, 듀엣, 군무의 상관관계를 통해서 갈등관계가 형성되고, 사건을 전개하는 과정으로서 플롯은 무용수의 마임적 행위, 제스처, 얼굴표정 등의 행위소에 의해서 이끌어간다. 무용이 서사를 발현하는 요소는 무용 예술 그 자체가 발현체가 되며, 서사의 전이구조는 무용언어가 갖는 고유의 문법이다. 안무가는 무용의 서사의 담론으로서 인물설정, 인물의 행위, 시공간적 배경을 연출하는 무대미술의 요소들, 플롯의 전개 등으로 이야기를 효과적으로 전달할 수 있도록 설득력 있는 무용텍스트를 구성해야 한다.

영화 <사도>(2015)의 클로즈업 쇼트 연구 (Study on Close-Up Shots in Film (2015))

  • 이아영
    • 한국콘텐츠학회논문지
    • /
    • 제16권7호
    • /
    • pp.609-621
    • /
    • 2016
  • 프레임 가득 배우의 얼굴을 확대하여 미세한 표정의 떨림조차 놓치지 않고 정확하게 포착하는 클로즈업은 살아있는 배우가 연기를 하는 무대 위 보다 훨씬 더 사실적으로 배우의 연기를 표현한다. 클로즈업은 관객의 시선을 사로잡을 수 있는 나름의 이미지와 의미의 효과들을 생산하며, 배우의 얼굴이 최소한의 거리에서 관객과 직접적인 소통을 하는 듯한 심리적 현상을 불러일으키기 때문이다. 이에 본 연구는 클로즈업의 촬영 효과와 연기 효과를 연구하고, 그에 따른 연기 훈련의 필요성을 제언하기 위해 영화 <사도>(2015)를 분석해보았다. 영화 <사도>는 송강호가 인물 설정의 사실성을 높이기 위해 얼굴의 특수 분장으로 실제 나이보다 20년 이상 많은 나이를 연기했고, 이러한 얼굴과, 제스처, 클로즈업 된 소품들이 극중 인물의 성격과 영화의 감정을 표현함에 있어 어떠한 연기력을 충분히 공유하며, 영화연기의 핵심이 되는 다양한 언어적, 시각적, 정서적 의미의 효과들을 만들어내고 있다는 점에서 분석의 대상으로 삼았다. 본 연구를 통해 배우들이 클로즈업의 효과와 영화연기의 핵심을 알고, 카메라 앞에서 효과적인 표현 방법을 찾는데 조금이나마 도움이 되었으면 하는 바람이다.

송강호의 스크린 퍼포먼스와 사회적 태도 (Screen Performance and Social Attitude of Song Gang-Ho)

  • 김종국
    • 한국엔터테인먼트산업학회논문지
    • /
    • 제13권2호
    • /
    • pp.123-132
    • /
    • 2019
  • 이 글은 학제적이고 통합적인 영화연기론을 배경으로 배우 송강호의 퍼포먼스를 분석하면서, 연기의 일반적인 용어인 액팅보다는 퍼포먼스를 사용하였다. 액팅이 연기훈련 또는 연기술에 한정하는 협의의 개념이라면, 퍼포먼스는 표정, 움직임, 감정까지 포함하는 광의의 개념이다. 극장의 스크린에 비춰진 퍼포먼스는 콘텍스트의 맥락에서 설명할 수 있고, 연기술 같은 전문영역에 국한되지 않고 연기의 사회적 태도로 확장할 수 있다. 또한 영화매체의 특성에 기인하는 필름보다는 재현의 관점에서 스크린이라는 용어를 사용하였다. 송강호는 30편 이상의 영화에서 다양한 인물의 퍼포먼스를 표현했다. 여러 장르에서 개별 인물에 적합한 얼굴표정, 제스처, 발성, 목소리 등이 다양하게 재현되지만, 배우 송강호에 고유한 개성이 페르소나와 인물을 통합시킨다. 이를 견인하는 것이 스크린 퍼포먼스의 사회적 태도이다. 기호로서 연기는 이념적 구성물이며, 어떤 사회역사적 순간을 서술하는 인물로 전경화된다. 대중성을 담보한 배우, 페르소나, 인물로서의 송강호는 사회를 향해 발언하고 담론을 촉발한다. 그의 희극적 퍼포먼스는 삶의 비극에 맞서며, 그의 얼굴은 시대정신이고, 사회적 의미로 확장된다. 클로즈업의 표정은 결코 웃지 않으며, 굽은 뒷모습으로 상징되는 제스처는 어수선하고 소란스럽게 과장되며, 지방어의 악센트를 쓰는 음성은 보컬의 기준을 따르지 않는다.