• 제목/요약/키워드: Audio Data

검색결과 879건 처리시간 0.027초

지능형 전시 서비스 구현을 위한 멀티모달 감정 상태 추정 모형 (Multimodal Emotional State Estimation Model for Implementation of Intelligent Exhibition Services)

  • 이기천;최소윤;김재경;안현철
    • 지능정보연구
    • /
    • 제20권1호
    • /
    • pp.1-14
    • /
    • 2014
  • 최근 관람객의 반응에 따라 실시간으로 대응하여 관객의 몰입과 만족도를 증대시키는 인터랙티브 전시 서비스에 대한 학계와 산업계의 관심이 높아지고 있다. 이러한 인터랙티브 전시 서비스를 효과적으로 구현하기 위해서는 관객의 반응을 통해 해당 관객이 느끼는 감정 상태를 추정할 수 있는 지능형 기술의 도입이 요구된다. 인간의 감정 상태를 추정하기 위한 시도들은 많은 연구들에서 이루어져 왔고, 그 중 대부분은 사람의 얼굴 표정이나 소리 반응을 통해 감정 상태를 추정하는 방식을 도입하고 있다. 하지만, 최근 소개되고 있는 연구들에 따르면 단일 반응이 아닌 여러 반응을 종합적으로 고려하는 이른바 멀티 모달(multimodal) 접근을 사용했을 경우, 인간의 감정 상태를 보다 정확하게 추정할 수 있다. 이러한 배경에서 본 연구는 키넥트 센서를 통해 측정되는 관객의 얼굴 표정, 몸짓, 움직임 등을 종합적으로 고려한 새로운 멀티모달 감정 상태 추정 모형을 제안하고 있다. 제안모형의 예측 기법으로는 방대한 양의 데이터를 효과적으로 처리하기 위해, 몬테칼로(Monte Carlo) 방법인 계층화 샘플링(stratified sampling) 방법에 기반한 다중회귀분석을 적용하였다. 제안 모형의 성능을 검증하기 위해, 15명의 피실험자로부터 274개의 독립 및 종속변수들로 구성된 602,599건의 관측 데이터를 수집하여 여기에 제안 모형을 적용해 보았다. 그 결과 10~15% 이내의 평균오차 범위 내에서 피실험자의 쾌/불쾌도(valence) 및 각성도(arousal) 상태를 정확하게 추정할 수 있음을 확인할 수 있었다. 이러한 본 연구의 제안 모형은 비교적 구현이 간단하면서도 안정성이 높아, 향후 지능형 전시 서비스 및 기타 원격학습이나 광고 분야 등에 효과적으로 활용될 수 있을 것으로 기대된다.

무선 멀티미디어 센서 네트워크에서의 신뢰성 있는 비동기적 이미지 전송 프로토콜 (Reliable Asynchronous Image Transfer Protocol In Wireless Multimedia Sensor Network)

  • 이좌형;선주호;정인범
    • 정보처리학회논문지C
    • /
    • 제15C권4호
    • /
    • pp.281-288
    • /
    • 2008
  • 최근 하드웨어의 발달로 무선 센서네트워크를 이용하여 멀티미디어 데이터를 수집하기 위한 멀티미디어 센서네트워크에 관한 연구가 활발히 이루어지고 있다. 멀티미디어 데이터들은 텍스트 형태의 데이터들에 비해 크기가 매우 크며 데이터를 구성하는 일부의 패킷이 손실되면 전체 데이터가 쓸모가 없어지는 경우가 많아 데이터간 관련성이 매우 크다. 따라서 멀티미디어 데이터를 전송하기 위해서는 신뢰성이 보장되어야만 한다. 하지만 기존의 텍스트 기반 데이터를 위한 전송프로토콜들은 대부분 신뢰성보다는 네트워크의 효율성을 목적으로 연구되어져 멀티미디어 데이터를 전송하기에 적합하지 않다. 본 논문에서는 센서네트워크에서의 신뢰성 있는 비동기적 이미지 전송 프로토콜인 RAIT를 제안한다. RAIT는 네트워크 혼잡으로 인한 패킷 손실을 방지하기 위하여 노드간 이미지 전송시 이중 슬라이딩 윈도우 기법을 적용한다. 노드간 통신장애로 인한 패킷 손실을 방지하기 위한 수신큐를 위한 슬라이딩 윈도우뿐만 아니라 혼잡으로 인한 패킷손실이 발생하는 전송큐를 위한 슬라이딩 윈도우를 통하여 이미지 전송의 신뢰성을 보장한다. 상위노드는 하위노드들을 이미지별로 비선점형으로 스케즐링하여 패킷손실을 없애면서 노드간 형평성을 높인다. 이중슬라이딩 윈도우를 구현하기 위하여 RAIT에서 라우팅 레이어와 큐 레이어를 제어하도록 하는 크로스레이어 기법을 적용한다. 실험을 통하여 RAIT가 기존 프로토콜에 비해 신뢰성 있게 이미지 전송을 보장함을 보인다.

동질모둠이 수행한 과학탐구실험에서 실험 진행에 따른 상호작용의 변화와 특성 (Change and Characteristics of Interactions in a Homogeneous Group on Scientific Inquiry Experiments)

  • 성숙경;최병순
    • 한국과학교육학회지
    • /
    • 제28권1호
    • /
    • pp.75-88
    • /
    • 2008
  • 이 연구는 과학탐구실험을 진행하는 과정에서 나타나는 상호작용의 변화양상을 분석하여 상호작용의 특성과 상호작용의 변화에 영향을 미치는 요인을 알아보고자 하였다. 이를 위해 1년 동안 13개의 탐구실험활동이 진행되는 동안 교사가 추천한 두 동질모둠을 관찰하면서 녹음/녹화하였다. 40차시의 녹음/녹화자료는 모두 전사되었으며, 자료는 메모하면서 보고 듣는 과정을 반복하는 방법을 기초로 분석하였다. 분석결과 두 동질모둠의 변화방향은 현저히 달랐는데, 모둠 A는 모둠원간 감정대립이 심해 상호작용을 통한 학습이 불가능하게 된 반면, 모둠 B는 상호작용의 수준이 높아지고 있었다. 두 모둠의 상반된 변화는 모둠원의 의견이나 감정을 중재할 수 있는 동료의 존재여부에 의해 가장 크게 영향 받는 것으로 보인다. 전반적으로 볼 때, 학생들은 동료의 의견을 받아 논의하는 방법에 서툴렀고, 보고서 완성을 중시하였으며, 성취도가 낮은 학생이 소외되는 경향이 있었다. 또한 목표를 이해에 두는가, 동료의 의견을 존중하는가, 동료를 배려하는가, 분위기의 중재자가 있는가에 의해 상호작용의 변화방향이 달라지고 있었다. 이로부터 상호작용을 강조한 활동의 진행과 모둠구성에 대한 시사점을 얻을 수 있었으며, 이에 대해 논의하였다.

스마트폰 다종 데이터를 활용한 딥러닝 기반의 사용자 동행 상태 인식 (A Deep Learning Based Approach to Recognizing Accompanying Status of Smartphone Users Using Multimodal Data)

  • 김길호;최상우;채문정;박희웅;이재홍;박종헌
    • 지능정보연구
    • /
    • 제25권1호
    • /
    • pp.163-177
    • /
    • 2019
  • 스마트폰이 널리 보급되고 현대인들의 생활 속에 깊이 자리 잡으면서, 스마트폰에서 수집된 다종 데이터를 바탕으로 사용자 개인의 행동을 인식하고자 하는 연구가 활발히 진행되고 있다. 그러나 타인과의 상호작용 행동 인식에 대한 연구는 아직까지 상대적으로 미진하였다. 기존 상호작용 행동 인식 연구에서는 오디오, 블루투스, 와이파이 등의 데이터를 사용하였으나, 이들은 사용자 사생활 침해 가능성이 높으며 단시간 내에 충분한 양의 데이터를 수집하기 어렵다는 한계가 있다. 반면 가속도, 자기장, 자이로스코프 등의 물리 센서의 경우 사생활 침해 가능성이 낮으며 단시간 내에 충분한 양의 데이터를 수집할 수 있다. 본 연구에서는 이러한 점에 주목하여, 스마트폰 상의 다종 물리 센서 데이터만을 활용, 딥러닝 모델에 기반을 둔 사용자의 동행 상태 인식 방법론을 제안한다. 사용자의 동행 여부 및 대화 여부를 분류하는 동행 상태 분류 모델은 컨볼루션 신경망과 장단기 기억 순환 신경망이 혼합된 구조를 지닌다. 먼저 스마트폰의 다종 물리 센서에서 수집한 데이터에 존재하는 타임 스태프의 차이를 상쇄하고, 정규화를 수행하여 시간에 따른 시퀀스 데이터 형태로 변환함으로써 동행 상태분류 모델의 입력 데이터를 생성한다. 이는 컨볼루션 신경망에 입력되며, 데이터의 시간적 국부 의존성이 반영된 요인 지도를 출력한다. 장단기 기억 순환 신경망은 요인 지도를 입력받아 시간에 따른 순차적 연관 관계를 학습하며, 동행 상태 분류를 위한 요인을 추출하고 소프트맥스 분류기에서 이에 기반한 최종적인 분류를 수행한다. 자체 제작한 스마트폰 애플리케이션을 배포하여 실험 데이터를 수집하였으며, 이를 활용하여 제안한 방법론을 평가하였다. 최적의 파라미터를 설정하여 동행 상태 분류 모델을 학습하고 평가한 결과, 동행 여부와 대화 여부를 각각 98.74%, 98.83%의 높은 정확도로 분류하였다.

교사학습공동체 교사들의 과학 실천 기반 수업을 위한 PCK 구성 (Pedagogical Content Knowledge for Science Practice-Based Instruction Developed by Science Teachers in a Teacher Learning Community)

  • 양정은;최애란
    • 한국과학교육학회지
    • /
    • 제40권5호
    • /
    • pp.565-582
    • /
    • 2020
  • 본 연구에서는 과학 실천 수업을 위한 교사학습공동체를 형성한 5명의 중학교 과학 교사들이 1년간의 교사학습공동체 활동을 통해 과학 실천 수업에 관한 어떠한 PCK를 구성하였는지 분석하였다. 교사학습공동체에서 교사들은 협력적인 수업 설계, 수업 실행 공유 및 성찰을 반복하였다. 본 연구에서는 사전·사후 설문과 면담을 시행하고, 교사학습공동체 모임에 참여 관찰 및 녹음을 하고, 수업계획안, 과학 실천 수업 녹화 영상, 수업 일기 등의 자료를 수집하였다. PCK 이론적 틀에 기반하여 연역적으로 분석하고 다시 귀납적 분석을 통해 그 범주를 정교화하고 수정하여 본 연구의 교사들이 과학 실천 교육과정, 과학 실천 교수 전략, 학생의 과학 실천 학습, 과학 실천 학습평가의 네 가지 PCK 요소에 포함된 총 11개 하위 요소의 PCK를 구성한 것을 밝혔다. 본 연구의 교사들은 과학 실천 교육과정에 관한 지식으로 과학 실천 교육과정 자료에 관한 지식, 핵심 개념 선정 및 교육과정 구조화에 관한 지식을 구성하였고, 과학 실천 교수 전략에 관한 지식으로 과학 실천 특이적 전략, 과학 실천 활동 선정 및 구조화 전략, 과학 실천 학습 가이드 전략에 관한 지식을 구성하였다. 학생의 과학 실천 학습에 관한 지식으로 과학 실천 선지식, 과학 실천 수행 어려움, 과학 실천 동기, 과학 실천 수행 다양성에 관한 지식을 구성하였고, 과학 실천 학습 평가에 관한 지식으로 과학 실천 학습 평가내용, 과학 실천 학습 평가 방법에 관한 지식을 구성하였다. 본 연구의 교사들이 구성한 과학 실천 수업 PCK는 학생들의 과학 실천을 통한 핵심 개념 학습을 위해 고도로 구조화된 지식으로 사료된다.

예비 화학 교사의 논의와 글쓰기가 강조된 탐구 중심 과학 수업 계획과 수행: 어려움과 극복과정을 중심으로 (Pre-Service Chemistry Teacher's Designing and Implementing Inquiry-Based Science Instruction that Emphasizes Argumentation and Writing: Focus on Ways to Overcome Difficulties)

  • 방애리;최애란
    • 대한화학회지
    • /
    • 제60권5호
    • /
    • pp.342-352
    • /
    • 2016
  • 본 연구에서는 예비 화학 교사가 논의와 글쓰기가 강조된 탐구 중심 과학 수업을 개발하고 적용하는 과정에서 직면하는 어려움과 이를 극복해나가는 과정을 분석하였다. 이를 위해 예비 화학 교사가 각 주제 수업 개발 후, 10개 주제 전체 수업 개발 후, 각 주제 수업 수행 후, 10개 주제 전체 수업 수행 완료 후에 작성한 반성적 저널, 수업 지도안, 수업 녹음, 학생 작성 활동지 등을 분석하였다. 예비 화학 교사는 논의와 글쓰기를 강조한 탐구 수업 과정에서 자신의 과학 지식이 부족함을 인식하고 이후의 수업 준비에서는 철저한 과학 개념 확립을 위한 노력을 하였다. 학생 수준 파악의 어려움은 현장 경력교사의 조언, 학생들과의 상호작용, 교과서의 서술 내용 분석 등을 통하여 극복하려 노력하였다. 또한 다양하고 방대한 과학 수업 자료를 참고하여 탐구 중심 과학 수업 지도안을 개발하는데 어려움을 겪었고, 각 주제의 수업 목표를 명확히 세운 후 구체적인 교수-학습 활동을 선정할 수 있었다. 수업 시간을 효율적으로 운영하고 적극적인 학생 참여를 유도하는데도 어려움을 겪었고 현장 경력 교사의 조언을 토대로 격려와 통솔을 병행함으로써 향상되었다. 또한 수업을 진행하면서 논의와 글쓰기에 대한 구체적인 가이드 제공의 필요성을 느끼고 이를 실시하여 학생들의 논의 참여와 글쓰기 수준 향상을 도모하였다.

디지털 영상의 다중 하위 비트플랜에 삽입되는 워터마크 (An Embedded Watermark into Multiple Lower Bitplanes of Digital Image)

  • 이강현
    • 전자공학회논문지CI
    • /
    • 제43권6호
    • /
    • pp.101-109
    • /
    • 2006
  • 최근 인터넷의 광범위한 보급과 관련 응용 프로그램들의 개발에 따라 멀티미디어 자료(텍스트, 영상, 비디오, 오디오 등)의 배포와 사용이 용이하다. 디지털 신호는 복제가 용이하고 복제된 데이터는 원 데이터와 동일한 품질을 가질 수 있어서 원 소유자의 보증이 어렵다. 이러한 문제점을 해결하는 저작권 보호 방법은 암호화(encipher) 및 워터마킹(watermarking) 기술이 있다. 디지털 워터마킹은 지적재산권의 보호와 멀티미디어 콘텐츠의 소유권자를 인증하기 위해 사용된다. 본 논문은 디지털 영상의 다중 하위 비트플랜에 워터마크를 삽입하는 워터마킹 알고리즘을 제안하였다. 제안된 알고리즘은 원 영상과 워터마크 영상을 각각 비트플랜으로 분해하여 대응되는 각각의 비트플랜에서 워터마킹 연산이 수행된다. 각 비트플랜에서 삽입되는 워터마크 영상의 위치는 워터마킹 키(key)로 사용하며, 인간 시각인지에 거의 영향이 없는 다중 하위 비트플랜에서 실행된다. 따라서 워터마크 영상의 다중적 고유 패턴 표현과 적은 워터마킹 정보량이 필요하다. 실험을 통하여 워터마크 된 영상의 PSNR을 40dB로 평가 기준을 할 때, JPEG, MEDIAN, PSNR 공격에는 높은 강인성을 갖는 반면, 공간 영역에서의 NOISE, RNDDIST, ROT, SCALE, SS 공격에는 취약 한 결과를 갖는다.

WPAN용 디지털 음향기기 및 통신기기간 스펙트럼 상호운용을 위한 채널 할당기술에 관한 연구 (Common Spectrum Assignment for low power Devices for Wireless Audio Microphone)

  • 김성권;차재상
    • 한국지능시스템학회논문지
    • /
    • 제18권5호
    • /
    • pp.724-729
    • /
    • 2008
  • 본 논문에서는 WPAN(Wireless Personal Area Network) 기반의 디지털 음향기기 및 소출력 무선 통신기기를 운용함에 있어서, 한정된 주파수 자원을 효율적으로 할당하기 위한 공유 주파수 대역폭의 산출법을 제시한다. WPAN 기반의 디지털 음향기기 및 통신기기로서는 Digital Cordless Phone (DCP)과 Bluetooth를 비롯하여, RFID와 ZigBee기술을 고려하였다. 또한, 본 논문에서는 상기 WPAN 기반의 디지털 음향기기 및 통신기기간의 스펙트럼 운용 측면에 따른 적용 방식을 DCP, RFID, Bluetooth는 FH (Frequency Hopping) 방식으로, ZigBee는 LBT(Listen Before Talk) 방식으로 분류한 후 대기행렬 이론에 근거한 스펙트럼 상호운용을 위한 채널할당기법을 제시하였다. 본 논문에서는 대기행렬이론 (queuing theory)을 WPAN 기반의 디지털 음향기기 및 통신기기간의 스펙트럼 운용기법에 적용하기 위하여, FH 시스템과 LBT 시스템을 모델링하였고, 컴퓨터 시뮬레이션을 통하여 소요대역폭 산출을 수행했다. 채널수 별 user의 통신시도에 따른 throughput을 분석한 결과, throughput 84% 이상의 조건에서 FH 및 LBT 방식을 사용하는 250mW WPAN 기반의 디지털 음향기기 및 통신기기들이 공존하는 공유주파수대역의 적정 채널수는 35개를 가지며, 총 소요대역폭은 각각의 WPAN기반의 디지털 음향기기 및 통신기기들의 채널수와 채널대역폭의 곱으로 산출이 가능함을 보였다.

SMIL 2.0 문서 재생을 위한 이벤트 처리기의 설계 및 구현 (A Design and Implementation of Event Processor for Playing SMIL 2.0 Documents)

  • 김혜은;채진석;이재원;김성동;이종우
    • 한국멀티미디어학회논문지
    • /
    • 제7권2호
    • /
    • pp.251-263
    • /
    • 2004
  • SMIL(Synchronized Multimedia Integration Language)은 W3C에서 제안한 멀티미디어 프리젠테이션에 관한 국제 표준 언어이다. 이것은 개별적으로 존재하는 수많은 멀티미디어 데이터들을 통합하여 새로운 멀티미디어 데이터를 만들 수 있고, 기존의 웹 브라우저에서는 불가능했던 멀티미디어 데이터들의 동기화를 수행할 수 있다는 장점을 가지고 있다. 이러한 SMIL 기술을 이용하고 활성화하려면, QoS를 보장할 수 있는 멀티미디어 서버, SMIL 저작 도구, SMIL 재생 도구의 개발이 요구된다. 관련 도구의 개발을 위해서는 SMIL 문서 형태인 텍스트 파일을 읽어서 해석하고, 문서에 나타나는 여러 형태의 미디어 객체들을 시간적인 동기화 관계에 따라 재생할 수 있는 기술이 필수적으로 필요하다. 따라서 본 논문에서는 시간적인 동기화 관계에 따라 미디어들의 재생이 가능하고, 재생 중 이벤트 처리가 가능하여 SMIL 2.0시간 모델을 만족하는 이벤트 처리기를 설계 및 구현하였고, 이 이벤트 처리기를 이용하여 SMIL Basic 프로파일을 만족하는 재생기를 개발하였다. 이것은 SMIL 컨텐츠들을 쉽게 재생할 수 있게 하여 SMIL의 활성화에 기여할 수 있고 SMIL 표준안에 정의된 여러 종류의 프로파일에서 재 사용될 수 있어서 XHTML+SMTL이나 SMIL Animation과 같은 SMIL을 통합하는 다른 표준들에 응용될 수 있을 것으로 예상된다.

  • PDF

성인의 초경경험분석에 따른 국민학생을 위한 초경교육의 필요성 제기 (Analysis of Menarche Experience and Raising of Need of Menarche Education)

  • 김정은
    • 여성건강간호학회지
    • /
    • 제1권2호
    • /
    • pp.222-243
    • /
    • 1995
  • The purpose of this study was to develop concrete and in-depth knowledge about menarche and to raise the need of menstrual education. The data were collected from purposively sample 34 women from twenties to forties from April 27 to October 10, 1994. Semi-structured intensive interviews were done and these qualitative data were analysed with "Ethnograph" computer program. The results of the study were as follows : 1. The experience of menarche could be classified into two main groups, which were positive and negative response to menarche. The negative experiences were to be shameful, tearful, scared of the phenomena and thought as a kind of punishment for guilt or confused menarche with other symptoms of diseases. On the contrary, the positive experiences were to be proud of physical maturity and to think that is was wonderful, miraculous and to perceive it as a warm experience. 2. The experience of menarche was influenced by various factors. They were the knowledge about menstruation, the quality and amount of informations, the time of menarche, the environmental factors, the response of significant others toward menarche. The experience of menarche could be positive or negative according to these factors. 3. The previous information sources about menstruation could be significant others, school education and mass-media. The significant others were mothers, sisters, friends and the person in charge of school sex education such as school nurses, home economics, military drill and athletics of teachers. And mass-media included sex education booklets, nursery tales, TV programs, and publicity activities of sanitary napkin companies. 4. The opinions of the subjects about the proper time of menarcheal education could be grossly classified into two groups. The first was active approach toward children when they were in elementary school. The second was passive approach which postponed the time until the child ask about it, because it would be awkward for them to discuss about the topic. 5. The participants thought that the ideal methods of menarche education would be systematic school education programs, open discussion with daughters, audio-visual teachings, or practical education in everyday life. 6. The contents of the menarche education based on the participants' opinions, would be positive details about meanings and functions of menstruation. And it would be desirable if the attitudes of the person in charge of education could be positive, open-hearted, and favorable toward menstruation.

  • PDF