• 제목/요약/키워드: 멀티모달 콘텐츠

검색결과 21건 처리시간 0.024초

가상현실 기반의 바이오 교육 콘텐츠 (A Bio Edutainment Contents System based on Virtual Reality)

  • 이준;박성준;김형석;김지인
    • 한국콘텐츠학회:학술대회논문집
    • /
    • 한국콘텐츠학회 2009년도 춘계 종합학술대회 논문집
    • /
    • pp.59-65
    • /
    • 2009
  • 에듀테인먼트는 교육적인 효과와 함께 게임 기술 및 게임 이론들을 적용하여 즐거움 외에 교육을 통한 특정 분야의 문제 해결을 목적으로 가지는 콘텐츠를 말한다. 이러한 에듀테인먼트는 재미뿐만 아니라 교육적인 효과 때문에 과학기술 분야 및 산업기술 분야의 교육 및 훈련에 유용하다. 본 연구에서는 사용자가 직관적인 멀티 모달 인터페이스를 사용하여 생명공학에 적용한 바이오 에듀테인먼트 시스템을 제안한다. 이를 위하여 3차원 분자 구조를 특수 모니터를 사용하여 입체 시각화 하였으며 입체 영상화된 분자 구조를 효율적으로 제어하기 위하여 멀티 모달 인터페이스인 WiiRemote를 사용하였다. 본 논문에서 제안된 시스템은 분자 도킹 시뮬레이션이 가지던 문제점인 3차원 분자 모델들의 결합 및 조작이 사용자의 직관과 경험에 많이 의존하기 때문에 초보자들의 접근이 어려운 점을 게임적 요소를 적용하여 재미를 느끼게 하면서 해결하도록 하였다. 이를 위해 사용자가 조작을 하는 객체와 사용자의 수에 따른 게임적 요소인 레벨 업 개념을 적용하여 반복학습이 이루어지도록 하였다.

  • PDF

멀티 모달 인터페이스 기반 플레이어 얼굴 표정 분석 시스템 개발 (Expression Analysis System of Game Player based on Multi-modal Interface)

  • 정장영;김영빈;이상혁;강신진
    • 한국게임학회 논문지
    • /
    • 제16권2호
    • /
    • pp.7-16
    • /
    • 2016
  • 본 논문은 게임을 수행하는 개별 사용자의 특별한 행동 탐지를 효율적으로 수행하는 시스템을 제안한다. 제안하는 시스템은 일반적인 게임 플레이 환경에서 비 침투적 방법을 통해 포착 가능한 사용자 특징과 반복적인 패턴에 기반을 두어 특이 행동 탐지를 한다. 본 논문에서는 표정과 사용자 움직임과 같이 관찰되는 자료를 분석하기 위해 카메라를 사용했다. 게다가 반복 행동 탐지를 위해 게임 사용자로부터 멀티 모달 데이터를 사용하여 고차원의 행동 분석하기 위해 사용했다. 특이 행동 탐지에 효과적인 Support Vector Machine 을 사용했으며, 특이 행동 탐지 수행의 유용성을 평가하여 약 70% 확률로 탐지하는 이상 행동 탐지 재현율을 보였다. 또한 반복 행동 분석이 가능함을 보였다. 제안된 기법을 사용하였을 때 PC 환경에서 제공하는 모든 콘텐츠의 분석에 대한 피드백과 정량화하는데 도움이 될 수 있다.

멀티모달 상호작용 중심의 로봇기반교육 콘텐츠를 활용한 r-러닝 시스템 사용의도 분석 (A Study on the Intention to Use a Robot-based Learning System with Multi-Modal Interaction)

  • 오준석;조혜경
    • 제어로봇시스템학회논문지
    • /
    • 제20권6호
    • /
    • pp.619-624
    • /
    • 2014
  • This paper introduces a robot-based learning system which is designed to teach multiplication to children. In addition to a small humanoid and a smart device delivering educational content, we employ a type of mixed-initiative operation which provides enhanced multi-modal cognition to the r-learning system through human intervention. To investigate major factors that influence people's intention to use the r-learning system and to see how the multi-modality affects the connections, we performed a user study based on TAM (Technology Acceptance Model). The results support the fact that the quality of the system and the natural interaction are key factors for the r-learning system to be used, and they also reveal very interesting implications related to the human behaviors.

이동 방송 환경에 적합한 사용자 상호작용에 관한 연구 (A Study on the User Interaction for Mobile Broadcast Context)

  • 이봉호;양규태;임형수;허남호
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 2014년도 추계학술대회
    • /
    • pp.167-170
    • /
    • 2014
  • 이동 방송 환경에서 사용자가 특정 프로그램 또는 특정 서비스를 편리하게 수신할 수 있도록 하기 위해서는 고정 환경과 달리 적합한 사용자 상호작용이 고려되어야 한다. 본 논문에서는 디지털 라디오 환경에서 청취자에게 서비스를 편리하고 효과적으로 접근하고 수신할 수 있도록 하는 멀티모달 기반의 사용자 상호작용 기술에 대해서 소개하고자 한다. 이를 위해 디지털 라디오 환경 및 서비스 구조를 분석하고 이를 기반으로 사용자 상호작용이 필요한 사항을 도출하였다. 사용자 상호작용 엔진은 XML 마크업 언어를 기반으로 서비스, 프로그램 및 콘텐츠 수준의 상호작용이 가능하도록 구성하였다.

  • PDF

A Bio-Edutainment System to Virus-Vaccine Discovery based on Collaborative Molecular in Real-Time with VR

  • Park, Sung-Jun
    • 한국컴퓨터정보학회논문지
    • /
    • 제25권6호
    • /
    • pp.109-117
    • /
    • 2020
  • 에듀테인먼트 시스템은 학습자가 문제를 효과적으로 인식하고, 문제를 해결하는 데 필요한 중요한 정보를 파악 분류하고, 배운 내용을 전달할 수 있도록 돕는 것을 목표로 한다. 에듀테인먼트를 활용한 콘텐츠는 과학 및 산업 분야의 교육 및 훈련에 유용하게 적용될 수 있다. 본 논문에서는 직관적인 멀티 모달 인터페이스를 활용하여 신약개발에서 활용되고 있는 가상스크리닝에 적용될 수 있는 에듀테인먼트 시스템을 제안한다. 본 연구에서는 분자 구조의 3D 모델을 효과적으로 조작하기 위해 입체 모니터를 활용하여 3차원(3D)거대 분자 모델링을 시각화 하였으며, 멀티 모달 인터페이스를 활용하여 분자 모델을 조작하고 있다. 본 시스템은 신약 개발 혹은 백신 개발에 있어 매우 중요한 방법 중의 하나인 가상 약물 선별 방법 중 하나 인 도킹 시뮬레이션 실험을 게임적 요소를 활용하여 쉽게 해결하는 방법을 제안하고 있다. 레벨 업 개념은 게임 요소가 객체와 사용자의 수에 의해 의존되는 바이오 게임 접근법을 활용하여 구현하였다. 실험 방법으로는 제안된 시스템의 신약 개발 과정에서 인간 면역 결핍 바이러스 (HIV)의 새로운 후보물질을 활용하여 바이러스의 활동 억제를 스크리닝하는 도킹 과정에서의 시간 측정으로 성능 비교 평가하였다.

스마트 투어 가이드를 위한 서비스 플랫폼과 모바일 앱 (Service Platform and Mobile Application for Smart Tour Guide)

  • 좌정우
    • 한국인터넷방송통신학회논문지
    • /
    • 제16권6호
    • /
    • pp.203-209
    • /
    • 2016
  • 디지털 관광은 여행 전, 동안, 이후에 관광객의 활동을 디지털로 지원한다[1]. GPS를 지원하는 스마트폰은 주요 관광지에서 투어 가이드와 스토리텔링 서비스와 같은 위치 기반 모바일 어플리케이션을 제공한다. 본 논문에서 지리정보시스템을 기반으로 스마트 관광 서비스 플랫폼을 제안하고 제주도의 주요 관광명소에서 스마트 투어 가이드 서비스를 제공하기 위한 모바일 어플리케이션을 개발한다. 제안하는 스마트 관광 서비스 플랫폼은 관광지도와 지리정보시스템, 콘텐츠 관리 시스템, 멀티모달 내비 시스템, 관광지 콘텐츠 제작 및 관리시스템, 여행상품 제작 및 관리시스템, 스마트 검색 시스템과 사용자 단말기로 구성된다. 스마트 투어 모바일 어플리케이션은 제안하는 스마트 관광 플랫폼을 이용하여 제주 유명 관광명소에서 여행 전, 동안, 이후의 디지털 관광을 지원한다.

지하공동구 디지털 트윈 체계 및 요구기능 설계에 관한 연구 (A Study on the Design of Digital Twin System and Required Function for Underground Lifelines)

  • 정민우;이희석;신동빈
    • 한국콘텐츠학회논문지
    • /
    • 제21권7호
    • /
    • pp.248-258
    • /
    • 2021
  • 지하공동구의 도시 생명선 기능유지를 위해서는 24시간 모니터링을 수행해야 하며 부족한 인력을 대체하기 위한 기술개발이 필요하다. 일반적인 관리방법으로는 지하 공간 특성을 반영하기 어려워 본 연구에서는 지하공동구를 대상으로 공간정보 기반의 디지털 트윈 시스템 요구사항을 도출하였다. 물리적 공간과 가상공간으로 구분하였으며, 물리적 공간은 멀티모달 영상센서 체계 구축의 기반이 되는 센서의 종류와 배치도를, 가상공간은 지하공동구에 대한 시스템 아키텍처를 구성하였다. 그리고 업무에 따른 시스템 기능을 제시하였다. 지하공동구 디지털 트윈을 통해 재난을 예방하고, 조기에 대응하여 도시 생명선의 기능유지에 효과적일 것으로 예상한다.

뇌활동 증진을 위한 손가락 운동용 기능성 게임 장치 및 콘텐츠 개발 (Development of a functional game device and Contents for improving of brain activity through finger exercise)

  • 안은영
    • 한국멀티미디어학회논문지
    • /
    • 제15권11호
    • /
    • pp.1384-1390
    • /
    • 2012
  • 신체의 감각기관 중에서도 손가락의 운동과 감각 부분이 뇌에 가장 큰 영향을 미친다는 것은 널리 알려진 사실이다. 본 연구는 이러한 사실에 주목하여 교육, 훈련, 건강증진 등의 목적으로 다양하게 활용이 가능한 기능성 게임 장치를 개발하되, 주로 두뇌향상을 위한 다섯 손가락의 균형적 사용에 초점을 맞춘 게임 콘텐츠를 위한 장치 개발하고자 한다. 제안하고 있는 게임 장치는 본체 부분만을 독립적으로 사용하는 '오프라인' 방식과 스마트폰 등의 단말기와 연동하여 사용하는 '온라인' 방식의 2가지 방식으로 게임을 즐길 수 있다. '온라인' 방식으로 동작할 때는 블루투스를 통해서 연동되는 단말기에서 시각 정보를 표시하여 게임을 진행하는 것이 가능하고 '오프라인' 방식에서는 주로 청각과 촉각 등을 이용하여 두뇌 훈련을 하거나 정서를 함양하도록 고안되었다. 본 게임장치의 성능과 활용 가능성을 살펴보기 위해서, 연령에 관계없이 모두가 즐길 수 있는 온라인 모드의 슈팅게임과 촉각이나 청각에 의존하는 고령자 친화형 게임콘텐츠인 낚시게임을 개발하였다. 낚시 게임은 온라인 모드로 게임을 진행하는 것도 가능하지만 오프라인 모드에서는 청각과 순발력을 이용하여 다섯 손가락을 균형 있게 사용하게 함으로써 뇌활동이 저하되는 고령자가 게임을 통해 치매, 기억력 저하 등의 인지기능 장애를 예방하는데 도움을 줄 수 있다.

텍스트 마이닝을 활용한 공공기관 서비스 로봇에 대한 사용자 리뷰 분석 : 안내로봇 사례를 중심으로 (Text Mining Analysis of Customer Reviews on Public Service Robots: With a focus on the Guide Robot Cases)

  • 신효림;최준호;오창훈
    • 문화기술의 융합
    • /
    • 제9권1호
    • /
    • pp.787-797
    • /
    • 2023
  • 공공기관에서 서비스 로봇, 특히 안내로봇의 사용이 보편화 되며 다양한 곳에서 사람들을 만나고 있다. 그러나 4년이 넘는 시간 동안 사용자가 안내로봇을 만나왔지만, 아직까지 사용자와 안내로봇의 상호작용에 대한 탐구가 부족한 실정이다. 이에 이 연구는 안내로봇에 대한 사용자 경험을 탐구하고자, 가장 오랜 기간 동안 사용자를 만난 안내로봇인 '큐아이'를 연구 대상으로 선정하여 서비스를 시작한 시점부터 작성된 모든 리뷰를 수집하였다, TF-IDF로 주요 키워드를 확인하고 토픽 모델링을 통해 사용자 경험 요인을 도출하였으며 감성 분석을 통해 사용자 경험 저해 요인을 살펴보았다. 분석 결과, 안내로봇의 기능, 외형, 상호작용 방식, 그리고 안내로봇의 문화해설사 역할과 도우미 역할이 핵심 사용자 경험 요인으로 나타났다. 부정적 리뷰를 통해 확인한 저해 요인은 이를 개선할 수 있도록 인터랙션 설계와 멀티모달 인터페이스를 활용한 서비스 디자인, 문화해설사로서의 콘텐츠 개발 등 향후 방향성을 제안하였다. 이 연구는 안내로봇의 사용자 경험을 분석하고 개선방안을 제시한 것에 의의가 있다.

가상의 3D와 실제 로봇이 동기화하는 시스템 및 플랫폼 (Game Platform and System that Synchronize Actual Humanoid Robot with Virtual 3D Character Robot)

  • 박창현;이창조
    • 한국엔터테인먼트산업학회논문지
    • /
    • 제8권2호
    • /
    • pp.283-297
    • /
    • 2014
  • 미래 인간의 삶은 사회, 경제, 정치와 개인 등 삶의 전 영역에 걸쳐 다학제적 기술의 파급효과 증대에 의해 혁신될 것이다. 특히 로봇 분야와 로봇을 이용한 차세대 게임 분야에서는 다학제적 기여와 상호작용에 의해 더욱 더 기술간 융합화가 가속화 될 것으로 전망된다. 본 연구는 지금까지의 "인간-로봇 인터페이스 기술"의 기술적인 한계 및 시공간적 제약을 뛰어넘는 새로운 인터페이스 모델로, 기존 인간-로봇 인터페이스 기술에서 가질 수 없는 다양한 모달리티(modality)들의 융합을 통해 보다 신뢰성 있으며 편하고 자유로운 "인간-로봇 인터페이스 기술"의 연구이다. 이족보행의 휴먼로봇과 모바일 기기 화면의 3D 콘텐츠(contents) 로봇(가상로봇)의 동작과 위치 값을 실시간적으로 연동하는 동기화(Synchronization) 엔진을 개발하고, 상호간의 정보를 주고받기 위한 무선 프로토콜(Protocol) 및 효율적인 티칭(Teaching)을 위한 학습에 의한, 다이렉트 티칭앤플레이(Direct Teaching & Play)의 티칭 프로그램 개발과, 이를 이용한 로봇 게임 시스템을 연구한다.