• 제목/요약/키워드: Dialogue Engine

검색결과 8건 처리시간 0.019초

감정에 기반한 가상인간의 대화 및 표정 실시간 생성 시스템 구현 (Emotion-based Real-time Facial Expression Matching Dialogue System for Virtual Human)

  • 김기락;연희연;은태영;정문열
    • 한국컴퓨터그래픽스학회논문지
    • /
    • 제28권3호
    • /
    • pp.23-29
    • /
    • 2022
  • 가상인간은 가상공간(가상 현실, 혼합 현실, 메타버스 등)에서 Unity와 같은 3D Engine 전용 모델링 도구로 구현된다. 실제 사람과 유사한 외모, 목소리, 표정이나 행동 등을 구현하기 위해 다양한 가상인간 모델링 도구가 도입되었고, 어느 정도 수준까지 인간과 의사소통이 가능한 가상인간을 구현할 수 있게 되었다. 하지만, 지금까지의 가상인간 의사소통 방식은 대부분 텍스트 혹은 스피치만을 사용하는 단일모달에 머물러 있다. 최근 AI 기술이 발전함에 따라 가상인간의 의사소통 방식은 과거 기계 중심의 텍스트 기반 시스템에서 인간 중심의 자연스러운 멀티모달 의사소통 방식으로 변화할 수 있게 되었다. 본 논문에서는 다양한 대화 데이터셋으로 미세조정한 인공신경망을 사용해 사용자와 자연스럽게 대화 할 수 있는 가상인간을 구현하고, 해당 가상인간이 생성하는 문장의 감정값을 분석하여 이에 맞는 표정을 발화 중에 나타내는 시스템을 구현하여 사용자와 가상인간 간의 실시간 멀티모달 대화가 가능하게 하였다.

사물인터넷 기반 소셜로봇 시스템의 분석 및 설계 (Analysis and Design of Social-Robot System based on IoT)

  • 조병호
    • 한국인터넷방송통신학회논문지
    • /
    • 제19권1호
    • /
    • pp.179-185
    • /
    • 2019
  • 소셜로봇의 핵심기술은 음성인식 및 대화엔진인데 이를 개발하는데 많은 비용이 들고 음성인식률 및 대화엔진의 성능의 부족으로 인한 로봇과의 대화기능 구현이 어려웠다. IoT 기반의 클라우드 인공지능 기술의 발전과 여러 기업이 이들 오픈 API 제공으로 로봇과 인간과의 대화 기능 구현이 가능하게 됐다. 본 논문에서는 기존의 지능형 소셜로봇 기술동향을 조사하고 효율적인 IoT 기반 소셜로봇 시스템 구조를 설계한다. 또한 객체지향방법을 이용한 사용자 요구사항 분석, 플로우 차트 및 화면 설계를 보여줌으로 효과적인 소셜로봇 소프트웨어 분석 및 설계 방법을 제시하고자 한다.

모델링 툴과 게임엔진을 이용한 캐릭터 구현 및 스토리텔링 (Character Generation and Storytelling using Modeling Tool and Game Engine)

  • 이솔아;전수인;박미혜;박수이;최종인
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2021년도 춘계학술대회
    • /
    • pp.620-622
    • /
    • 2021
  • 게임 산업이 부상하며 게임의 세계관과 스토리텔링의 중요도 또한 커지고 있다. 게임의 특정 세계관을 전달하는 것은 게임의 몰입도에 막대한 영향을 미침으로 스토리를 전달하는 방식은 계속 연구될 필요가 있다. 본 연구에서는 모델링 툴을 이용하여 캐릭터를 구현하고 게임엔진을 사용하여 게임의 초반 스토리를 대화창을 통해 전달하였다. 연구를 통해 스토리를 전달하기 위한 워크플로우를 세우고, 그 과정을 심도 있게 이해할 수 있었으며, 이는 차후에 보다 더 정교한 게임 캐릭터 개발과 원활한 스토리텔링을 위한 기반이 될 것이라고 기대한다.

  • PDF

고등학교(高等學校) 해사영어(海事英語) 교과영역(敎科領域)과 평가방법(評價方法)의 개선(改善) - 4·5급(級) 해기사(海技士) 면허시험(免許試驗)과 관련하여 - (Improvement in the Syllabus of Maritime English for High School and the Method of Examination for Certification -Relating to the 4th and 5th Class Marine Officer License Examination-)

  • 최종화;김영식;고대권
    • 수산해양교육연구
    • /
    • 제2권1호
    • /
    • pp.29-35
    • /
    • 1989
  • It is indispensable for the marine officers who are engaged in the international voyage to make command of maritime English fluently. The Marine Officers Act in Korea which is under ammending in 1989 prescribes the proportion of maritime Englishin English examination is made to be 60% for the 4th and 5th class marine officer-license examination. A concrete syllabus or content of maritime English is not established yet with the exception of a general prescription of minimun knowledge required for certification of marine officers in the IMO/STCW Convention. The authors, who rewrote the maritime English textbook for the course of the fisheries high, schools and the merchant marine high schools, settled the syllabi of nautical English and marine engineering English for the course as follows : 1. The syllabus of nautical English, includes maritime English readings, the IMO English dialogue on port entry, writing of logbooks, night order books, and docking and repair specifications. 2. The syllabus of marine engineering English includes maritime English readings, dialogue on oil supply, writing of engine logbooks and oil record books, standing orders, and docking and repair specifications. The authors propose that the realm of these class marine officer-license examination on maritime English should be limited within in the above mentioned textbook. As maritime English is made to be included in the 4th and 5th marine officer liscence examination since 1989, high schools concerned need to reform the curricula to complete at least 6 units for this subject. On the other hand, the competent authority of this examination must secure questions as much as possible to promote the reliability of them.

  • PDF

PROLOG기반의 규칙 기반 전문가 시스템을 이용한 서울시 도시 공원 추천 시스템 구현 (Implementation of Recommender System of Seoul Urban Parks Using Rule-based Expert System based on PROLOG)

  • 손세진;김다희;조예본;전수완;이강희
    • 예술인문사회 융합 멀티미디어 논문지
    • /
    • 제7권7호
    • /
    • pp.847-856
    • /
    • 2017
  • 본 논문은 사용자들에게 알맞은 공원을 추천해주는 시스템을 제안한다. 사회적, 심리적, 환경적, 신체적 등 사람들에게 긍정적인 요소를 제공하는 도시공원의 기능에 따라 서울시 도시공원을 6가지로 분류한다. 분류된 공원을 규칙기반 전문가 시스템을 기반으로 사용자들에게 추천한다. 공원 선택에 영향을 주는 요인들을 언어 객체로 설정하여 규칙 기반 추론 시스템을 논리 프로그램 언어인 PROLOG로 구현한다. 공원 추천의 규칙 기반 객체는 활동·다목적성과 접근성, 이용 시간을 기준으로 총 9가지 언어 객체를 설계하고 그에 따른 허용된 값을 부여한다. 이를 이용하여 생성된 규칙들이 사용자의 선호도에 따라 점화되고 추천 공원을 추론한다. 선호도에 대한 정보는 사용자들에게 직접 공원 선택에 있어서 기준이 되는 세 가지 요소에 대한 질문을 건네는 대화의 방식으로 얻는다. 결과적으로 공원 추천 시스템을 통해 공원 이용자들의 공원 이용 및 여가 생활에 대한 만족감을 높여주고자 한다.

초소형 버추얼 프로덕션 환경에서 디지털 휴먼을 이용한 촬영 사례 (Case Study : Cinematography using Digital Human in Tiny Virtual Production)

  • 임재호;장민정;전상욱;이수빈;박민수;김유진
    • 한국컴퓨터그래픽스학회논문지
    • /
    • 제29권3호
    • /
    • pp.21-31
    • /
    • 2023
  • 본 논문에서는 디지털 휴먼을 활용한 버추얼 프로덕션에서의 촬영 사례를 소개한다. 본 촬영 사례는 LED를 활용한 버추얼 프로덕션의 시스템 구성과 디지털 휴먼을 활용한 효율적인 촬영 파이프라인을 다루고 있다. LED를 이용한 버추얼 프로덕션은 주로 LED에 배경을 투사하여 촬영하는 것과 달리 본 사례는 디지털 휴먼을 가상 배우로 사용하여 실제 배우와 소통하는 장면을 촬영하였다. 또한, 실제 배우와 디지털 휴먼의 대화 장면을 실시간 엔진을 이용하여 촬영하기 위해 음성과 텍스트 기반 한국어 립싱크 모션 자동 생성 기술을 적용하여 디지털 휴먼의 발화 애니메이션을 사전에 제작해 사용하였다. 우리는 실시간 엔진을 활용하여 LED 기반의 버추얼 프로덕션 환경에서 실제 배우와 디지털 휴먼을 이용한 짧은 드라마 콘텐츠를 제작함으로써 본 촬영 사례에 대하여 검증하였다.

Energy-Efficient DNN Processor on Embedded Systems for Spontaneous Human-Robot Interaction

  • Kim, Changhyeon;Yoo, Hoi-Jun
    • Journal of Semiconductor Engineering
    • /
    • 제2권2호
    • /
    • pp.130-135
    • /
    • 2021
  • Recently, deep neural networks (DNNs) are actively used for action control so that an autonomous system, such as the robot, can perform human-like behaviors and operations. Unlike recognition tasks, the real-time operation is essential in action control, and it is too slow to use remote learning on a server communicating through a network. New learning techniques, such as reinforcement learning (RL), are needed to determine and select the correct robot behavior locally. In this paper, we propose an energy-efficient DNN processor with a LUT-based processing engine and near-zero skipper. A CNN-based facial emotion recognition and an RNN-based emotional dialogue generation model is integrated for natural HRI system and tested with the proposed processor. It supports 1b to 16b variable weight bit precision with and 57.6% and 28.5% lower energy consumption than conventional MAC arithmetic units for 1b and 16b weight precision. Also, the near-zero skipper reduces 36% of MAC operation and consumes 28% lower energy consumption for facial emotion recognition tasks. Implemented in 65nm CMOS process, the proposed processor occupies 1784×1784 um2 areas and dissipates 0.28 mW and 34.4 mW at 1fps and 30fps facial emotion recognition tasks.

VoiceXML을 이용한 VUI 지원 웹브라우저 개발 (Development of a Voice User Interface for Web Browser using VoiceXML)

  • 예상후;장민석
    • 한국정보과학회논문지:컴퓨팅의 실제 및 레터
    • /
    • 제11권2호
    • /
    • pp.101-111
    • /
    • 2005
  • 현재의 웹정보들은 주로 HTML로 기술되어 있으며, 이러한 정보를 얻기 위해 사용자들은 마우스와 키보드와 같은 입력장치를 사용한다. 이와 같이 기존의 GUI 환경은 인간의 가장 자연스러운 정보획득 수단의 하나인 음성을 지원하지 못하고 있다. 이러한 문제를 해결하기 위해 음성 인터페이스를 가진 여러 제품들이 개발되고 있다. 하지만 이들은 상호대화성이나 기존 웹환경을 수용한다는 측면에서 부족한 면을 가지고 있다. 본 논문에서는 현재 무르익어 가는 음성인식 기술과 XML의 파생언어인 VoiceXML을 이용하여, 기존의 인터페이스 환경을 XML 기반의 대화형 음성인터페이스 환경으로 대체하고자 한다. 이를 통해 기존의 인터페이스 환경을 수용한 VUI(Voice User Interface) 환경을 사용자에게 제공할 수 있다. 기존의 환경을 수용하기 위해 "XML Island" 기술을 이용하여 VoiceXML 문서를 HTML 문서에 포함시키며, 대표적인 정보획득화면인 메뉴, 게시판, 검색 엔진에 대한 대화형 음성 시나리오를 제안하고 있다.