• KIPS Transactions on Software and Data Engineering
• /
• v.11 no.2
• /
• pp.101-106
• /
• 2022

Recently, virtual human has been widely used in various fields such as education, training, information guide. In addition, it is expected to be applied to services that interact with remote users in metaverse. In this paper, we propose a novel method to make a virtual human' interaction to perceive the user's surroundings. We use the editing authoring tool to apply user's interaction for providing the virtual human's response. The virtual human can recognize users' situations based on fuzzy, present optimal response to users. With our interaction method by context awareness to address our paper, the virtual human can provide interaction suitable for the surrounding environment based on automatic adaptation.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2021.05a
• /
• pp.564-566
• /
• 2021

최근 가상 휴먼은 국방, 의료, 교육, 엔터테인먼트 등 다양한 분야에서 널리 활용되고 있다. 가상 휴먼을 이용한 상호작용은 사용자가 현실 세계의 실제 친구와 대화하는 것처럼 자연스럽게 소통하는 방식으로 운용이 되고, 이를 위해서는 사용자의 음성, 동작, 감정 등 다양한 입력을 기반으로 반응하는 가상 휴먼 출력 등 상호작용 매핑 관계를 제작하여야 한다. 하지만, 기존 가상 휴먼 상호작용 방법은 미리 정해진 패턴을 수작업인 프로그래밍을 통해 제작하여 개발 기간이 오래 걸리고, 수정이 용이하지 못한 단점이 있다. 본 논문에서는 가상 휴먼 상호작용을 위해 음성, 동작, 감정 등 사용자의 멀티모달 입력과 가상 휴먼 반응에 대한 저작을 수행하는 툴킷을 제시한다. 본 논문에서 제시한 저작도구를 통해 쉽고 빠르게 사용자와 가상 휴먼 상호작용 표현을 생성할 수 있다.

• Broadcasting and Media Magazine
• /
• v.26 no.4
• /
• pp.72-81
• /
• 2021

디지털 기술의 발전에 따라 메타버스가 콘텐츠 시장의 주요 트렌드로 자리하면서 고품질의 3D 모델을 생성하는 기술에 대한 수요가 급증하고 있으며, 최근 메타버스를 필두로 하여 혼합현실 서비스 및 콘텐츠 시장이 활성화되면서 디지털 휴먼으로 대표되는 고품질 3D 가상 인간에 대한 제작과 관련된 다양한 기술적 발전이 급격히 가속화되고 있다. 본 고에서는 정밀한 3D 인체모형을 생성할 수 있는 기술들의 현재 상황과 기술적 사례들을 바탕으로 구성하고자 한다. 1996년 최초의 가상 인간의 등장 이후 가상 인간을 통한 다양한 시도가 이루어져 왔으나 기술적 한계로 그 영향력을 발휘하지 못하였다. 그러나 최근 기술의 발전을 통해 가상 인간은 디지털 휴먼으로 다시 등장하게 되었다. 디지털 휴먼은 실제와 구분하기 어려울 정도로 인간의 모습과 행동이 유사한 3D 가상 인간이다. 최근 기술의 발전은 이러한 가상 인간의 제작을 용이하게 만들었고, 이들을 다양한 분야에서 활용할 수 있게 하고 있다. 그러나 다양한 활용 분야와 수요에도 불구하고 현실적인 제작 과정상의 한계로 인하여 아직까지는 디지털 휴먼의 개발과 사용의 범위가 제한되고 있다. 이에 따라 본 고에서는 디지털 휴먼에 대한 선행연구의 분석을 통해 디지털 휴먼을 다시 한번 정의하였고, 제작 기법에 대한 연구를 바탕으로 현재의 기술적 한계를 극복하고 혼합현실 환경에 적용할 수 있는 발전된 형태의 디지털 휴먼의 제작을 위한 가능성을 살펴보고자 한다.

• Journal of the Institute of Convergence Signal Processing
• /
• v.25 no.2
• /
• pp.113-118
• /
• 2024

Recently, advancements in artificial intelligence and computer graphics technology have led to the emergence of various virtual humans across multiple media such as movies, advertisements, broadcasts, games, and social networking services (SNS). In particular, in the advertising marketing sector centered around virtual influencers, virtual humans have already proven to be an important promotional tool for businesses in terms of time and cost efficiency. In Korea, the virtual influencer market is in its nascent stage, and both large corporations and startups are preparing to launch new services related to virtual influencers without clear boundaries. However, due to the lack of public disclosure of the development process, they face the situation of having to incur significant expenses. To address these requirements and challenges faced by businesses, this paper implements a photogrammetry-based facial capture system for creating realistic virtual humans and explores the use of these models and their application cases. The paper also examines an optimal workflow in terms of cost and quality through MetaHuman modeling based on Unreal Engine, which simplifies the complex CG work steps from facial capture to the actual animation process. Additionally, the paper introduces cases where virtual humans have been utilized in SNS marketing, such as on Instagram, and demonstrates the performance of the proposed workflow by comparing it with traditional CG work through an Unreal Engine-based workflow.

• The Optical Journal
• /
• s.163
• /
• pp.34-39
• /
• 2016

가상현실 및 증강현실 기술이 미래 지식서비스 산업으로 각광 받으면서 가상/증강현실 시대를 대비하는 IT 기업들이 증가하고 있다. 본 글에서는 증강현실 분야의 현황, 증강현실의 기본 개념 및 정의, 미래발전 방향으로서의 증강휴먼, 증강휴먼 핵심기술 및 응용을 살펴보고 이를 통해 미래 전망을 도출하고자 한다.

• The Journal of the Korea Contents Association
• /
• v.22 no.7
• /
• pp.524-539
• /
• 2022

With the advent of generative artificial intelligence technology, it became possible to create a virtual human, and produce a lecture video only with textual information. It is expected that the virtual human will enhance the efficient production of educational contents and the student's entertainment experience and satisfaction. However, there have been still few studies that have demonstrated the process of how virtual human technology reaches students' satisfaction. Therefore, the purpose of this study is to empirically examine whether the human likeness, which is the main characteristic of a virtual human based on Uncanny Valley theory, affects human experience and satisfaction. In particular, human likeness of the Uncanny Valley theory was subdivided into human likeness in the visual and verbal dimensions, and the process of reaching satisfaction was understood based on the experience economy model. In particular, human similarity in Uncanny Valley theory was classified as similarity in the visual and language levels, and the process of reaching satisfaction based on the experiential economic model was analyzed with a partial least squares structure model equation (PLS-SEM). The survey was conducted online for a panel of office workers at a specialized research institution in China. The results indicate that both the visual and verbal human likeness had a positive effect on experience economy factors (education, entertainment, esthetic, escape), and then these experiential factors had a significant effect on satisfaction. The results also provide some suggestions to consider when designing educational contents by virtual human.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2017.04a
• /
• pp.1062-1063
• /
• 2017

엔지니어링 분석을 위한 가상현실 응용 분야에서는 대규모 또는 복잡한 공학적 데이터를 효율적으로 분석하고 의미 있는 정보를 추출하기 위해 대형 스크린 등의 몰입형 가시화 인터페이스가 주로 사용된다. 이와 더불어 가시화 결과에 대한 사용자의 분석 조작을 구현할 수 있는 휴먼 인터페이스 기술이 필요한데, 기존의 휴먼 인터페이스 기술은 조이스틱과 같은 단독 활용형 디바이스를 통해 주로 운영자 위주의 단방향 검토가 가능하지만, 최근 착용형 및 비착용형 모션인식 기술의 발전으로 인해 가상현실 참여자간의 양방향 상호작용 인터페이스 개발이 가능할 거승로 기대된다. 본 연구에서는 신체의 자연스러운 움직임으로 가상현실을 조작할 수 있는 휴먼 이터페이스 기술에 대한 분석과 기초 연구를 소개한다.

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2022.05a
• /
• pp.571-572
• /
• 2022

Recently, VR/AR(virtual reality/augmented reality) contents have actively increased, and various services related to VR/AR allow users to experience remote places. Also, Metaverse technologies based on VR/AR generally used to provide content in virtual spaces. In this paper, we present a technique for synthesizing virtual humans after capturing a 360-degree panorama of a remote environment, and analyze the remote environment to identify the location where it can be captured without error, and apply a method of synthesizing virtual humans. According to this paper, it is possible to provide various captured spaces such as industrial plants, medical facilities, and schools as remote communication media.

• Broadcasting and Media Magazine
• /
• v.26 no.3
• /
• pp.59-70
• /
• 2021

미래의 메타버스 환경에서 3차원 가상 휴먼 표현은 매우 중요한 기술이며 영상 또는 비디오로부터 3차원 가상 휴먼 모델링이 핵심 기술이다. 본 기고문은 이 분야에 대한 충분한 사전 지식의 제공을 목표로 한다. 휴먼 복원 문제를 다루는 연구가 늘어남에 따라, 본 기고문에서 우리는 단일 영상 혹은 비디오로부터의 3차원 휴먼 복원 연구들에 대해 조사하고 그 결과를 다음과 같이 체계적으로 제시한다. 첫째, 3차원 휴먼 복원에 대한 배경 개념을 정의한다. 둘째, 제안된 분류법, 기여도, 정량적 결과에 따라 기존의 방법들을 상세하게 분석한다. 셋째, 관련 데이터셋 및 정성적 결과를 요약하여 연구자들이 이를 쉽게 활용할 수 있도록 한다. 마지막으로, 우리는 각 연구들을 분석하여 해당 방법들의 장점과 약점을 제시한다.

• The Journal of Korea Institute of Information, Electronics, and Communication Technology
• /
• v.15 no.4
• /
• pp.271-282
• /
• 2022

In this paper, we propose a digital human content creation system. The digital human content creation system works with 3D AI modeling through whole-body scanning, and is produced with 3D modeling post-processing, texturing, rigging. By combining this with virtual reality(VR) content information, natural motion of the virtual model can be achieved in virtual reality, and digital human content can be efficiently created in one system. Therefore, there is an effect of enabling the creation of virtual reality-based digital human content that minimizes resources. In addition, it is intended to provide an automated pre-processing process that does not require a pre-processing process for 3D modeling and texturing by humans, and to provide a technology for efficiently managing various digital human contents. In particular, since the pre-processing process such as 3D modeling and texturing to construct a virtual model are automatically performed by artificial intelligence, so it has the advantage that rapid and efficient virtual model configuration can be achieved. In addition, it has the advantage of being able to easily organize and manage digital human contents through signature motion.