• Journal of Broadcast Engineering
• /
• v.27 no.5
• /
• pp.638-653
• /
• 2022

In this paper, we propose the new method of creating 3D virtual-human reflecting the pattern of clothes worn by the person in the high-resolution whole body front image and the body shape data about the person. To get the pattern of clothes, we proceed Instance Segmentation and clothes parsing using Cascade Mask R-CNN. After, we use Pix2Pix to blur the boundaries and estimate the background color and can get UV-Map of 3D clothes mesh proceeding UV-Map base warping. Also, we get the body shape data using SMPL-X and deform the original clothes and body mesh. With UV-Map of clothes and deformed clothes and body mesh, user finally can see the animation of 3D virtual-human reflecting user's appearance by rendering with the state-of-the game engine, i.e. Unreal Engine.

• The Journal of the Convergence on Culture Technology
• /
• v.8 no.4
• /
• pp.469-476
• /
• 2022

As the 3D modeling technology and conversational algorithm is developed, digital humans are being used in various fields, and also virtual bankers have begun to appear in banks, including major banks such as Shin-Han Bank and Nong-Hyup Bank. However, most of the research of digital human mainly focus on its appearance, and research on robot persona that should be considered in anthropomorphizing a robot is insufficient. In this study, an experiment was conducted to find out the user experience of three scenarios (student ID receipt, deposit and withdrawal account opening, leasehold loan consultation) in which the level of anthropomorphism of the speech strategy and the level of personal information use differed in the specific context of banking. As a result of the study, social presence and usefulness had an interactive effect on the scenario and the level of anthropomorphism. There was no interaction effect on intimacy, trustworthiness, and perceived intelligence, but a tendency could be confirmed.

• Journal of Broadcast Engineering
• /
• v.27 no.5
• /
• pp.751-761
• /
• 2022

With the development of digital graphics technology, the metaverse has become a significant trend in the content market. The demand for technology that generates high-quality 3D (dimension) models is rapidly increasing. Accordingly, various technical attempts are being made to create high-quality 3D virtual humans represented by digital humans. 3D volumetric capture is spotlighted as a technology that can create a 3D manikin faster and more precisely than the existing 3D model creation method. In this study, we try to analyze 3D high-precision facial production technology based on practical cases of the difficulties in content production and technologies applied in volumetric 3D and 4D model creation. Based on the actual model implementation case through 3D volumetric capture, we considered techniques for 3D virtual human face production and producted a new metahuman using a graphics pipeline for an efficient human facial generation.

• Proceedings of the Korean Information Science Society Conference
• /
• 2011.06a
• /
• pp.5-8
• /
• 2011

본 논문은 가상목업의 정비성 시뮬레이션을 위한 통합 아키텍쳐를 제안한다. 통합 아키텍쳐는 3계층 구조로 가상휴먼 에이전트 계층, 가상환경 물리모의 계층, 다중 에이전트 협업제어 계층으로 구성된다. 이를 통해, 제품 설계 단계와 병행하여 제품의 조립, 분해, 설치, 제거 등의 정비 절차를 모의하여 정비성 설계 오류를 도출 할 수 있다. 또한 정비 작업에 소요되는 자원, 인시 수를 분석하고 정비 절차를 가상현실에서 검증함으로써 기술 교범을 생산할 수 있다. 제안한 통합 아키텍쳐는 국방과학연구소의 가상목업 정비성 시뮬레이션 시스템(ViMMS)으로 구현하였다. 본 시뮬레이션 시스템은 항공무기체계의 정비성 분석, 평가, 기술교범의 저작 및 정비 훈련 시뮬레이터로 활용할 수 있다.

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2022.05a
• /
• pp.569-570
• /
• 2022

Failure situations occur frequently in the industry, and the existing 2D-based manual for this purpose is not intuitive to understand and it is difficult to immediately interact with maintenance experts. In this paper, we propose a technology that enables workers to perform maintenance in real time with the help of experts without restrictions in time and place based on augmented reality when a failure situation occurs at a remote location. A local virtual human-based expert diagnoses a failure situation based on an adapted panoramic image of a remote failure situation while wearing an HMD headset, and gives instructions to a remote operator. In addition, in an augmented reality (AR) environment in a remote location, for the interaction between the operator and the expert, the HMD's microphone is used to create the expert's hand as well as verbal communication. You can use to point or draw a picture. If this technology is used, it is possible to overcome the limitations of the existing 2D-based manual, and to provide assistance in performing maintenance smoothly remotely even if an expert does not directly visit a remote location.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2018.05a
• /
• pp.541-542
• /
• 2018

CAE 와 같은 고충실도 대용량 엔지니어링 데이터의 시공간 정밀 분석검증을 위해서는 고해상도 몰입형 가시화 기술과 더불어 이를 직관적이고 효율적으로 제어하기 위한 휴먼 인터페이스 기술이 중요하다. 최근 대중화에 근접한 HMD 기기 및 컨트롤러를 이용한 응용 연구가 발표되고 있고, 이를 통해 엔지니어 위주의 정적 분석환경을 벗어나, 설계/해석/운용 전문가들의 동적 협업분석 환경 제공이 가능한 몰입형 가시화 환경 및 휴먼 인터페이스 기술이 적용되고 있다. 하지만 CAE 해석지원을 위한 대화면 몰입형 가시화 환경에서 사용가능한 직관적 인터페이스기술에 대한 연구는 미진한 상황이다. 본 연구에서는 신체의 자연스러운 움직임으로 가상현실을 탐색하고 데이터 조작을 구현할 수 있는 몰입형 가시화 전용의 휴먼 인터페이스 및 연동기술에 대한 연구과정을 소개한다.

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2022.10a
• /
• pp.499-501
• /
• 2022

With the advent of metaverse due to the development of the latest technology, digital humans have begun to re-populate. Using this, the concept of 'virtual human' is defined, and 'virtual streamers' who used to be active in virtual spaces are working across the real world. This study identifies what has changed from the past through analysis of metaverse, avatar, virtual streamer, and virtual streaming, and presents limitations and directions for current virtual streaming through related implications.

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2002.11a
• /
• pp.378-381
• /
• 2002

In this paper, we proposed an electromyography(EMG) based control method of a virtual robot arm as an adaptive human supporting system or remote control system, which consists of an shoulder control part, elbow control part, and wrist control part. The system uses four surface electrodes to acquire the EMG signal from operator. It is shown from the experiments that the EMG patterns during arm motions can be classified sufficiently by using SOM and LVQ. The interface system based on PC environment is constructed to 3-D graphic user interface(GUI) program. Experimental results show that proposed method obtains approximately 94 percent of success in classification.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2018.06a
• /
• pp.24-27
• /
• 2018

본 논문은 최신 가상현실 미디어 기술동향과 다양한 분야에서 시도해 온 VR 멀미저감 방안을 리뷰하여, 가상현실 사용자의 인지적 수용성을 높이는 방안에 대해 논의하였다. 이를 통해 최신 미디어 기술의 사용자 가치제안 방식을 분석하고 Social VR 플랫폼의 인지적 수용성을 개선하는 효율적 방안을 제안하였다. 생체신호 모니터링, VR 콘텐츠 적합도 분석, 멀미 메커니즘 조절, 신체동요측정 기반 멀미예측 등 다양한 멀미저감 방식 중 개발 비용과 사용자 수용성 측면에서 가장 효율적인 신체동요측정 기반 멀미예측 기술의 사전테스트 결과를 소개하고 적용 방안을 구체화하였다. 가상현실 체험 전 미세한 신체동요가 많은 사용자일수록 VR 멀미 민감도가 크게 증가하는 것을 확인하였다. 개인의 멀미민감도를 반영하는 본 측정 결과를 다양한 가상현실 환경에서 테스트하고 개인특성에 따른 VR 멀미 데이터베이스를 구축한다면 AI 기반의 멀미 예측기술을 구현하는데 크게 기여할 것으로 예상된다.

• Proceedings of the IEEK Conference
• /
• 2001.09a
• /
• pp.173-176
• /
• 2001

하드웨어 성능 및 소프트웨어 기술에 힘입어 컴퓨터 애니메이션 기술은 발전을 거듭하고 있으며, 영화와 게임산업으로부터 군사훈련에 이르기까지 다양한 응용분야에서 이용되고 있다.[1][2] 개발된 3D 애니메이션 엔진은 구조화된 클래스들로 되어있기 때문에 클래스의 가감이 용이하다. 또한 모션 데이터 로더와 캐릭터 로더가 포함되어 있고, 스킬(skill)간의 전이와 섞음이 가능하다. 그러므로 애니메이션 엔진을 이용하여 캡쳐된 모션데이터를 게임에 적용하기 쉬울 뿐만 아니라 다양한 가상환경에서 이용되리라 기대된다.