• Proceedings of the Korea Information Processing Society Conference
• /
• 2021.11a
• /
• pp.1005-1008
• /
• 2021

메타버스의 산업적/학술적 가치가 증대되면서, 실세계 인간과 메타버스 내 디지털 휴먼과의 상호작용 시스템 또한 큰 조명을 받고 있다. 본 논문에서는 인간과 디지털 휴먼이 상호작용할 때, 인간의 발화에 대해 감성적 지지가 가능한 디지털 휴먼 프로토타입을 소개한다. 대화의 의미에 따른 동작 생성이 가능한 아바타 구축 공개 프레임워크를 도입하고, 사전학습모델을 바탕으로 감성적 지지가 가능한 심층 대화 생성 모델 기반 대화 시스템을 여기에 통합하여 인간의 감성 상태에 따른 동작과 대화를 진행하는 감성 지지형 디지털 휴먼 프로토타입을 구현하였다. 이러한 프로토타입을 고도화 하면, 향후 메타버스 기반 정신 건강 케어 및 디지털 치료제로의 확장이 가능할 것으로 사료된다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2020.07a
• /
• pp.456-458
• /
• 2020

한국수화언어(한국수어)는 농인들이 사용하는 언어이며, 농인이라 함은 청각장애를 가진 사람으로서 한국수어를 일상어로 사용하는 사람을 말한다. 수어를 하나의 언어로써 다른 언어로의 번역 또는 상호번역을 위하여 기계학습 기반의 기술이 연구개발 되고 있으나, 수어는 영상 기반의 언어이고 한국수어의 문법 및 사전체계의 구축이 진행 중인 이유로 한국수어의 번역기술은 상대적으로 다른 이종언어 간의 번역기술에 비하여 발전속도가 느리다. 본 논문에서는 한국어를 한국수어로 번역하여 표현하기 위하여 필요한 수어 스크립트 포맷 및 데이터 인터페이스 규격을 제안한다.

• Proceedings of the Korean Institute of Information and Commucation Sciences Conference
• /
• 2022.10a
• /
• pp.484-486
• /
• 2022

This study compares these two platforms with Gedertown and Zepeto, which have the largest number of users among metaverse that have grown rapidly due to various factors such as COVID-19 pandemic. It focuses on the differences between avatars, usage fees, class rooms, and communication methods. Accordingly, the difference between 2D and 3D of the metaverse platform and the difference in camera use can be seen.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2022.11a
• /
• pp.866-868
• /
• 2022

비대면 문화가 확대됨에 따라 다양한 산업의 서비스가 메타버스와 접목되어 사람들에게 제공되고 있다. 사회적 고립 등의 문제로 상담에 대한 필요성이 높아지고 있음에 주목하여 Unity를 사용해 비대면 상담이 가능한 메타버스 플랫폼을 개발하였다. 본 논문에서는 자연스러운 아바타의 움직임, 카메라의 이동, Firebase와의 데이터 전달과 Photon 동기화 기능들을 가지는 3D 월드맵의 구현에 필요한 기술들을 포함하였다. 기존에 대면으로 진행되는 상담 서비스를 대체하여 심리 상담에 대한 진입 장벽을 낮추고 접근성을 높이고자 하며, 해당 플랫폼은 여러 비즈니스들과 결합할 수 있음에도 그 의의가 있다고 본다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2023.01a
• /
• pp.57-58
• /
• 2023

본 연구는 메타버스 플랫폼에서 사용자 커뮤니티 형성에 몰입과 재미를 추구하는 방법으로 로제 카유아의 놀이이론을 바탕으로 지속적인 사용자 유입과 서로간의 상호관계 형성의 유의한 특성을 살펴보았다. 가상공간 사회에서 아바타를 통한 역할놀이로 자신의 다양한 모습을 표현할 수 있고 서로 자유로운 경쟁, 때로는 게임과 같은 규칙이 설정된 곳에서 경쟁하며 스릴을 즐길 수 있다. 또한 현실과 비슷한 운에 기대어 확률 뽑기를 하면서 충분히 놀이를 만끽하고 있다. 본 논문에서는 로제 카유아의 놀이이론과 메타버스에서 공동체가 형성되는 과정에 재미를 유도하는 놀이적 특성을 비교하여 새로운 콘텐츠를 찾는 연구방향을 제시하는 것을 목표로 한다.

• Proceedings of the Korean Society of Computer Information Conference
• /
• 2023.07a
• /
• pp.225-226
• /
• 2023

취업 시장의 급변에 따라 교육 기관에서는 다양한 상황에 대응할 수 있는 시스템이 필요하다는 인식이 대두되고 있다. 특히, 취업 준비생들은 낯선 면접장에 빠르게 적응하여 면접에서 최상의 결과를 얻어내야 하는 요구사항이 있다. 본 논문에서는 요구사항을 충족시키기 위하여 메타버스 환경에서의 가상 인터뷰 시스템의 가상 면접장 프로토 타입을 소개한다. Unity를 기반으로 개발된 이 가상 면접장은 실제 면접과 유사한 환경을 제공하여 면접관 아바타를 통해 진행되는 면접의 현실감을 높일 수 있다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2023.11a
• /
• pp.733-734
• /
• 2023

버츄얼 유튜버로서 자신의 동작을 3D 가상 캐릭터로 나타내고, SNS 에서 춤을 공유하는 경우가 많아졌다. 본 논문에서는 2D 영상에서 MediaPipe BlazePose 모델로 추정된 사람 포즈를 3D 인체 모델인 SMPL 에 피팅하여 사용자 정의 3D 모델을 생성하는 방법을 제안한다. 이를 통해 자신의 춤 영상으로 3D 모델을 생성하여 공유하거나, 기존의 춤 동영상으로 3D 모델을 생성하여 댄스 게임에 사용할 수 있다. 이처럼 본 기술은 예술 및 엔터테인먼트 분야에서 다양하게 활용될 수 있다.

• Journal of the Semiconductor & Display Technology
• /
• v.22 no.4
• /
• pp.172-178
• /
• 2023

With the expansion of metaverse content and hardware platforms, various interactions in the virtual world have been built, raising expectations for an increase in immersion which is a major element of the metaverse. However, among hardware platforms that increase virtual immersion elements, the typical HMD platform can be a barrier to new user inflows due to its high cost. Thus, this paper focused on improving virtual-to-real interactions by extracting motion data using relatively inexpensive webcam equipment in PC environments, utilizing Unity game engines, Photon unity network, multi-platform implementations, and Barracuda neural network inference libraries.

• Journal of Broadcast Engineering
• /
• v.19 no.5
• /
• pp.569-577
• /
• 2014

From the year 2009, 3D Stereoscopic movies and TV have been spotlighted after the huge success of a movie called "AVATAR". Moreover, most of 3D movies & contents are created by mixing real-life shots & virtual animated pictures, such as "Robocop 3", "Transformer 4" as shown in 2014. However, the stereoscopic 3D video film shooting with a traditional stereoscopic rig camera system, takes much more time to set the rig system and adjust the system setting for proper film making which necessarily resulting in bigger cost. In fact, these problems have depreciated the success of Avatar as decreasing demand for 3D stereoscopic video shooting. In this paper, inherent problems of traditional stereoscopic rig camera system are analyzed, and as a solution for the problems, a novel implementations of single-lens optical stereoscopic 3D camera system is suggested. The new system can be implemented to a technology for separating two lights when even those lights passing through in the same optical axis. The system has advantages of adjusting the setting and taking video compared with traditional stereoscopic 3D rig systems. Furthermore, this system can acquire comfortable 3D stereoscopic video because of the good characteristics of geometrical errors. This paper will be discussed the single-lens stereoscopic 3D camera system using rolling shutters, it will be tested geometrical errors of this system. Lastly, other types of single lens stereoscopic 3D camera system are discussed to develop the promising future of this system.

• 한국HCI학회:학술대회논문집
• /
• 2008.02a
• /
• pp.823-828
• /
• 2008

This study set out investigate what kind of changes would be caused to the craving of alcohol dependent patients by stimuli through virtual reality in the preparation stage for drinking refusal training. With regard to stimulation, it included alcohol exposure, a positive situation, and a negative situation on the basis of drinking encouraging situations(social pressure) known as drinking stimulating situations for alcoholics. The purpose of the study is to provide fundamental materials for the development of new training programs to refuse alcohol and for the examination of the possibility of utilizing virtual reality technology as a new treatment and training tool for alcoholics. To this end, a virtual reality program was conducted involving 12 alcoholics admitted to Severance Mental Health Hospital in Gyeonggi province from December 2006 to September 2007. The data was dealt with various statistic analyses such as frequency analysis, Wilcoxon Matched-pairs Signed-Ranks Test using SPSS/WIN 11.5 The analysis results indicate that avatars encouraging drinking caused more craving than just the background, that the scenes with alcohol exposed caused more craving than the scenes with no alcohol exposed, and that there were no significant changes to craving according to a positive or negative situation. The results confirmed that training sessions using virtual reality presented a situation and environment of drinking pressure that's similar to the actual social pressure and that the virtual reality approach had enormous potential as an effective treatment tool when combined with the existing treatment techniques.