• Proceedings of the Korea Information Processing Society Conference
• /
• 2012.04a
• /
• pp.375-377
• /
• 2012

인터랙티브아트의 상호작용이라는 관점에서 볼 때 관객과 작품이 상호작용하기 위해선 하드웨어적인 장치가 필수적으로 존재해야 한다. Kinect Sensor는 인체를 구성하는 다양한 관절의 좌표를 추출하는 기능을 통해 실시간으로 모션트래킹을 가능하게 하고 이것을 다양한 컨텐츠에 적용하여 활용 할 수 있다. 이 논문은 인체의 관절좌표를 기반으로한 사용자의 2D, 3D아바타를 생성하는 과정에 대해 기술한다. 각각의 방법은 서로 다른 제작방식과 특성을 가지고 있기 때문에 컨텐츠의 성격에 따라 적용할 수 있고 앞으로 이러한 인터랙션적인 부분과 컨텐츠 분야를 연구할 계획이다.

• Proceedings of the Korean Information Science Society Conference
• /
• 2000.10b
• /
• pp.496-498
• /
• 2000

기존의 웹 기반 3차원 가상환경 분야에 대한 연구는 시각적인 면에서 이전의 웹 컨텐츠에 비해 많은 향상이 있었다. 그러나 내부 객체들간의 다양한 상호작용이나 참여자를 대신하는 아바타(Avatar)의 행위(Behavior)표현에 대해서는 많은 한계를 가지고 있다. 본 논문에서는 아바타를 포함한 가상 객체간의 상호작용과 행위의 유형을 정의하며 이를 지원할 수 있는 가상환경서버를 설계하고 구현한다. 또한, 다중사용자의 참여로 인해 발생할 수 있는 서버의 성능저하를 줄이기 위한 방법론으로서 지역관리 및 메시지 필터링 기법을 제안한다. 구현된 시스템은 가상 쇼핑몰 등의 응용분야에 실제 적용이 가능하다.

• The KIPS Transactions:PartA
• /
• v.11A no.5
• /
• pp.383-390
• /
• 2004

This paper propose a method that controls facial expression of 3D avatar by having the user select a sequence of facial expressions in the space of facial expressions. And we setup its system. The space of expression is created from about 2400 frames consist of motion captured data of facial expressions. To represent the state of each expression, we use the distance matrix that represents the distances between pairs of feature points on the face. The set of distance matrices is used as the space of expressions. But this space is not such a space where one state can go to another state via the straight trajectory between them. We derive trajectories between two states from the captured set of expressions in an approximate manner. First, two states are regarded adjacent if the distance between their distance matrices is below a given threshold. Any two states are considered to have a trajectory between them If there is a sequence of adjacent states between them. It is assumed . that one states goes to another state via the shortest trajectory between them. The shortest trajectories are found by dynamic programming. The space of facial expressions, as the set of distance matrices, is multidimensional. Facial expression of 3D avatar Is controled in real time as the user navigates the space. To help this process, we visualized the space of expressions in 2D space by using the multidimensional scaling(MDS). To see how effective this system is, we had users control facial expressions of 3D avatar by using the system. As a result of that, users estimate that system is very useful to control facial expression of 3D avatar in real-time.

• The Journal of the Korea Contents Association
• /
• v.18 no.1
• /
• pp.250-257
• /
• 2018

Today, the integration of the rapid development of ICT and the smart devices moves our lives quickly into an online community environment through not only quick and easy information search but also various social media. Accordingly, individual activities in the smart media environment are pouring out vast quantities of data in many fields, accumulating a tremendous amount of data. The everyday data of individuals is reproducing different values from the previous ones, while suggesting new customized services that utilize them in various fields. Recently, big data utilization has attracted a great attention in the field of healthcare. Especially, development of healthcare service linked with mobile is expected to bring a new paradigm in this field. In this study, creation of a 3D avatar character model as a means to transfer information to individuals more efficiently is proposed in the development of mobile customized service for health promotion and growth prediction of children and adolescents, at the same time, an effective visual expression method to have a sense of immersion and unity is searched.

• Proceedings of the Korean Information Science Society Conference
• /
• 2001.10b
• /
• pp.259-261
• /
• 2001

본 논문에서는 네트워크를 통해 공유되는 가상공간에 참가자가 분신(아바타) 또는 실물 동영상의 형태로 자유로이 참가하여 가상세계를 현실감 있게 공유할 수 있는 시스템을 제안한다. Java3D를 이용하여 컴퓨터그래픽과 실영상을 실시간에 합성 렌더링함으로써 3차원 가상공간을 구현하고 있다. 분산환경에서의 실험을 통해 기술적 가능성을 제시한다.

• Proceedings of the Korean Society for Emotion and Sensibility Conference
• /
• 1999.11a
• /
• pp.368-372
• /
• 1999

새롭게 표준화된 멀티미디어 동영상 파일 포맷인 MPEG-4에는 자연영상과 소리뿐만 아니라 합성된 그래픽과 소리를 포함하고 있다. 특히 화상회의나 가상환경의 아바타를 구성하기 위한 모델링과 에니메이션을 위한 FDP, FAP에 대한 표준안을 포함하고 있다. 본 논문은 MPEG-4에서 정의한 FDP와 FAP를 이용하여 화상회의나 가상환경의 아바타로 자연스럽고 현실감 있게 사용할 수 있는 얼굴 모델 생성을 위해서 보다 정교한 일반모델을 사용하고, 이에 근육 모델을 사용하여 보다 정밀한 표정 생성을 위해서 임의의 위치에 근육을 생성 할 수 있도록 근육 편집기를 작성하여, 표정 에니메이션을 수행할 수 있도록 에니메이션 편집 프로그램을 구현하였다.

• The Proceeding of the Korean Institute of Electromagnetic Engineering and Science
• /
• v.21 no.6
• /
• pp.10-19
• /
• 2010

아바타 영화 이후 영화 시장뿐만 아니라 방송 시장에서도 3D로의 전환이 급속하게 이루어지고 있다. 전 세계적으로 3D 관련 표준화 작업이 활발하게 이루어 있고, 관련 장비 및 솔루션 또한 3D 디스플레이를 선두로 카메라 및 3D 포스트 프로덕션 장비를 포함하여 다양한 장비들이 실제 상용 서비스가 가능한 수준으로 개발이 되고 있다. 시청자 관점에서 보면 셔터링 방식이 주를 이루고 있지만 머지않아 무안경 방식의 3D 솔루션이 선보일 것으로 예상된다. 이러한 움직임에 이어 또 한편으로는 기존 수동형 방송이 아닌 사용자가 직접 참여하고 네트워크 및 소셜 서비스가 가능한 형태의 스마프 TV가 관심을 불러 일으키고 있다. 본 논문에서는 향후 3D가 지향해야 할 하나의 방향이라고 볼 수 있는 스마트 3D에 대해서 개념을 정의하고, 3D가 스마트해지기 위해 필요한 환경 및 요소 기술에 대해서 기술하고자 한다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2003.05a
• /
• pp.67-70
• /
• 2003

웹 브라우저로 쉽게 접근 할 수 있는, VRML과 XML을 이용한 X3D(Extensible 3D)구조를 통해 가상공간에서 인간의 움직임에 대한 체험을 하도록 하는 Humanoid를 생성해 사용자와 상호 작용할 수 있는 방법을 제안한다. 즉 X3D의 특징, X3D를 이용하여 컴퓨터 그래픽스의 화려한 영상이 사실처럼 보이는 기술인 반사효과(Reflection), 실시간 디스플레이(Compression & Reduce), 대화식의 상호작용(Interaction)통의 Web3D 기반 3D 그래픽 표현에 대한 알고리즘을 제안하고 검증할 것이다.

• Proceedings of the Korean Institute of Intelligent Systems Conference
• /
• 2007.04a
• /
• pp.401-404
• /
• 2007

본 논문은 거울 투영을 이용하여 2D의 감정인식 데이터베이스를 3D에 적용 가능하다는 것을 증명한다. 또한, 감정 확률을 이용하여 퍼지 모델링을 기반으로한 얼굴표정을 생성하고, 표정을 움직이는 3가지 기본 움직임에 대한 퍼지이론을 적용하여 얼굴표현함수를 제안한다. 제안된 방법은 거울 투영을 통한 다중 이미지를 이용하여 2D에서 사용되는 감정인식에 대한 특징벡터를 3D에 적용한다. 이로 인해, 2D의 모델링 대상이 되는 실제 모델의 기본감정에 대한 비선형적인 얼굴표정을 퍼지를 기반으로 모델링한다. 그리고 얼굴표정을 표현하는데 기본 감정 6가지인 행복, 슬픔, 혐오, 화남, 놀람, 무서움으로 표현되며 기본 감정의 확률에 대해서 각 감정의 평균값을 사용하고, 6가지 감정 확률을 이용하여 동적 얼굴표정을 생성한다. 제안된 방법을 3D 인간형 아바타에 적용하여 실제 모델의 표정 벡터와 비교 분석한다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2023.11a
• /
• pp.733-734
• /
• 2023

버츄얼 유튜버로서 자신의 동작을 3D 가상 캐릭터로 나타내고, SNS 에서 춤을 공유하는 경우가 많아졌다. 본 논문에서는 2D 영상에서 MediaPipe BlazePose 모델로 추정된 사람 포즈를 3D 인체 모델인 SMPL 에 피팅하여 사용자 정의 3D 모델을 생성하는 방법을 제안한다. 이를 통해 자신의 춤 영상으로 3D 모델을 생성하여 공유하거나, 기존의 춤 동영상으로 3D 모델을 생성하여 댄스 게임에 사용할 수 있다. 이처럼 본 기술은 예술 및 엔터테인먼트 분야에서 다양하게 활용될 수 있다.