• Proceedings of the Korean Society of Computer Information Conference
• /
• 2018.07a
• /
• pp.395-396
• /
• 2018

인터넷 쇼핑몰, 오프라인 매장에서 구입한 제품의 포토 리뷰를 블로그, 쇼핑몰에 올릴 때 얼굴 노출을 꺼려하여 직접 사진 처리 프로그램 등을 통해 얼굴을 가리거나 사진을 얼굴 부분까지 잘라 내는 등의 번거로운 작업을 거친 후 올리게 된다. 위와 같은 불편함을 해결하기 위해 쇼핑몰, 블로그 등 인터넷 매체를 통해 포토 리뷰를 작성 할 때 얼굴이 포함된 사진을 올리더라도 자동으로 얼굴 인식 후 의상에 어울리는 소품을 합성하여 구매자가 포토 리뷰를 올리기 편한 환경을 제공하고자 한다. 이를 위해 기본적인 얼굴 추적과 얼굴 특징 점을 기반으로 한 안경과 같은 소품 합성 등이 필요하다. 본 연구에서는 실시간으로 얼굴 및 특징점을 추출하고 이를 기반으로 얼굴에 소품을 합성하는 기본 기능을 구현하였다.

• The Journal of the Acoustical Society of Korea
• /
• v.17 no.8
• /
• pp.3-11
• /
• 1998

본 논문에서는 고품질의 얼굴 동영상과 운율이 첨가된 음성을 통합하여 자연스런 가상얼굴을 실시간으로 합성하는 방법을 제안한다. 이 방법에서는 한글 텍스트를 입력하여, 텍스트에 따라 입모양과 음성을 합성하고, 얼굴 동영상과 음성의 동기를 맞추고 있다. 먼저, 텍스트를 음운 변화한 후, 문장을 분석하고 자모음사이의 지속시간을 부여한다. 자모음과 지 속시간에 따라 입모양을 변화시켜 얼굴 동영상을 생성하고 있다. 이때, 텍스트에 부합한 입 모양 변화뿐만 아니라, 두부의 3차원 동작과 다양한 표정변화를 통하여 자연스런 가상얼굴 을 실시간으로 합성하고 있다. 한편, 음성합성에서는 문장분석 결과에 따라 강세구와 억양구 를 정하고 있다. 강세구와 억양구를 이용하여 생성된 운율모델이 고품질의 음성합성에 필요 한 지속시간, 억양 및 휴지기를 제어한다. 합성단위는 무제한 어휘가 가능한 반음절과 triphone(VCV)의 조합이며, 합성방식은 TD-PSOLA를 사용한다.

• Proceedings of the Korean Society for Emotion and Sensibility Conference
• /
• 1998.11a
• /
• pp.40-44
• /
• 1998

사용자에 게 친근감 있는 인터페이스를 제공하기 위해 자연스러운 얼굴 애니메이션에 대한 연구가 활발히 진행 중이다.[5][6] 본 논문에서는 자연스러운 얼굴의 표정 합성을 위한 애니메이션 방법 을 제안하였다. 특정한 사람을 모델로 한 얼굴 애니메이션을 위하여 우선 3차원 메쉬로 구성된 일반 모델(generic model)을 특정 사람에게 정합 하여 특정인의 3차원 얼굴 모델을 얻을 수 있다 본 논문에서는 한국인의 자연스러운 얼굴 표정합성을 위하여, 한국인의 표준얼굴에 관한 연구결과를 토대로 한국인 얼굴의 특징을 반영한 일반모델을 만들고 이를 이용하여 특정인의 3차원 얼굴 모델을 얻을 수 있도록 하였다. 실제 얼굴의 근육 및 피부 조직 등 해부학적 구조에 기반 한 표정 합성방법을 사용하여 현실감 있고 자연스러운 얼굴 애니메이션이 이루어질 수 있도록 하였다.

• The Journal of Korean Institute of Communications and Information Sciences
• /
• v.19 no.4
• /
• pp.614-623
• /
• 1994

Synthesizing speech and facial images is necessary for human interface that man and machine converse naturally as human do. The target of this paper is synthesizing the facial images. In synthesis of the facial images a three-dimensional (3-D) shape model of the face is used for realizating the facial expression variations and the lip shape variations. The various facial expressions and lip shapes harmonized with the syllables are synthesized by deforming the three-dimensional model on the basis of the facial muscular actions. Combications with the consonants and the vowels make 14.364 syllables. The vowels dominate most lip shapes but the consonants do a part of them. For determining the lip shapes, this paper investigates all the syllables and classifies the lip shapes pattern according to the vowels and the consonants. As the results, the lip shapes are classified into 8 patterns for the vowels and 2patterns for the consonants. In advance, the paper determines the synthesis rules for the classified lip shape patterns. This method permits us to obtain the natural facial image with the various facial expressions and lip shape patterns.

• Journal of the HCI Society of Korea
• /
• v.6 no.1
• /
• pp.21-26
• /
• 2011

This paper presents a robust method for facial image synthesis under varying illumination by combining illumination correction and Poisson image processing techniques. The presented method automatically detects skin area and corrects highly saturated regions that can cause bad effects on the final synthesis image. The developed method can be applied to various facial synthesis applications by correcting illumination variations that can occur frequently on photos taken with a camera phone.

• Proceedings of the Korean Society for Emotion and Sensibility Conference
• /
• 2002.05a
• /
• pp.342-347
• /
• 2002

한국인 20대 여성 얼굴을 대표하는 30개 얼굴의 감성 형용사 평정을 통해 아름다운 얼굴의 감성 특징을 파악하였다. 얼굴 감성을 나타내는 14개 형용사 평정에 대해 주성분 분석을 실시한 결과 얼굴 감성은 샤프 요인과 소프트 요인으로 나뉘며, 사람들이 소프트한 느낌보다 샤프한 느낌을 지닌 얼굴을 더 아름답다고 느끼는 것으로 나타났다. 아름다운 얼굴의 감성 특징 검증을 위해 얼굴 합성법을 이용하여 합성한 이미지에 대해 얼굴 미모와 감성 형용사 평정을 실시하였다. '상위 평균' 이미지는 '전체 평균' 이미지보다, 전체 평균과 상위 평균의 얼굴 특징 차이를 50% 과장한 '상위+50' 이미지는 '상위 평균' 이미지보다 유의미하게 더 아름다운 것으로 평정되었다. 합성 얼굴의 감성 평정 결과 '전체 평균' 이미지는 소프트 감성에서 높은 평정을 받았으며, '상위 평균' 이미지는 샤프 감성, '상위150'이미지는 두 감성 요인을 모두 지니는 것으로 나타났다. 이러한 결과는 샤프 혹은 소프트 중 하나의 감성 요인이 두드러진 얼굴보다 두 가지 감성 요인 모두에서 높은 평정을 받은 얼굴을 더욱 아름답다고 지각하는 것을 암시한다.

• Korean Journal of Cognitive Science
• /
• v.11 no.2
• /
• pp.1-10
• /
• 2000

Realistic facial animation research field which communicates with human and computer using face has increased recently. The human face is the part of the body we use to recognize individuals and the important communication channel that understand the inner states like emotion. To provide the intelligent interface. computer facial animation looks like human in talking and expressing himself. Facial modeling and animation research is focused on realistic facial animation recently. In this article, we suggest the method of facial modeling and animation for realistic facial synthesis. We can make a 3D facial model for arbitrary face by using generic facial model. For more correct and real face, we make the Korean Generic Facial Model. We can also manipulate facial synthesis based on the physical characteristics of real facial muscle and skin. Many application will be developed such as teleconferencing, education, movies etc.

• Journal of the Korea Institute of Information and Communication Engineering
• /
• v.6 no.4
• /
• pp.645-651
• /
• 2002

This paper presents a method to automatically synthesized human fare images from holistic descriptions. We compactly represent the face set by a small set of prototypes, which can be used in simple ways generated controlled morphings. This becomes possible because separation of 2D-shape and texture provides a faithful, closed and convex representation of images, and smooths the mapping between images and their properties. With this approach, the user watches an images being continuously morphed according to his indications, and the synthesized images always obey the natural physiognomic constraints.

• Journal of the Korea Society of Computer and Information
• /
• v.17 no.8
• /
• pp.31-40
• /
• 2012

In this paper, we propose a method of synthesizing faces of a user and an animation character using a 3D face model. The suggested method first receives two orthogonal 2D face images and extracts major features of the face through the template snake. It then generates a user-customized 3D face model by adjusting a generalized face model using the extracted facial features and by mapping texture maps obtained from two input images to the 3D face model. Finally, it generates a user-customized animation character by synthesizing the generated 3D model to an animation character reflecting the position, size, facial expressions, and rotational information of the character. Experimental results show some results to verify the performance of the suggested algorithm. We expect that our method will be useful to various applications such as games and animation movies.

• KIPS Transactions on Software and Data Engineering
• /
• v.11 no.11
• /
• pp.465-472
• /
• 2022

In this paper, the style synthesis network is trained to generate style-synthesized video through the style synthesis through training Stylegan and the video synthesis network for video synthesis. In order to improve the point that the gaze or expression does not transfer stably, 3D face restoration technology is applied to control important features such as the pose, gaze, and expression of the head using 3D face information. In addition, by training the discriminators for the dynamics, mouth shape, image, and gaze of the Head2head network, it is possible to create a stable style synthesis video that maintains more probabilities and consistency. Using the FaceForensic dataset and the MetFace dataset, it was confirmed that the performance was increased by converting one video into another video while maintaining the consistent movement of the target face, and generating natural data through video synthesis using 3D face information from the source video's face.