• 한국컴퓨터정보학회:학술대회논문집
• /
• 한국컴퓨터정보학회 2018년도 제58차 하계학술대회논문집 26권2호
• /
• pp.395-396
• /
• 2018

인터넷 쇼핑몰, 오프라인 매장에서 구입한 제품의 포토 리뷰를 블로그, 쇼핑몰에 올릴 때 얼굴 노출을 꺼려하여 직접 사진 처리 프로그램 등을 통해 얼굴을 가리거나 사진을 얼굴 부분까지 잘라 내는 등의 번거로운 작업을 거친 후 올리게 된다. 위와 같은 불편함을 해결하기 위해 쇼핑몰, 블로그 등 인터넷 매체를 통해 포토 리뷰를 작성 할 때 얼굴이 포함된 사진을 올리더라도 자동으로 얼굴 인식 후 의상에 어울리는 소품을 합성하여 구매자가 포토 리뷰를 올리기 편한 환경을 제공하고자 한다. 이를 위해 기본적인 얼굴 추적과 얼굴 특징 점을 기반으로 한 안경과 같은 소품 합성 등이 필요하다. 본 연구에서는 실시간으로 얼굴 및 특징점을 추출하고 이를 기반으로 얼굴에 소품을 합성하는 기본 기능을 구현하였다.

• 한국음향학회지
• /
• 제17권8호
• /
• pp.3-11
• /
• 1998

본 논문에서는 고품질의 얼굴 동영상과 운율이 첨가된 음성을 통합하여 자연스런 가상얼굴을 실시간으로 합성하는 방법을 제안한다. 이 방법에서는 한글 텍스트를 입력하여, 텍스트에 따라 입모양과 음성을 합성하고, 얼굴 동영상과 음성의 동기를 맞추고 있다. 먼저, 텍스트를 음운 변화한 후, 문장을 분석하고 자모음사이의 지속시간을 부여한다. 자모음과 지 속시간에 따라 입모양을 변화시켜 얼굴 동영상을 생성하고 있다. 이때, 텍스트에 부합한 입 모양 변화뿐만 아니라, 두부의 3차원 동작과 다양한 표정변화를 통하여 자연스런 가상얼굴 을 실시간으로 합성하고 있다. 한편, 음성합성에서는 문장분석 결과에 따라 강세구와 억양구 를 정하고 있다. 강세구와 억양구를 이용하여 생성된 운율모델이 고품질의 음성합성에 필요 한 지속시간, 억양 및 휴지기를 제어한다. 합성단위는 무제한 어휘가 가능한 반음절과 triphone(VCV)의 조합이며, 합성방식은 TD-PSOLA를 사용한다.

• 한국감성과학회:학술대회논문집
• /
• 한국감성과학회 1998년도 추계학술발표 논문집
• /
• pp.40-44
• /
• 1998

사용자에 게 친근감 있는 인터페이스를 제공하기 위해 자연스러운 얼굴 애니메이션에 대한 연구가 활발히 진행 중이다.[5][6] 본 논문에서는 자연스러운 얼굴의 표정 합성을 위한 애니메이션 방법 을 제안하였다. 특정한 사람을 모델로 한 얼굴 애니메이션을 위하여 우선 3차원 메쉬로 구성된 일반 모델(generic model)을 특정 사람에게 정합 하여 특정인의 3차원 얼굴 모델을 얻을 수 있다 본 논문에서는 한국인의 자연스러운 얼굴 표정합성을 위하여, 한국인의 표준얼굴에 관한 연구결과를 토대로 한국인 얼굴의 특징을 반영한 일반모델을 만들고 이를 이용하여 특정인의 3차원 얼굴 모델을 얻을 수 있도록 하였다. 실제 얼굴의 근육 및 피부 조직 등 해부학적 구조에 기반 한 표정 합성방법을 사용하여 현실감 있고 자연스러운 얼굴 애니메이션이 이루어질 수 있도록 하였다.

• 한국통신학회논문지
• /
• 제19권4호
• /
• pp.614-623
• /
• 1994

얼굴을 마주보며 인간끼리 대화하는 것처럼 인간과 자연스럽게 대화할 수 있는 휴먼인터페이스를 실현하기 위해서는 임성의 합성과 얼굴영상의 합성이 필요하다. 본 논문은 얼굴영상의 합성을 대상으로 한다. 얼굴영상의 합성에서는 표정변화와 입모양의 변화를 3차원적으로 실현하기 위하여 얼굴의 3차원 형상모델을 이용한다. 얼굴의 3차원 모델을 얼굴 근육의 움직임에 따라 변형하므로서 다양한 얼굴표정과 음절에 어울리는 입모양을 합성한다. 우리말에서 자모의 결합으로 조합가능한 음절은 14,364자에 이른다. 이 음절에 대한 입모양의 대부분은 모음에 따라 형성되고, 일부가 자음에 따라 달라진다. 그러므로, 음절에 어울리는 입모양의 변형규칙을 정하기 위해, 이들을 모두 조사하여 모든 음절을 대표할 수 있는 입모양패턴을 모음과 자음에 따란 분류한다. 그 결과, 자음에 영향을 받는 2개의 패턴과 모음에 의한 8개의 패턴, 총 10개의 패턴으로 입모양을 분류할 수 있었다. 나아가서, 분류된 입모양패턴의 합성규칙을 얼굴근육의 움직임을 고려하여 정한다. 이와같이 분류된 10개의 입모양패턴으로 모든 음절에 대한 입모양을 합성할 수 있고, 얼굴근육의 움직임을 이용하므로써 다양한 표정을 지으면서 말하는 자연스런 얼굴영상을 합성할 수 있었다.

• 한국HCI학회논문지
• /
• 제6권1호
• /
• pp.21-26
• /
• 2011

본 논문은 얼굴 영상을 합성할 때 조명 변화에 강인하도록 조명 보정 기법과 푸아송 영상 처리 기법을 결합한 얼굴 합성 방법을 제시한다. 제시된 방법은 얼굴 영상으로부터 자동적으로 피부 영역을 검출하고, 합성할 부위에서 합성 결과에 영향을 주는 세츄레이션된 부분을 보정한 후 최종적으로 대상 얼굴 영상에 합성하게 된다. 개발된 방법은 카메라가 부착된 모바일 기기에서 촬영된 영상 등에서 자주 발생할 수 있는 조명변화를 보완하여 다양한 얼굴합성 응용 분야에 활용될 수 있다.

• 한국감성과학회:학술대회논문집
• /
• 한국감성과학회 2002년도 춘계학술대회 논문집
• /
• pp.342-347
• /
• 2002

한국인 20대 여성 얼굴을 대표하는 30개 얼굴의 감성 형용사 평정을 통해 아름다운 얼굴의 감성 특징을 파악하였다. 얼굴 감성을 나타내는 14개 형용사 평정에 대해 주성분 분석을 실시한 결과 얼굴 감성은 샤프 요인과 소프트 요인으로 나뉘며, 사람들이 소프트한 느낌보다 샤프한 느낌을 지닌 얼굴을 더 아름답다고 느끼는 것으로 나타났다. 아름다운 얼굴의 감성 특징 검증을 위해 얼굴 합성법을 이용하여 합성한 이미지에 대해 얼굴 미모와 감성 형용사 평정을 실시하였다. '상위 평균' 이미지는 '전체 평균' 이미지보다, 전체 평균과 상위 평균의 얼굴 특징 차이를 50% 과장한 '상위+50' 이미지는 '상위 평균' 이미지보다 유의미하게 더 아름다운 것으로 평정되었다. 합성 얼굴의 감성 평정 결과 '전체 평균' 이미지는 소프트 감성에서 높은 평정을 받았으며, '상위 평균' 이미지는 샤프 감성, '상위150'이미지는 두 감성 요인을 모두 지니는 것으로 나타났다. 이러한 결과는 샤프 혹은 소프트 중 하나의 감성 요인이 두드러진 얼굴보다 두 가지 감성 요인 모두에서 높은 평정을 받은 얼굴을 더욱 아름답다고 지각하는 것을 암시한다.

• 인지과학
• /
• 제11권2호
• /
• pp.1-10
• /
• 2000

최근 사용자에게 친근감있는 인터페이스를 제공하기 위해 자연스러운 얼굴 애니메이션에 대한 연구가 활발히 진행 중이다. 얼굴은 인간의 신체부위 중 가장 쉽게 개개인을 구분할 수 있고, 감정과 정서 등의 내적 상태를 명백하게 이해할 수 있도록 해주는 중요한 의사소통의 수단으로 여겨지고 있다. 이러한 얼굴은 이용하여 인간과 컴퓨터간의 의사 전달에 있어서 효율적으로 인간의 감정을 인식하고 전달하여 대화할 수 있도록 하기 위해서 컴퓨터상의 얼굴은 인간과 유사하게 대화할 수 있고, 감정을 표현할 수 있도록 친숙하고 현실감이 있어야 한다. 본 논문에서는 자연스러운 얼굴의 합성을 위한 얼굴 모델링 및 애니메이션 방법을 제안하였다. 특정한 사람을 모델로 한 얼굴 애니메이션을 위하여 우선 3차원 메쉬로 구성된 일반 모델(generic model)을 특성 사람에게 정합하여 특정인의 3차원 얼굴 모델을 얻을 수 있다. 본 논문에서는 기존 연구들과 다르게 표준 한국인 얼굴을 이용한 일반 모델을 생성하여, 임의의 얼굴에 대하여 좀 더 정확하고 자연스러운 3차원 모델이 이루어질 수 있도록 하였다. 그리고 얼굴 표정합성을 위하여, 실제 얼굴의 근육 및 피부 조직 등 해부학적 구조에 기반한 근육 기반 모델 방법을 사용하여 현실감 있고 자연스러운 얼굴 애니메이션이 이루어질 수 있도록 하였다. 이러한 얼굴 모델링 및 합성 기술은 화상회의, 가상현실, 교육, 영화 등 여러 분야에서 활용될 수 있다.

• 한국정보통신학회논문지
• /
• 제6권4호
• /
• pp.645-651
• /
• 2002

본 논문에서는 전체적으로 묘사된 얼굴의 특징을 이용하여 얼굴 영상을 합성하는 방법을 제안한다. 제안된 방법은 얼굴의 형태를 대조하는 방법을 이용하여 만든 원영상의 작은 부분 영상들을 가지고 얼굴을 재현하였으며 얼굴 영상에서 2차원적 형태와 구조를 분리함으로서 음영부분과 경계부분을 표현할 수 있었으며, 영상과 영상의 특성을 나타내는 얼굴 부분영역을 조화롭게 재배치함으로서 합성을 가능케 하였다. 실험결과 본 논문에서 제안된 방법으로 합성한 얼굴 영상은 항상 자연스러운 얼굴 영상을 나타냄으로서 제안된 방법의 실효성을 입증하였다.

• 한국컴퓨터정보학회논문지
• /
• 제17권8호
• /
• pp.31-40
• /
• 2012

본 논문에서는 3차원의 얼굴모델을 생성하여 사용자의 얼굴을 애니메이션 캐릭터의 얼굴에 자연스럽게 합성하는 새로운 방법을 제안한다. 제안된 방법에서는 먼저 정면과 측면의 직교하는 2장의 2차원 얼굴영상을 입력 받아 얼굴의 주요 특징을 템플릿 스테이크를 이용하여 추출하고, 추출된 특징점에 맞게 일반적인 3차원 얼굴 모델을 변형시킴으로써 사용자의 얼굴 형태에 적합한 얼굴 모델을 생성한다. 그리고 2장의 얼굴 영상으로부터 얻어지는 텍스처 맵을 3차원의 얼굴 모델에 매핑하여 현실감 있는 개인화된 얼굴 모델을 생성한다. 그런 다음, 개인화된 3차원의 얼굴모델을 애니메이션 캐릭터 얼굴의 위치, 크기, 표정, 회전 정보를 반영하여 캐릭터 얼굴에 자연스럽게 합성함으로써 현실감 있는 사용자 맞춤형 애니메이션을 제작한다. 실험에서는 제안된 캐릭터 얼굴 합성 방법의 성능을 검증하기 위해서 수행한 여러 가지 실험결과를 보인다. 본 논문에서 제안된 방법은 애니메이션 영화, 게임, 캐릭터를 이용한 여러 가지 응용 분야에서 유용하게 활용될 것으로 기대된다.

• 정보처리학회논문지:소프트웨어 및 데이터공학
• /
• 제11권11호
• /
• pp.465-472
• /
• 2022

본 연구에서는 기존의 동영상 합성 네트워크에 스타일 합성 네트워크를 접목시켜 동영상에 대한 스타일 합성의 한계점을 극복하고자 한다. 본 논문의 네트워크에서는 동영상 합성을 위해 스타일갠 학습을 통한 스타일 합성과 동영상 합성 네트워크를 통해 스타일 합성된 비디오를 생성하기 위해 네트워크를 학습시킨다. 인물의 시선이나 표정 등이 안정적으로 전이되기 어려운 점을 개선하기 위해 3차원 얼굴 복원기술을 적용하여 3차원 얼굴 정보를 이용하여 머리의 포즈와 시선, 표정 등의 중요한 특징을 제어한다. 더불어, 헤드투헤드++ 네트워크의 역동성, 입 모양, 이미지, 시선 처리에 대한 판별기를 각각 학습시켜 개연성과 일관성이 더욱 유지되는 안정적인 스타일 합성 비디오를 생성할 수 있다. 페이스 포렌식 데이터셋과 메트로폴리탄 얼굴 데이터셋을 이용하여 대상 얼굴의 일관된 움직임을 유지하면서 대상 비디오로 변환하여, 자기 얼굴에 대한 3차원 얼굴 정보를 이용한 비디오 합성을 통해 자연스러운 데이터를 생성하여 성능을 증가시킴을 확인했다.