• 제목/요약/키워드: sequence-to-sequence model

검색결과 1,626건 처리시간 0.032초

3D Facial Landmark Tracking and Facial Expression Recognition

  • Medioni, Gerard;Choi, Jongmoo;Labeau, Matthieu;Leksut, Jatuporn Toy;Meng, Lingchao
    • Journal of information and communication convergence engineering
    • /
    • 제11권3호
    • /
    • pp.207-215
    • /
    • 2013
  • In this paper, we address the challenging computer vision problem of obtaining a reliable facial expression analysis from a naturally interacting person. We propose a system that combines a 3D generic face model, 3D head tracking, and 2D tracker to track facial landmarks and recognize expressions. First, we extract facial landmarks from a neutral frontal face, and then we deform a 3D generic face to fit the input face. Next, we use our real-time 3D head tracking module to track a person's head in 3D and predict facial landmark positions in 2D using the projection from the updated 3D face model. Finally, we use tracked 2D landmarks to update the 3D landmarks. This integrated tracking loop enables efficient tracking of the non-rigid parts of a face in the presence of large 3D head motion. We conducted experiments for facial expression recognition using both framebased and sequence-based approaches. Our method provides a 75.9% recognition rate in 8 subjects with 7 key expressions. Our approach provides a considerable step forward toward new applications including human-computer interactions, behavioral science, robotics, and game applications.

유비쿼터스 컴퓨팅 환경에서 컨텍스트 예측을 위한 시계열 분석 기반 사용자 모델링 (User Modeling based Time-Series Analysis for Context Prediction in Ubiquitous Computing Environment)

  • 최영환;이상용
    • 한국지능시스템학회논문지
    • /
    • 제19권5호
    • /
    • pp.655-660
    • /
    • 2009
  • 기존의 예측 알고리즘들은 실시간 환경에서 학습 데이터 처리에서 오는 시간지연 문제, 구현의 어려움 등으로 개인화된 실시간 서비스를 제공하는 컨텍스트 인식 환경에서 사용하기에 적합하지 않다. 본 논문에서는 사용자 모델을 이용하여 컨텍스트 예측 알고리즘의 처리시간 단축과 예측 정확도를 향상시키기 위한 연구를 제안한다. 컨텍스트 예측을 위하여 사용자의 컨텍스트 중에서 이동경로를 사용한다. 이동경로를 기반으로 시계열 분석 방법을 통하여 사용자 모델을 생성하고, 생성된 사용자 모델을 시퀀스 매칭 방법을 이용하여 사용자의 컨텍스트를 예측한다. 기존 예측 알고리즘과 본 연구에서 제안한 예측 알고리즘을 시뮬레이션을 통하여 처리시간 및 예측 정확도를 비교한 결과, 실시간 서비스 환경에서 예측 정확도는 기존 예측 알고리즘들과 비슷한 결과를 보였고, 처리시간은 사용자 모델을 사용한 경우가 시퀀스 매칭을 사용한 경우보다 평균 40% 정도 감소시킬 수 있음을 알 수 있었다.

이미지 캡션 생성을 위한 심층 신경망 모델의 설계 (Design of a Deep Neural Network Model for Image Caption Generation)

  • 김동하;김인철
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제6권4호
    • /
    • pp.203-210
    • /
    • 2017
  • 본 논문에서는 이미지 캡션 생성과 모델 전이에 효과적인 심층 신경망 모델을 제시한다. 본 모델은 멀티 모달 순환 신경망 모델의 하나로서, 이미지로부터 시각 정보를 추출하는 컨볼루션 신경망 층, 각 단어를 저차원의 특징으로 변환하는 임베딩 층, 캡션 문장 구조를 학습하는 순환 신경망 층, 시각 정보와 언어 정보를 결합하는 멀티 모달 층 등 총 5 개의 계층들로 구성된다. 특히 본 모델에서는 시퀀스 패턴 학습과 모델 전이에 우수한 LSTM 유닛을 이용하여 순환 신경망 층을 구성하며, 캡션 문장 생성을 위한 매 순환 단계마다 이미지의 시각 정보를 이용할 수 있도록 컨볼루션 신경망 층의 출력을 순환 신경망 층의 초기 상태뿐만 아니라 멀티 모달 층의 입력에도 연결하는 구조를 가진다. Flickr8k, Flickr30k, MSCOCO 등의 공개 데이터 집합들을 이용한 다양한 비교 실험들을 통해, 캡션의 정확도와 모델 전이의 효과 면에서 본 논문에서 제시한 멀티 모달 순환 신경망 모델의 높은 성능을 확인할 수 있었다.

Liquid Membrane Permeation of Nitrogen Heterocyclic Compounds Contained in Model Coal Tar Fraction

  • Kim, Su-Jin;Kang, Ho-Cheol;Kim, Yong-Shik;Jeong, Hwa-Jin
    • Bulletin of the Korean Chemical Society
    • /
    • 제31권5호
    • /
    • pp.1143-1148
    • /
    • 2010
  • We investigated the separation of nitrogen heterocyclic compound (NHC) contained in a model coal tar fraction comprising four kinds of NHC [indole (In), quinoline (Q), iso-quinoline (iQ), quinaldine (Qu)], three kinds of bicyclic aromatic compound (BAC) [1-methylnaphthalene (1MN), 2-methylnaphthalene (2MN), dimethylnaphthalene (DMN) mixture with ten structural isomers (DMNs; regarded as one component)], biphenyl (Bp) and phenyl ether (Pe) by liquid membrane permeation (LMP). A batch-stirred tank was used as the permeation unit. An aqueous solution of saponin and n-hexane were used as the liquid membrane and the outer oil phase, respectively. Yield and selectivity of individual NHC was much larger than that of BAC, Bp and Pe. Increasing the initial mass fraction of the saponin to the membrane solution ($C_{sap,0}$) and the initial volume fraction of O/W emulsion to total liquid in a stirred tank (${\phi}_{OW,0}$) resulted in deteriorating the yield of individual NHC, but increasing the stirring speed (N) resulted in improving the yield of each NHC. With increasing $C_{sap,0}$, the selectivity of each NHC based on DMNs increased. Increasing ${\phi}_{OW,0}$ and N resulted in decreasing the selectivity of individual NHC based on DMNs. At an experimental condition fixed, the sequence of the yield and selectivity in reference to DMNs for each NHC was Q > Qu = iQ > In. Furthermore, we compared LPM method with methanol extraction method in view of the separation efficiency (yield, selectivity) of NHC.

플랫폼을 포함한 이동 에이전트를 위한 UML 상호작용 다이어그램의 확장 (Extending UML Interaction Diagrams For Mobile Agents Including Agent Platforms)

  • 유문성
    • 한국인터넷방송통신학회논문지
    • /
    • 제11권2호
    • /
    • pp.261-267
    • /
    • 2011
  • 분산 시스템을 위한 강력한 소프트웨어 패러다임 중 하나가 이동 에이전트 시스템이다. 이동 에이전트의 사용이 증가하고 있으므로 이 시스템을 효율적으로 구축하기 위한 소프트웨어 개발 모델이 필요하다. 현재 소프트웨어 개발 모델로서 널리 사용되고 있는 것이 UML이다. 그러나 기존의 UML은 이동 에이전트 기반 소프트웨어 시스템을 개발하는 모델로 사용하고자 할 때 이동성을 명시적인 방식으로 기술할 수 없다. 본 논문에서는 UML 다이어그램 중 상호 작용 다이어그램(즉 순차 다이어그램과 통신 다이어그램)을 확장하여 세 가지 방법으로 이동 에이전트의 이동성을 명시적으로 표현하였는데 이동 에이전트를 위한 플랫폼의 기능도 포함하였다. 확장한 다이어그램의 표현법을 사용한 사례연구로 이동 에이전트를 이용한 분산형 파일 검색에 적용하였으며 이동 에이전트의 기능과 이동성을 잘 표현할 수 있음을 확인하였다.

복수 운영체제에서의 철도네트워크 열차슬롯배분 모형 연구 (A Study on Model of Train Slot Allocation for Railway Network with Multi Operating System)

  • 최종빈;이진선
    • 한국철도학회논문집
    • /
    • 제20권1호
    • /
    • pp.142-155
    • /
    • 2017
  • 복수의 철도운영자가 철도네트워크를 공동으로 사용하는 경우, 철도운영자별로 열차운행비율, 우선순위 및 착발시각 등에 다툼이 발생하고, 이용수요가 많은 시간대에는 집중적으로 열차운행을 신청하여 열차 경합이 증대되는 현상이 점점 커질 것으로 예상된다. 본 연구는 열차출발시각을 결정변수로 하여 다양하게 주어진 열차시각표에서 열차운행순서, 최소운전시격, 착발시각, 열차우선순위 등을 해석하였으며, 각종 제약조건을 만족하도록 철도운영자들이 신청한 열차시각을 조정하고, 경합 해소가 불가능한 열차는 최종적으로 제거하는 방법을 통하여 목적함수인 철도운영에 현실적으로 적용 가능한 최대 수의 열차슬롯을 찾는 열차슬롯배분 모형을 제시하고자 하였다.

Dental imaging characterization of micropigs

  • Lee, Hyeyeon;Choi, Mihyun;Chang, Jinhwa;Jung, Joohyun;Kim, Mieun;Lee, Namsoon;Kim, Junyoung;Choi, Mincheol
    • 대한수의학회지
    • /
    • 제50권4호
    • /
    • pp.311-317
    • /
    • 2010
  • Recently the micropig has been developed as human disease model. The dental and orofacial region of micropig is similar to that of humans, so it has been used for testing implant materials and techniques. The purpose of this study is on dental image at each age using radiography and computed tomography. Total twenty-two male micropigs, two or three animals of each 1, 3, 5, 7, 9, 12, 18 and 24 months old, were given radiographic examinations. After general anesthesia, extra- and intra-oral radiographic technique and computed tomographic scans were performed to assess the dental characterization of micropigs. The total deciduous dental formula comprised 28 teeth and was depicted as Di 3/3, Dc 1/1, Dp 3/3. The total permanent dental formula comprised 44 teeth and was depicted as I 3/3, C 1/1, P 4/4, M 3/3. Hypodontia of the first premolars was common in the micropig. The permanent teeth erupted from 3 to 24 month after birth. The sequence of eruption of the permanent teeth was M1, P1, I3, C, M2, I1 + P3 + P4, P2, I2, M3. Dental imaging enables visualization of the unerupted teeth and gives more information about the development of the teeth. The growth pattern of the teeth obtained through radiographic and computed tomographic examination provides basic data in the micropig as animal model for dental research.

MRF 프레임워크 기반 비모수적 배경 생성 (Non-parametric Background Generation based on MRF Framework)

  • 조상현;강행봉
    • 정보처리학회논문지B
    • /
    • 제17B권6호
    • /
    • pp.405-412
    • /
    • 2010
  • 기존의 배경 생성방법은 주로 시간에 따른 context만을 이용해 복잡한 환경에서는 적용하기 힘들다. 이러한 단점을 해결하기 위해, 본 논문에서는 움직이는 물체를 포함하지 않는 배경 영상을 생성하기 위해 시간에 따른 context와 공간에 따른 context를 융합한 새로운 배경 생성 방법을 제안한다. 제안한 방법은 먼저 샘플링된 프레임 이미지를 m*n의 블록으로 나누고 각각의 블록을 고정 블록과 비고정 블록으로 나눈다. 비고정 블록에 대해서, 각 블록의 시간적 context와 공간적 context를 모델링하기 위해 MRF 프레임워크를 이용한다. MRF 프레임워크는 영상 픽셀과 연관된 특징과 같은 context에 독립된 entity를 모델링하는데 많이 이용되는 방법으로 본 논문에서는 비고정 블록에 대한 시간적 context와 공간적 context를 모델링하기 위해 이용된다. 실험결과는 제안한 방법이 기존의 시간에 따른 context만을 이용했을 경우보다 더 효율적임을 보여준다.

충격손상 복합재료의 잔류강도저하거동에 대한 통계적 평가 (Statistical Evaluation for Residual Strength of Impacted Composite Materials)

  • 강기원;이승표;이진수;고병갑
    • 한국산학기술학회논문지
    • /
    • 제11권2호
    • /
    • pp.426-434
    • /
    • 2010
  • 본 논문에서는 충격손상을 갖는 유리섬유강화 복합재료의 강도 저하 특성과 이의 통계적 특성을 실험적으로 평가하였다. 평직 복합재료의 주요 충격손상은 섬유파단과 모재균열로서 이는 층간분리가 주된 충격손상인 일방향 적층복합재료와는 상이한 양상이다. 일방향 적층복합재료에 대하여 제안된 기존의 잔류강도 예측모델을 이용하여 충격손상을 갖는 평직 glass/epoxy 복합재료의 잔류강도를 평가하였다. 그 결과 Avva 및 Caprino의 잔류강도 예측모델은 평직 복합재료의 잔류강도에 대해서도 잘 평가되었다. 또한 유리섬유강화 복합재료의 잔류강도에 대한 통계적 특성 평가를 위한 모델을 제안하였으며, 이를 통한 예측결과는 복합재료의 두께와 관계없이 실험결과를 잘 묘사하였다.

중력탐사를 이용한 2차원 Modelling study에 의한 지질구조 해석 (Interpretation of Subsurface Structure by 2-D Gravity Modeling Study)

  • 위수민;도성재
    • 자원환경지질
    • /
    • 제24권4호
    • /
    • pp.409-419
    • /
    • 1991
  • 본 연구에서는 북부 미시간지역에 분포하는 세개의 troughes (Marquette, Republic, and Michigan River troughes)가 만나는 지역의 tectonic evolution을 해석하기 위한 stress의 방향 및 변성퇴적암류의 분포를 이해하는데 도움을 주기위하여, 중력탐사를 통하여 연구지역의 기반암구조 및 이를 피복하고 있는 변성퇴적암과의 관계를 해석하였다. 연구지역은 시생대 기반암(Precambrian W)을 원생대의 변성퇴적암이 부정합으로 덮고 있으며, 이들 암석군들은 현저한 밀도의 차이를 보여 본역의 지각구조를 설명하는데 있어서 중력탐사가 효과적이다. $380km^2$에 걸친 연구지역에 340개의 중력기점을 설정하여 측정된 중력은 표준중력 보정과정을 통하여 중력이상도를 작성하였다. Trough내에 퇴적되어 있는 변성퇴적암류를 따라 positive anomaly가 세 trough들의 축을 따라 나타난다. 각 trough들의 지하구조는 Talwani 방법에 의하여 modelling되었으며, 이들의 심도 또한 계산되었다. 그 결과로 Marquette trough는 비대청형으로 남쪽사면에 비하여 북쪽사면이 급경사를 이루고 있다. 세 trough가 합류하는 지점의 기반암구조는 대체로 평평하며, 이것으로 미루어 이 trough들이 거의 동시에 생성되었음을 시사해준다.

  • PDF