• 제목/요약/키워드: facial expression analysis

검색결과 164건 처리시간 0.025초

인간의 비언어적 행동 특징을 이용한 다중 사용자의 상호작용 의도 분석 (Interaction Intent Analysis of Multiple Persons using Nonverbal Behavior Features)

  • 윤상석;김문상;최문택;송재복
    • 제어로봇시스템학회논문지
    • /
    • 제19권8호
    • /
    • pp.738-744
    • /
    • 2013
  • According to the cognitive science research, the interaction intent of humans can be estimated through an analysis of the representing behaviors. This paper proposes a novel methodology for reliable intention analysis of humans by applying this approach. To identify the intention, 8 behavioral features are extracted from the 4 characteristics in human-human interaction and we outline a set of core components for nonverbal behavior of humans. These nonverbal behaviors are associated with various recognition modules including multimodal sensors which have each modality with localizing sound source of the speaker in the audition part, recognizing frontal face and facial expression in the vision part, and estimating human trajectories, body pose and leaning, and hand gesture in the spatial part. As a post-processing step, temporal confidential reasoning is utilized to improve the recognition performance and integrated human model is utilized to quantitatively classify the intention from multi-dimensional cues by applying the weight factor. Thus, interactive robots can make informed engagement decision to effectively interact with multiple persons. Experimental results show that the proposed scheme works successfully between human users and a robot in human-robot interaction.

Accuracy and reliability of 2-dimensional photography versus 3-dimensional soft tissue imaging

  • Ayaz, Irem;Shaheen, Eman;Aly, Medhat;Shujaat, Sohaib;Gallo, Giulia;Coucke, Wim;Politis, Constantinus;Jacobs, Reinhilde
    • Imaging Science in Dentistry
    • /
    • 제50권1호
    • /
    • pp.15-22
    • /
    • 2020
  • Purpose: This study was conducted to objectively and subjectively compare the accuracy and reliability of 2-dimensional(2D) photography and 3-dimensional(3D) soft tissue imaging. Materials and Methods: Facial images of 50 volunteers(25 males, 25 females) were captured with a Nikon D800 2D camera (Nikon Corporation, Tokyo, Japan), 3D stereophotogrammetry (SPG), and laser scanning (LS). All subjects were imaged in a relaxed, closed-mouth position with a normal smile. The 2D images were then exported to Mirror® Software (Canfield Scientific, Inc, NJ, USA) and the 3D images into Proplan CMF® software (version 2.1, Materialise HQ, Leuven, Belgium) for further evaluation. For an objective evaluation, 2 observers identified soft tissue landmarks and performed linear measurements on subjects' faces (direct measurements) and both linear and angular measurements on all images(indirect measurements). For a qualitative analysis, 10 dental observers and an expert in facial imaging (subjective gold standard) completed a questionnaire regarding facial characteristics. The reliability of the quantitative data was evaluated using intraclass correlation coefficients, whereas the Fleiss kappa was calculated for qualitative data. Results: Linear and angular measurements carried out on 2D and 3D images showed excellent inter-observer and intra-observer reliability. The 2D photographs displayed the highest combined total error for linear measurements. SPG performed better than LS, with borderline significance (P=0.052). The qualitative assessment showed no significant differences among the 2D and 3D imaging modalities. Conclusion: SPG was found to a reliable and accurate tool for the morphological evaluation of soft tissue in comparison to 2D imaging and laser scanning.

Reduction of Proliferation and Induction of Apoptosis are Associated with Shrinkage of Head and Neck Squamous Cell Carcinoma due to Neoadjuvant Chemotherapy

  • Sarkar, Shreya;Maiti, Guru Prasad;Jha, Jayesh;Biswas, Jaydip;Roy, Anup;Roychoudhury, Susanta;Sharp, Tyson;Panda, Chinmay Kumar
    • Asian Pacific Journal of Cancer Prevention
    • /
    • 제14권11호
    • /
    • pp.6419-6425
    • /
    • 2013
  • Background: Neoadjuvant chemotherapy (NACT) is a treatment modality whereby chemotherapy is used as the initial treatment of HNSCC in patients presenting with advanced cancer that cannot be treated by other means. It leads to shrinkage of tumours to an operable size without significant compromise to essential oro-facial organs of the patients. The molecular mechanisms behind shrinkage due to NACT is not well elucidated. Materials and Methods: Eleven pairs of primary HNSCCs and adjacent normal epithelium, before and after chemotherapy were screened for cell proliferation and apoptosis. This was followed by immunohistochemical analysis of some cell cycle (LIMD1, RBSP3, CDC25A, CCND1, cMYC, RB, pRB), DNA repair (MLH1, p53) and apoptosis (BAX, BCL2) associated proteins in the same set of samples. Results: Significant decrease in proliferation index and increase in apoptotic index was observed in post-therapy tumors compared to pre-therapy. Increase in the RB/pRB ratio, along with higher expression of RBSP3 and LIMD1 and lower expression of cMYC were observed in post-therapy tumours, while CCND1 and CDC25A remained unchanged. While MLH1 remained unchanged, p53 showed higher expression in post-therapy tumors, indicating inhibition of cell proliferation and induction of apoptosis. Increase in the BAX/BCL2 ratio was observed in post-therapy tumours, indicating up-regulation of apoptosis in response to therapy. Conclusions: Thus, modulation of the G1/S cell cycle regulatory proteins and apoptosis associated proteins might play an important role in tumour shrinkage due to NACT.

치과위생사의 의사소통에 관한 중요도 인식과 능력 차이분석 (Difference analysis of importance perception and ability of communication among dental hygienists)

  • 이선미;전미경
    • 한국치위생학회지
    • /
    • 제20권4호
    • /
    • pp.491-503
    • /
    • 2020
  • Objectives: The purpose of this study is to identify the importance of perception and communication ability among dental hygienists and provide evidence for the activation of communication education necessary to improve communication ability required in the actual dental field. Methods: A questionnaire survey was conducted on 227 members attending conservative education in 2020. Results: The following are mean scores of each area of communication according to importance: message conversion ability, 3.82 points; interpretation ability, 3.74 points; goal setting ability, 3.51 points; self-expression ability, 3.48 points; and role performance ability, 3.46 points. The ability was interpreted in the following order: interpretation ability, 3.61 points; message conversion ability, 3.56 points; role performance ability, 3.43 points; self-expression ability, 3.32 points; and goal setting ability, 3.10 points. The highest score in terms of importance of awareness was 4.27 points, the highest among interpretive abilities, that is, to 'listen carefully to know what the other person intends to say.' When it comes to communication skills, the highest score was 4.12 points for 'a nod or a facial expression of understanding while listening to each other.' Conclusions: In devel oping a training program related to communication for dental hygienists at the clinical site, the curriculum reflecting seven items that needs improvement should be revised; and through this, it is expected that dental hygienists' communication skills will be improved.

구스타브 클림트[Gustav Klimt] 작품의 조형성을 활용한 텍스타일 의상 디자인 연구 (A Study on Textile Fashion Design Using the Formativeness of the Works of Gustav Klimt)

  • 이인영;김수경
    • 복식
    • /
    • 제56권9호
    • /
    • pp.83-97
    • /
    • 2006
  • This Study is a thesis presenting handicrafty and decorative textile design as well as sensual fashion design through the works of Gustav Klimt. The result is as below; The formative qualities in the works of Klimt could be featured as decorativeness, sensuality and symbolism. First, the decorative inclination is prominent in the portrait and the effect is maximized with the golden mosaic shape expressed on the dress and the background influenced by the Byzantine. Second, the sensuality could be recognized directly from the women's pose or facial expression in the works of Klimt, otherwise appeared on the refined expression showed on the portraits of noble lady Third, to surpass the reality, Klimt preferred the symbolic expression, which can be shown on the patterns in the works addressing the themes such as the legends and myths, or figures of men and women expressed with the image of an abstract features of membrum. The development of the textile design is as fellowed. First, it analyzes and reconstitutes the formativeness and the element of design in the works of Klimt by the flow of the form factor. Second. it makes a pattern of a single nature through perception, analysis, description and drawing and expresses with realization of the characteristics of Klimt. Focusing on the handicrafts and decorativeness out of the latest trends and making the most use of the sensuality, the designed textiles were completed by the handicrafty techniques, used in the fashion design and completed as the design of sensual images. The textile development aims at minimizing the limit of design that can be caused by the absence of silhouette and detail, expanding the range of its creativity of fashion designs and creating fashion design high value-added.

안면비대칭을 동반한 골격성 III급 부정교합자에서 하악 과두의, 위치 형태와 이부 편위의 관계: cone-beam CT를 이용한 연구 (The relationship between condyle position, morphology and chin deviation in skeletal Class III patients with facial asymmetry using cone-beam CT)

  • 이보람;강대근;손우성;박수병;김성식;김용일;이경민
    • 대한치과교정학회지
    • /
    • 제41권2호
    • /
    • pp.87-97
    • /
    • 2011
  • 안면비대칭의 원인은 다양하며, 비대칭적 성장은 상악골과 하악골의 길이나 각도로 평가되어지곤 한다. 하지만 하악 과두의 비대칭적인 위치나 형태 또한 비대칭의 표현에 영향을 줄 것으로 생각된다. 따라서 본 연구는 하악 과두가 안면비대칭의 표현형인 이부 편위에 영향을 주는지에 대해 알아보고자 하였다. 50명의 골격성 III급 부정교합자 중 4 mm 이상의 menton point deviation을 보이는 비대칭군 30명, 4 mm 이하의 menton point deviation을 보이며 뚜렷한 안면비대칭이 없는 20명을 대칭군으로 하여, 두개저에 대한 좌우 하악 과두의 근원심적, 전후방적 위치를 평가하고, axial 평면에서 장축을 설정해 하악 과두의 최대 크기와 coronal plane에 대한 각도를 평가하였으며, sigmoid notch 상방 하악 과두의 길이와 부피를 측정하였다. 대칭군은 좌우 하악 과두의 위치, 각도, 크기, 길이, 부피에 있어 통계적인 차이가 없었다. 비대칭군은 이부 편위측과 비편위측으로 나누어볼 때, 이부 편위에 따른 좌우 하악 과두의 위치와 angulation 에서 통계적 차이는 없었으나, 하악 과두의 크기, 길이 및 부피에서는 비편위측 값이 컸고, 이부 편위량이 클수록 좌우 크기, 길이의 차이 및 편위측에 대한 비편위측 하악 과두의 부피비가 컸다. 또한 편위측에 대한 비편위측 하악 과두의 부피비가 이부 편위의 정도를 가장 잘 설명해주는 특성이었다. 이상의 결과를 통해 하악 과두의 비대칭이 안면비대칭의 발현에 영향을 주며, 비편위측 하악 과두가 편위측에 비해 크고 길다는 것을 알 수 있었다.

멀티 모달 인터페이스 기반 플레이어 얼굴 표정 분석 시스템 개발 (Expression Analysis System of Game Player based on Multi-modal Interface)

  • 정장영;김영빈;이상혁;강신진
    • 한국게임학회 논문지
    • /
    • 제16권2호
    • /
    • pp.7-16
    • /
    • 2016
  • 본 논문은 게임을 수행하는 개별 사용자의 특별한 행동 탐지를 효율적으로 수행하는 시스템을 제안한다. 제안하는 시스템은 일반적인 게임 플레이 환경에서 비 침투적 방법을 통해 포착 가능한 사용자 특징과 반복적인 패턴에 기반을 두어 특이 행동 탐지를 한다. 본 논문에서는 표정과 사용자 움직임과 같이 관찰되는 자료를 분석하기 위해 카메라를 사용했다. 게다가 반복 행동 탐지를 위해 게임 사용자로부터 멀티 모달 데이터를 사용하여 고차원의 행동 분석하기 위해 사용했다. 특이 행동 탐지에 효과적인 Support Vector Machine 을 사용했으며, 특이 행동 탐지 수행의 유용성을 평가하여 약 70% 확률로 탐지하는 이상 행동 탐지 재현율을 보였다. 또한 반복 행동 분석이 가능함을 보였다. 제안된 기법을 사용하였을 때 PC 환경에서 제공하는 모든 콘텐츠의 분석에 대한 피드백과 정량화하는데 도움이 될 수 있다.

음성 인터페이스와의 상호작용에서 AI 음성이 성별에 따른 사용자의 감성 만족도에 미치는 영향 (Moderating Effects of User Gender and AI Voice on the Emotional Satisfaction of Users When Interacting with a Voice User Interface)

  • 신종규;강준모;박영진;김상호
    • 감성과학
    • /
    • 제25권3호
    • /
    • pp.127-134
    • /
    • 2022
  • 본 연구의 목적은 음성 인터페이스(Voice User Interface, VUI)를 이루는 설계변수 중 사용자에게 긍정적인 감성을 유발하는 설계변수를 확인하는 것이다. 특히, 사용자의 성별과 설계변수의 조절 효과를 분석하여 VUI와 상호작용하는 동안 사용자가 만족할 수 있는 적절한 설계변수 수준을 찾아보고자 하였다. 선행연구를 통해 VUI에 사용되는 음성설계변수 중에서 사용자의 감성 만족도에 영향을 미칠 수 있는 설계변수 6가지를 도출하였다. 설계변수는 수준을 조절할 수 있도록 Wizard of OZ를 활용하여 VUI 시스템을 구현하였고, 6가지 설계변수의 수준을 조합하여 사용자와 음성으로 대화를 할 수 있도록 구성하였다. 실험에 참여한 사용자는 총 80명으로, 남/여 성비를 고려하여 각 40명씩 모집하였다. 사용자는 VUI와 주어진 임무에 대한 정답을 알아내기 위해 자연스러운 대화를 진행하며, 그동안의 얼굴표정 변화에 대한 이미지 데이터를 수집 및 표정 분석 소프트웨어를 통해 Valence 점수로 변환하였다. Valence 데이터를 기반으로 빈도 및 카이제곱 분석을 통해 확인한 결과, 사용자의 성별과 AI gender간의 조절효과가 유의한 것으로 나타났다. 이 결과는 VUI를 설계할 때 사용자의 성별 차이를 고려하는 것이 좋다는 것을 의미한다. 결론적으로, 남성 사용자의 경우 성인/남성/높은 톤의 음성, 여성 사용자의 경우 성인/여성/중간톤의 음성이 향후 만족스러운 인터랙션 구현을 위한 VUI 설계에 주요한 가이드라인인 것을 확인하였다. 본 연구의 결과를 통해 향후 다양한 인적 요소를 고려하여 UX 관점에서 인간-AI 상호작용을 보다 섬세하게 분석할 수 있을 것이며, 표정을 통한 실시간 감성 측정을 위한 기초연구로 활용될 수 있을 것이다.

조명 변화, 얼굴 표정 변화에 강인한 얼굴 인식 방법 (A Face Recognition Method Robust to Variations in Lighting and Facial Expression)

  • 양희성;김유호;이준호
    • 한국정보과학회논문지:소프트웨어및응용
    • /
    • 제28권2호
    • /
    • pp.192-200
    • /
    • 2001
  • 본 논문은 조명 변화, 표정 변화, 부분적인 오클루전이 있는 얼굴 영상에 강인하고 적은 메모리양과 계산량을 갖는 효율적인 얼굴 인식 방법을 제안한다. SKKUface(Sungkyunkwan University face)라 명명한 이 방법은 먼저 훈련 영상에 PCA(principal component analysis)를 적용하여 차원을 줄일 때 구해지는 특징 벡터 공간에서 조명 변화, 얼굴 표정 변화 등에 해당되는 공간이 최대한 제외된 새로운 특징 벡터 공간을 생성한다. 이러한 특징 벡터 공간은 얼굴의 고유특징만을 주로 포함하는 벡터 공간이므로 이러한 벡터 공간에 Fisher linear discriminant를 적용하면 클래스간의 더욱 효과적인 분리가 이루어져 인식률을 획기적으로 향상시킨다. 또한, SKKUface 방법은 클래스간 분산(between-class covariance) 행렬과 클래스내 분산(within-class covariance) 행렬을 계산할 때 문제가 되는 메모리양과 계산 시간을 획기적으로 줄이는 방법을 제안하여 적용하였다. 제안된 SKKUface 방법의 얼굴 인식 성능을 평가하기 위하여 YALE, SKKU, ORL(Olivetti Research Laboratory) 얼굴 데이타베이스를 가지고 기존의 얼굴 인식 방법으로 널리 알려진 Eigenface 방법, Fisherface 방법과 함께 인식률을 비교 평가하였다. 실험 결과, 제안된 SKKUface 방법이 조명 변화, 부분적인 오클루전이 있는 얼굴 영상에 대해서 Eigenface 방법과 Fisherface 방법에 비해 인식률이 상당히 우수함을 알 수 있었다.

  • PDF

A Study on the Image of Male Flight Attendant on Customer Satisfaction

  • Kim, Min-Ji;Park, Hye-Yoon;Park, So-Yeon
    • 유통과학연구
    • /
    • 제15권8호
    • /
    • pp.37-46
    • /
    • 2017
  • Purpose - Many studies have shown the effects of the external images of female flight attendants on the customers' satisfaction. Recently, the perception of male flight attendants has become more important and positive, and airlines are hiring a significant number of male flight attendants every year. Due to the lack of research on the male flight attendant, however, the images of male flight attendants were investigated for this study. Research, design, data and methodology - Using survey techniques with 204 respondents, this study used analytical data based their resulting analysis. Results - The study examined whether the image of the male flight attendant affects the cognitive and emotional perceptions of customers. The focus of the present study is the external image of the male flight attendant, and the following image-component divisions were formed: hairstyle, body type, uniform, speech, and facial expression. Conclusions - The study purpose sought to determine whether the image of the male flight attendant exert effects on the emotional and cognitive images of airlines, and if these images have a positive effect on the customers' satisfaction and loyalty for an airline, so that airlines can use the external image of the male flight attendant to help with its own image reinforcement.