• 제목/요약/키워드: Lip Extraction

검색결과 88건 처리시간 0.028초

Adaptive Background Modeling Considering Stationary Object and Object Detection Technique based on Multiple Gaussian Distribution

  • Jeong, Jongmyeon;Choi, Jiyun
    • 한국컴퓨터정보학회논문지
    • /
    • 제23권11호
    • /
    • pp.51-57
    • /
    • 2018
  • In this paper, we studied about the extraction of the parameter and implementation of speechreading system to recognize the Korean 8 vowel. Face features are detected by amplifying, reducing the image value and making a comparison between the image value which is represented for various value in various color space. The eyes position, the nose position, the inner boundary of lip, the outer boundary of upper lip and the outer line of the tooth is found to the feature and using the analysis the area of inner lip, the hight and width of inner lip, the outer line length of the tooth rate about a inner mouth area and the distance between the nose and outer boundary of upper lip are used for the parameter. 2400 data are gathered and analyzed. Based on this analysis, the neural net is constructed and the recognition experiments are performed. In the experiment, 5 normal persons were sampled. The observational error between samples was corrected using normalization method. The experiment show very encouraging result about the usefulness of the parameter.

발화구간 검출을 위해 학습된 CNN 기반 입 모양 인식 방법 (Lip Reading Method Using CNN for Utterance Period Detection)

  • 김용기;임종관;김미혜
    • 디지털융복합연구
    • /
    • 제14권8호
    • /
    • pp.233-243
    • /
    • 2016
  • 소음환경에서의 음성인식 문제점으로 인해 1990년대 중반부터 음성정보와 영양정보를 결합한 AVSR(Audio Visual Speech Recognition) 시스템이 제안되었고, Lip Reading은 AVSR 시스템에서 시각적 특징으로 사용되었다. 본 연구는 효율적인 AVSR 시스템을 구축하기 위해 입 모양만을 이용한 발화 단어 인식률을 극대화하는데 목적이 있다. 본 연구에서는 입 모양 인식을 위해 실험단어를 발화한 입력 영상으로부터 영상의 전처리 과정을 수행하고 입술 영역을 검출한다. 이후 DNN(Deep Neural Network)의 일종인 CNN(Convolution Neural Network)을 이용하여 발화구간을 검출하고, 동일한 네트워크를 사용하여 입 모양 특징 벡터를 추출하여 HMM(Hidden Markov Mode)으로 인식 실험을 진행하였다. 그 결과 발화구간 검출 결과는 91%의 인식률을 보임으로써 Threshold를 이용한 방법에 비해 높은 성능을 나타냈다. 또한 입모양 인식 실험에서 화자종속 실험은 88.5%, 화자 독립 실험은 80.2%로 이전 연구들에 비해 높은 결과를 보였다.

Pattern of lip retraction according to the presence of lip incompetence in patients with Class II malocclusion

  • Mei Ling Fang;Sung-Hwan Choi;Yoon Jeong Choi;Kee-Joon Lee
    • 대한치과교정학회지
    • /
    • 제53권4호
    • /
    • pp.276-285
    • /
    • 2023
  • Objective: The aim of this retrospective study was to compare changes in hard tissue and soft tissue after the four first premolars were extracted with anterior teeth retraction according to the presence or absence of lip incompetence. Methods: Patients who underwent the four first premolars were extracted with anterior teeth retraction were divided into competent (n = 20) and incompetent lip (n = 20) groups. Cephalometric measurements for hard tissue and soft tissue changes were performed pre-treatment and post-treatment. Results: In the competent group, the upper and lower lips retreated by 2.88 mm and 4.28 mm, respectively, and in the incompetent group by 4.13 mm and 5.57 mm, respectively; the differences between the two groups were significant (p < 0.05). A strong positive correlation between retraction of the upper lip and upper incisors was observed in both groups (p < 0.05), whereas a correlation between retraction of the lower lip and lower incisors was only found in the incompetent group. A simple linear regression analysis showed that the pattern of lip retraction following the retraction of the anterior teeth was more predictable in the incompetent group than in the competent group. Conclusions: These findings suggest that the initial evaluation of lip incompetence in patients with skeletal Class II is essential for the accurate prediction of the soft tissue changes following retraction of the anterior teeth in premolar extraction treatment. Therefore, sufficient explanation should be provided during patient consultations.

치조성 양악 전돌 환자에서 컴퓨터를 이용한 치료 결과 예측의 정확성 (Comparison of computer-based treatment prediction with true results in bimaxillary protrusion cases)

  • 이리나;임용규;이동렬
    • 대한치과교정학회지
    • /
    • 제32권3호
    • /
    • pp.155-163
    • /
    • 2002
  • 치조성 양악 전돌 증례에서 컴퓨터 시뮬레이션을 이용한 연조직 측모의 치료 결과 예측의 객관적 정확성을 상, 하악 제 1소구치 발거를 통해 교정치료를 받은 21명의 성인 여성을 대상으로 $Quick\;Ceph\;Image\;Pro^{TM}\;&\;Quick Eeph\;2000^{TM}$ 을 이용하여 조사, 평가하였다. 치료 전 측모 두부방사선 규격사진 투사도에서 경조직 이동량을 계측하고 Quick Ceph system 상에서 경조직을 동일한 양 이동시켜 컴퓨터시뮬레이 션을 위한 기준으로 삼았다. 이후 프로그램을 통해 연조직 변화를 시뮬레이션하고, 이 자료와 실제 치료 결과로 얻어진 연조직 계측 값을 측정하여 비교해 봄으로써 치료 결과 예측에 대한 정확도를 확인하고 임상에의 적용시 고려할 사항을 알아보았다. 시뮬레이션 결과 계측 항목의 수평 성분은 실제 치료 결과보다 작게, 수직 성분은 치료 결과보다 크게 예측하는 것으로 나타났으며 치료시 의 후방 견인은 실제보다 확대되어 나타나는 경 향을 보였다. 상악에서는 항목간 예측 오차의 방향이 일정하여 예측치가 실제보다 더 후방 이동되어 나타났으나, 하악에서는 증례간 차이가 컸다 Upper Lip Length는 짧게, Upper Vermilion Length는 길게 예측하여 시뮬레이션시 상순이 말려 보이는(rolling)효과를 확인할 수 있었으며 하순에서도 유사한 성향이 나타났으나 상순에 비해서 약하게 나타났다.

성인 구순구개열환자의 교정치료 전략 (The orthodontic strategies for adult patients of cleft lip and palate)

  • 김재훈
    • 대한치과의사협회지
    • /
    • 제53권7호
    • /
    • pp.450-456
    • /
    • 2015
  • Even the adult cleft lip and palate patient who has not had timely treatment during the growth period, can be treated with orthodontic treatment without the necessity of orthognathic surgery if only the patient is treated under correct diagnosis and fitting appliances. Initially, maxillary arch form is established by constructing trifocal circles. Posterior region can be expanded and derotated laterally with pentahelix and anterior teeth are aligned with Tiggle brackets and "ㄷ"-shaped spring. Thereafter, anterior and posterior regions are consolidated. Mandibular intercanine width should be adjusted to maxillary intercanine width which was unavoidably reduced. Mandibular anterior tooth extraction will be helpful to attain proper mandibular intercanine width and better anterior dental showing.

Lip Bumper를 이용한 치료의 성공과 실패 (THE SUCCESS AND FAILURE OF TREATMENT BY USING LIP BUMPER)

  • 맹명호;김종빈;김종수;김용기
    • 대한소아치과학회지
    • /
    • 제26권3호
    • /
    • pp.507-512
    • /
    • 1999
  • 혼합치열기의 소아환자의 경미한 하악 전치부의 총생을 해결하는 문제와 하악 제 2 유구치의 조기 상실로 인한 하악 제 1 대구치의 근심경사 그리고 이에 따른 제 2 소구치의 맹출 공간 부족 등을 해소하기 위한 여러 가지의 방법들이 시도되어왔지만 저마다 그 술식의 적용범위나 방법 등에는 많은 어려움 들이 있어왔다. 이 연구의 목적은 이런 선택의 어려움을 가만하여 실제 임상에서 보다 간편하고 환자의 불편감을 줄여줄 수 있는 한 방법으로 Lip Bumper를 이용한 술식을 소개하고 그 적용례를 통하여 성공과 실패 사례들을 소개함으로써 임상가들에게 보다 유익한 정보를 주기 위함이다.

  • PDF

SVM 기법에 기초한 청각장애인의 영어모음 발음을 위한 음성 인식 및 입술형태 특징 추출 (Speech Recognition and Lip Shape Feature Extraction for English Vowel Pronunciation of the Hearing - Impaired Based on SVM Technique)

  • 이근민;한경임;박혜정
    • 재활복지공학회논문지
    • /
    • 제11권3호
    • /
    • pp.247-252
    • /
    • 2017
  • 이 연구의 목적은 SVM 기술에 근거한 시각 보조기에 주로 의존하는 청각 장애인을 위한 영어 모음 발음에 대한 시각 교습 방법을 제안하는데 있다. 귀로 듣기 어려운 소리로부터 SVM 기술을 사용하여 소리 특징을 추출함으로써, 각 모음의 입술 모양이 추출되었다. 모음에 대한 입술 모양의 세련미는 언어 학습자가 발음기의 움직임을 눈으로 쉽게 볼 수 있다는 점에서 유리하며, 청각 장애인을 위한 영어 모음을 학습하고 가르치는 데 유용할 것이다.

Modified-MECC를 이용한 음성 특징 파라미터 추출 방법 (Method of Speech Feature Parameter Extraction Using Modified-MFCC)

  • 이상복;이철희;정성환;김종교
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2001년도 하계종합학술대회 논문집(4)
    • /
    • pp.269-272
    • /
    • 2001
  • In speech recognition technology, the utterance of every talker have special resonant frequency according to shape of talker's lip and to the motion of tongue. And utterances are different according to each talker. Accordingly, we need the superior moth-od of speech feature parameter extraction which reflect talker's characteristic well. This paper suggests the modified-MfCC combined existing MFCC with gammatone filter. We experimented with speech data from telephone and then we obtained results of enhanced speech recognition rate which is higher than that of the other methods.

  • PDF

노화에 따른 발화 시 입술움직임의 변화: 이중모음을 중심으로 (Change in lip movement during speech by aging: Based on a double vowel)

  • 박희준
    • 말소리와 음성과학
    • /
    • 제13권1호
    • /
    • pp.73-79
    • /
    • 2021
  • 본 연구에서는 노화에 따른 발화 시 입술 움직임의 변화를 알아보고자 하였다. 연구대상으로 평균 69세의 노인 여성 15명과 평균 22세의 젊은 여성 15명을 선정하였다. 입술 움직임을 측정하기 위해 이중모음 발화시 입술 움직임을 녹화하여 스틸 이미지로 저장한 다음 입술의 움직임이 최소인 부분과 최대한 길이를 영상분석 소프트웨어를 이용하여 pixel 단위로 수작업으로 분석하여 비교하였다. 임상적 활용성을 위해 자동화 알고리즘을 적용하여 소프트웨어를 제작했으며 수작업의 결과와 비교하였다. 연구결과 노년층의 경우 청년층에 비해 이중모음 과제에서 입술의 가로 및 세로의 길이 범위가 작은 것을 알 수 있었다. 수작업과 자동화 방법의 상관관계를 측정한 결과 강한 정적 상관관계가 나타나 두 방법 모두 입술 윤곽 추출 시 유용함을 알 수 있었다. 이상의 결과를 바탕으로 노화가 진행됨에 따라 발화 시 입술의 범위가 작아지는 것을 알 수 있었다. 따라서 노화가 진행되기 전 간단하게 입술의 움직임을 측정하여 본인의 상태를 모니터링하고 입술 범위를 유지할 수 있는 운동을 실시한다면 노화로 인한 발음 문제를 예방할 수 있을 것이다.

상악 편악 소구치발치와 양악 소구치발치에 의한 교정치료 전후의 측모 두부방사선계측법적 비교 연구 (A comparative study of pre- and post-treatment cephalometric measurements: Upper premolar extraction only vs. upper/lower premolar extraction groups)

  • 김영석;김수정;강승구;이영준
    • 대한치과교정학회지
    • /
    • 제37권6호
    • /
    • pp.421-431
    • /
    • 2007
  • 상악 편악 소구치발치에 의한 교정치료는 임상적으로 상당히 많이 행해지고 있는 현실이지만 임상적 활용도에 비하여 그 보고는 희귀하다. 본 연구는 선택적 교정치료로 행해지는 상악 편악 소구치발치에 의한 교정치료 시 치료전후의 상, 하악 절치위치 및 입술위치 변화를 양악 소구치발치에 의한 교정치료의 치료 전후와 비교, 분석하여 편악발치에 의한 교정치료의 진단적 지침을 제시하고 치료 종료 후의 치료결과를 알아보고자 시행되었다. 최근에 교정치료가 종료된 환자 중에서 초진 시 수평피개량이 7 mm 이상을 보이는 증례 중 성공적으로 치료되었다고 판단되는 40증례를 선정하여, 교정치료의 목적으로 상악 제1소구치만을 발치하여 치료한 군(이하 편악발치군; Group 1, 20증례)과 상, 하악 제1소구치를 발치하여 치료한 군(이하 양악발치군; Group 2, 20증례)으로 나누어 치료 전후의 측모 두부방사선 사진을 채득하여 연구재료로 사용하였다. 연구결과 초진 시 편악발치군에서 양악발치군과 비교하여 하악 절치의 위치는 순측경사의 정도가 덜 하였으며 하순의 돌출도도 심하지 않았다. 치료종료 시 편악발치군에서 양악발치군과 비교하여 하악 절치의 위치를 제외한 모든 항목에서 두 군과의 차이는 관찰되지 않았다. 치료 전후의 변화량 비교에서 상, 하악 절치의 이동량은 양악발치군에서 많게 관찰되었으며 하악 절치의 견인에 따라 하순의 돌출도 감소의 양도 양악발치군에서 크게 관찰되었다. 상순의 위치는 두 군간의 차이가 관찰되지 않았다. 큰 수평피개를 갖는 증례에서 적절한 발치 선택을 위한 진단정보의 수집에 있어 상악 절치의 위치 및 상순의 돌출도는 충분한 정보를 제공하지 않았다. 하악 절치의 위치와 하순의 돌출량은 큰 수평피개를 갖는 증례에 있어서 편악발치 혹은 양악발치를 결정하기 위한 적절한 진단적 근거를 제시하였다. 큰 수평피개를 갖고 있는 환자 중 하악 절치의 순측경사가 심하지 않으며 하순의 돌출이 심하지 않은 안모를 갖고 있는 증례의 경우 편악발치에 의해 좋은 치료결과를 얻을 수 있었다.