• Title/Summary/Keyword: 수어 인식

Search Result 17, Processing Time 0.027 seconds

Recognition of Sign Language using LSTM (LSTM을 활용한 수어 단어 인식)

  • Jung, Eui-Son;Jo, Dong-Hee;Park, Se-Hee;Gang, Hyeon-Ah;Park, Seung-Bo
    • Proceedings of the Korean Society of Computer Information Conference
    • /
    • 2022.01a
    • /
    • pp.287-288
    • /
    • 2022
  • 기존 수어 통역 서비스의 문제점들을 보완하고 대체할 수 있는 수단이 필요하다. 본 논문에서는 LSTM을 활용한 수어 단어 번역을 제안한다. 데이터는 총 단어의 개수 56개를 사람 16명으로, 그리고 관측 방향을 5개로 나누어 총 4480개의 단어별 영상을 사용하였다. 학습 횟수 250회 검증 정확도는 78%에 도달하였다.

  • PDF

Developing a mobile application serving sign-language to text translation for the deaf (청각 장애인을 위한 수어 영상-자연어 번역 서비스 및 모바일 어플리케이션 구현)

  • Cho, Su-Min;Cho, Seong-Yeon;Shin, So-Yeon;Lee, Jee Hang
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2021.11a
    • /
    • pp.1012-1015
    • /
    • 2021
  • Covid-19 로 인한 마스크 착용이 청각장애인들의 소통을 더 어렵게 하는 바, 제 3 자의 도움 없이 쌍방향 소통을 가능하게 하는 서비스의 필요성이 커지고 있다. 이에 본 논문은 소통의 어려움을 겪는 청각장애인과 비청각장애인을 위한 쌍방향 소통 서비스에 대한 연구와 개발 과정, 기대 효과를 담는다. 서비스는 GRU-CNN 하이브리드 아키텍처를 사용하여 데이터셋을 영상 공간 정보와 시간 정보를 포함한 프레임으로 분할하는 영상 분류 기법과 같은 딥 러닝 알고리즘을 통해 수어 영상을 분류한다. 해당 연구는 "눈속말" 모바일 어플리케이션으로 제작 중이며 음성을 인식하여 수어영상과 텍스트로 번역결과를 제공하는 청각장애인 버전과 카메라를 통해 들어온 수어 영상을 텍스트로 변환하여 음성과 함께 제공하는 비청각장애인 버전 두 가지로 나누어 구현한다. 청각장애인과 비장애인의 쌍방향 소통을 위한 서비스는 청각장애인이 사회로 나아가기 위한 가장 기본적인 관문으로서의 역할을 할 것이며 사회 참여를 돕고 소통이라는 장벽을 넘어서는 발돋움이 될 것이라 예측된다.

Sign Language Translation System Development Using MediaPipe (MediaPipe를 활용한 수어 번역 시스템 개발)

  • Kim, Kyung-Min;Song, Mi-Hwa
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2022.11a
    • /
    • pp.684-686
    • /
    • 2022
  • 다양한 언어로 소통하고 있는 우리는 다른 언어와 교류하기 위해 번역, 통역의 존재가 필수가 되기도 한다. 하지만 음성언어를 사용하지 않는 즉, 손으로 언어를 표현하는 수어를 번역하는 통역의 존재는 아직 실현되지 않았다. 이에 본 논문에서는 MediaPipe와 OpenCV 라이브러리를 이용하여 손의 형태를 인식하고 CNN 알고리즘을 통한 텍스트 데이터화 하여 수어 동작을 학습시켜 이를 번역시켜주는 시스템을 연구한다. 이를 통해 공공기관을 이용함에 불편함을 줄이고, 농인의 의사를 보다 빠르게 파악할 수 있도록 도와주는 번역 시스템 제작하는 것에 목적이 있다.

Interactive Communication Web Service in Medical Institutions for the Hearing Impaired (청각 장애인을 위한 의료 기관에서의 쌍방향 소통 웹페이지 개발)

  • Kim Doha;Kim Dohee;Song Yeojin
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2023.11a
    • /
    • pp.1047-1048
    • /
    • 2023
  • 청각장애인은 수화 언어, 즉 수어를 통해 의사소통한다. 따라서 본 논문에서는 의료 상황에서 청각 장애인이 겪는 소통의 어려움을 해결하기 위해 의료 상황 중심의 수어 데이터셋을 구축한 뒤, R(2+1)D 딥러닝 모델을 이용해 수어 동작을 영상 단위로 인식하고 분류할 수 있도록 하였다. 그리고 이를 Django를 이용한 웹 사이트로 만들어 사용할 수 있게 하였다. 이 웹 페이지는 청각장애인 개인 뿐만 아니라 의료 사회 전반적으로 긍정적인 효과를 줄 것으로 기대한다.

Types of Subjective Perception of Hearing-Impaired Persons on Sign Language Interpretation (수화언어통역서비스에 대한 청각장애인의 주관적 인식 유형)

  • Oh, Soo-Kyung;Song, Mi-Yeon
    • 재활복지
    • /
    • v.21 no.4
    • /
    • pp.1-31
    • /
    • 2017
  • This study identities various types of subjective perception of hearing-impaired persons on sign language interpretation using Q-methodology in an attempt to explore ways for developing more useful sign language interpretation services for them. For this purpose, 35 statements are extracted based on literatures and in-depth interviews and Q-classification is conducted for 20 interviewees. The results identify a common perception on the provision of sign language interpreter to frequently used institutions of hearing-impaired persons. They also derive three distinguished types of perception: seeking specialization of sign language interpretation, seeking traditional sign language interpretation services and seeking expansion and improvement of sign language interpretation services. Based on the results, the study suggests residence of sign language interpreters in public facilities, improvements of qualification system and education and training courses, specialization by field and improvement of the practice of sign language interpretation services, provision of customized services to the elderly and use of sign language interpreters reflecting the needs of the users.

Study on the Guarding System in the latter "Choson" era (조선후기 호위제도의 고찰)

  • Lee, Sung-Jin
    • Korean Security Journal
    • /
    • no.16
    • /
    • pp.229-241
    • /
    • 2008
  • he guarding system of the "Choson" era is completed by the Gyeongguk-daejeon(an administrative canon) at the kings "Sejong" and "Yejong", and it is supplemented at the King "Seongjong". "Geum-gun" is composed of "Naegeum-wi", "Gyeombok-sa", "Wirim-wi" and "Jeongro-wi" in the period before the Japanese Aggression of Korea in 1952, and in the period after the aggression war, the organization of the "Geum-gun" is changed repeatedly according to circumstances in the period after the aggression. They("Geum-gun") devote themselves to the protection of kings and the capital defense in the first period of the "Choson" era. The most important change of the "Geum-gun" is the practice of five military units system, three military units of them, "Hunryeon-dogam", "Eoyeong-cheong" and "Geumwi-yeong", take charge of the guard of kings and the capital defense, and "Chongyung-cheong" and "Sueo-cheong" take charge of the defense of the outer areas of the capital region with key positions located at "Namhan-sanseong" and "Bukhan-sanseong"(mountain fortress Walls). The function of the "Geum-gun" is extended through the aggressions, therefore the number of soldiers is increased greatly. The guarding system for the country and its royal family is frequently changed according to the improvement of the people's position with themselves-awakening and their understanding of realities. The reorganization of the "Geum-gun" including "Howi-cheong", "Geumgun-cheong", "Sukwi-so" and "Jangyong-yeong" is unavoidable to strengthen the royal rights that are weaken by deposing the king "Injo". The standing of the existing organizations is changed many times with financial problems. The enthronement of the king "Jeongjo" is a great epoch in the change of the guarding system.

  • PDF

Review of Fish Name on the Fishes of the Family Mugilidae in Korea and Resource Utilization (우리나라 숭어과 어류의 어명 및 자원 활용에 대한 고찰)

  • Ko, Eun Young;Park, Jong Oh;Lee, Kyoung Seon
    • Journal of Marine Life Science
    • /
    • v.4 no.2
    • /
    • pp.96-105
    • /
    • 2019
  • The mugilidae fishes are common euryhaline species that live in coastal marine waters to freshwater areas. The taxonomy and nomenclature of the mugilidae fishes still remain unresolved because of their morphological similarities. Among the mugilidae fishes, most commonly consumed in Korea, are grey mullet (Mugil cephalus) and red lip mullet (Chelon haematocheilus). It is generally called 'mullet' without distinguishing between two mullets. Therefore, the aim of this study is to examine the scientific names and common names of mullet species used in Korea from the domestic journals and Korean old documents. The scientific name of grey mullet is M. cephalus, but that of redlip mullet is C. haematocheilus. But the genus of redlip mullet is still mixed with Chelon, Mugil, and Liza. The standard name of two mullet is not distinguished in the Korean dictionary, but they were clearly distinguished in the Japanese, English, and Chinese dictionaries. In the ancient Korean references, the mullet was called 'Chieo' or 'Sueo'. In most of the old literature, the distinction between grey mullet and redlip mullet is not clear. However, in Jasaneobo, it was written separately from grey mullet and redlip mullet, and attaching "ga" was different from now. The Korean standard name of redlip mullet is 'gasungeo', however, the fishermen in Jeollado and Gyoungsangdo call it 'chamsungeo'. Considering the negative perception of 'ga' character, it is proposed to change 'cham(眞)' instead of 'ga(假)' to improve economic value of red lip mullet.