• Title/Summary/Keyword: 청각정보처리

Search Result 148, Processing Time 0.032 seconds

Modelling of the Information Process with Visual and Audio in Human Brain (두뇌의 시$\cdot$청각 정보처리 과정의 모델링)

  • 김성주;서재용;조현찬;김성현;전홍태
    • Proceedings of the Korean Institute of Intelligent Systems Conference
    • /
    • 2002.05a
    • /
    • pp.187-190
    • /
    • 2002
  • 인간의 두뇌에서는 갖가지 다양한 형태의 입력들을 이용하여 동시에 여러 가지의 판단, 추론 및 기억 등의 기능을 수행한다 이러한 이유로 인간 두뇌는 거대한 지능형 정보처리기라고 할 수 있다 현재 정보처리 메커니즘은 다양한 형태로 발달되고 있지만 그 중에서도 지능형 정보처리 메커니즘으로는 소프트 컴퓨팅 기법을 응용한 것이 대부분이다. 본 논문에서는 소프트 컴퓨팅 기법을 이용하여 두뇌에서의 시각, 청각의 정보처리 과정을 하나의 구조로 모델링하고자 한다. 시각에서의 정보와 청각에서의 정보는 각기 다른 모듈에서 처리되는 방식을 취하고 있으며, 최종적으로 두 감각 정보를 이용한 처리가 가능하도록 모듈형태의 전체적인 구조를 지니고 있다. 상이한 두 가지의 정보를 동시에 처리하는 과정을 모델링함으로써 복잡한 문제의 해결 및 다양한 경우에 대한 고려를 수행하여 인간 두뇌 모델링의 기초를 마련하고자 한다.

  • PDF

Developing a mobile application serving sign-language to text translation for the deaf (청각 장애인을 위한 수어 영상-자연어 번역 서비스 및 모바일 어플리케이션 구현)

  • Cho, Su-Min;Cho, Seong-Yeon;Shin, So-Yeon;Lee, Jee Hang
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2021.11a
    • /
    • pp.1012-1015
    • /
    • 2021
  • Covid-19 로 인한 마스크 착용이 청각장애인들의 소통을 더 어렵게 하는 바, 제 3 자의 도움 없이 쌍방향 소통을 가능하게 하는 서비스의 필요성이 커지고 있다. 이에 본 논문은 소통의 어려움을 겪는 청각장애인과 비청각장애인을 위한 쌍방향 소통 서비스에 대한 연구와 개발 과정, 기대 효과를 담는다. 서비스는 GRU-CNN 하이브리드 아키텍처를 사용하여 데이터셋을 영상 공간 정보와 시간 정보를 포함한 프레임으로 분할하는 영상 분류 기법과 같은 딥 러닝 알고리즘을 통해 수어 영상을 분류한다. 해당 연구는 "눈속말" 모바일 어플리케이션으로 제작 중이며 음성을 인식하여 수어영상과 텍스트로 번역결과를 제공하는 청각장애인 버전과 카메라를 통해 들어온 수어 영상을 텍스트로 변환하여 음성과 함께 제공하는 비청각장애인 버전 두 가지로 나누어 구현한다. 청각장애인과 비장애인의 쌍방향 소통을 위한 서비스는 청각장애인이 사회로 나아가기 위한 가장 기본적인 관문으로서의 역할을 할 것이며 사회 참여를 돕고 소통이라는 장벽을 넘어서는 발돋움이 될 것이라 예측된다.

Development of Sound Information Visualization Glasses for the Hearing Impaired (청각장애인을 위한 사운드 정보 시각화 안경의 개발)

  • Lee, Gye-hwan;Kim, In-hyun;Lee, Jun-ho;Lee, Jeong-hoon;Hwang, Kwang-il
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2018.10a
    • /
    • pp.656-659
    • /
    • 2018
  • 통계적으로 일반인보다 청각장애인의 교통 사고율이 높은 것으로 나타나는데, 이는 청각 장애로 대표되는 차량을 포함한 위험 요소를 인식하기 힘든 상태나 조건에서 기인한다. 자동차가 접근하는 등의 소리를 듣지 못한다는 것은 결국 어떠한 위치에 위험요소가 존재하는지 인지하지 못함에 따라 사고로 이어질 가능성이 존재함을 의미하는데 이러한 문제점을 개선함과 동시에 대화중인 사람의 목소리를 시각화하여 정보를 제공함으로써 청각장애인으로 하여금 더 안전하고 쾌적한 삶을 누리게 하는 것이 청각장애인을 위한 사운드 정보 시각화 안경의 개발 목적이다. 위와 같은 배경을 통해 딥 러닝 기술에 기반하여 분류 과정을 거친 소리 정보의 판별을 통해 위험 요소를 인식한 후 시각화 하여 정보를 제공하는 디바이스를 제안한다.

A Basic Study for the Development of Multidisciplinary Intervention Guide Map of Auditory Processing Disorders (청각처리장애의 다학문적 중재 안내도 개발을 위한 기초 연구)

  • Kim, Soo-Jin
    • Journal of Digital Convergence
    • /
    • v.13 no.12
    • /
    • pp.259-268
    • /
    • 2015
  • People with auditory processing disorders(APD) do not exactly understand what they hear with normal hearing levels because of difficulties in the processing of auditory information in auditory nervous system. The purposes of this study are to investigate intervention strategies suggested by current literatures and to develop a guide map for APD intervention. The problem based intervention strategies are customized to the specific deficits of a subtype of Buffalo model and Bellis/Ferre model and general intervention strategies are recommended with compensatory strategy, auditory training, environmental modification and so on. Multidisciplinary team should determine and provide various intervention strategies to improve auditory capabilities of a child with APD intensively and persistently. APD intervention guide map is organized with four steps. It helps clinicians and teachers related with the intervention of APD find appropriate intervention strategies and process in order to reduce difficulties of a child with APD and a suspected APD.

Attached Communication Device for the Hearing-Impaired (청각장애인용 부착형 커뮤니케이션 디바이스)

  • Byeon, Hye-Sung;Oh, Tae-Jin;Jung, Min-Gyu;Jung, Yeong-Jin;Kim, Woongsup
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2019.10a
    • /
    • pp.338-341
    • /
    • 2019
  • 본 설계는 청각장애인을 위한 기술이다. 청각장애인은 일상생활에서 음성을 통한 의사소통이 어렵기 때문에, 비장애인과의 정보 격차를 줄이기 위한 '안경 부착형 커뮤니케이션 디바이스'를 개발하였다. Speech-To-Text 기술을 적용하여 음성이 인식되면 텍스트로 변환하여 출력한다. 따라서 음성에 대한 정보를 텍스트로 볼 수 있게끔 구현하였다. 또한 청각장애인은 소리로 파악할 수 있는 위험 요소에 노출되어 있다. 혹시 모를 안전사고에 빠르게 대처하고자 현재 위치 정보를 보호자에게 전송하는 기능을 구현하였다.

Development of IoT-based Lighting System for the Hearing impaired (청각장애인을 위한 IoT 기반 조명 시스템 개발)

  • Son, Hyun-ji;Lee, So-jung;Han, Min-seo;Han, Hye-jin;Kim, Sung-wook
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2022.11a
    • /
    • pp.968-970
    • /
    • 2022
  • 일반적으로 가정 내에서 발생하는 안전 사고의 비율은 비장애인에 비해 청각장애인이 높다. 이는 외부인에게 도움을 받을 수 없는 상황에서 청각장애인 스스로 위험상황에 대한 소리를 인지하지 못하기 때문이다[1]. 본 연구에서는 이러한 문제를 해결하기 위해 시각적 효과 또는 진동 신호를 통해 청각장애인들에게 사고 상황 인지를 돕는 시스템을 제안한다. 현재 상용 제품의 경우는 청각장애인이 스마트기기를 소지하고 있을 때만 알림을 인지할 수 있기 때문에 긴급 상황에서 효과가 떨어질 수 있다. 따라서 제안 시스템에서는 어플리케이션 알림과 함께 건물내 전등 색상에 변화를 주는 서비스를 개발하여 스마트 기기를 소지하지 않는 상황에서도 위험상황에 대한 즉각적인 인지를 통해 위험에 대처할 수 있도록 한다. 소리를 시각화하는 것이 본 연구의 핵심 방법론이며 이를 위해 Convolutional Neural Network 모델과 라즈베리파이를 활용하였다.

Development of Auxiliary Lights for Hearing Impaired Drivers (청각 장애인 운전자를 위한 보조등 개발)

  • Do-Yeo Kim;Young-Jun Ahn;Gyem-Bi Cho;Chan-Yang Han;Min-Seo Choi
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2023.11a
    • /
    • pp.534-535
    • /
    • 2023
  • 청각 장애인 운전자를 위한 보조등을 개발하고자 한다. 청각 장애인들은 운전할 때 다른 차의 경적이나 구급차, 소방차와 같은 긴급 자동차의 사이렌 소리를 듣지 못한다. LED 기술과 아두이노를 활용하여 소리의 발생 위치와 종류를 시각적으로 표시하며, 진동으로 알림을 제공해 주고자 한다. 이를 통해 다른 운전자와의 오해를 줄이고 운전 중의 시각 집중도를 높일 수 있을 것이다. 이로써, 청각 장애인들이 운전 시 마주치는 애로사항을 완화할 수 있을 것이다. 이 제품은 다양한 차종에 적용할 수 있을 것이며, 청각 장애 운전자에게 자유로운 운전과 도로 안전을 제공할 것으로 기대된다.

mutual Information Flow in Brain by Auditory Stimuli (청각자극을 받은 두뇌에서의 상호정보이동)

  • 조덕연;이유정;김응수
    • Proceedings of the Korean Society for Emotion and Sensibility Conference
    • /
    • 1999.03a
    • /
    • pp.285-289
    • /
    • 1999
  • 본 논문에서는 고차 뇌 정보처리연구의 일환으로서, 통신 및 정보이론 분야에서 신호간의 확률적 상관성을 나타내는 지표로 많이 활용되는 상호정보(mutual information)를 이용하여 청각자극을 받은 뇌파의 정보이동(information flow)을 분석하였다. 청각자극에 따른 뇌파의 정보이동을 분석한 결과, 자극에 따른 각 상태에서의 확률적 관계의 흐름에 차이가 있음을 볼 수 있었다.

  • PDF

Prevention of sudden death of newborns for deaf parents (청각장애인 부모를 위한 신생아 돌연사 방지 시스템)

  • Jeon, Su-Hyeon;Kim, Jong-Won;Park, Ju-Hyeon;Woo, Ja-Young;Kim, Jin-Soo
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2021.11a
    • /
    • pp.1282-1285
    • /
    • 2021
  • 만 1세 이하의 영유아가 사망하는 영아 돌연사 증후군은 매년 지속적으로 발생하고 있다. 그 중에서도 특히 질식사는 높은 비중을 차지한다. 이러한 위험이 다가오면 신생아는 울음으로 도움을 요청하지만, 청각장애인 부모의 경우에는 즉각적인 대응이 불가능하다. 따라서 청각장애인 부모의 귀가 되어주어 신생아의 다양한 위험을 방지하고, 육아에 도움을 주고자 한다.

Implement and Effects of Pronunciation Correction App for Teenagers with Hearing Aids (청력보조기를 이식받은 청소년을 위한 발음교정 앱 구현과 효과 정리)

  • Shin, Ji-Woo;Lee, Ji-Oun;Im, Jisu;Lim, Sung-Hyun
    • Proceedings of the Korea Information Processing Society Conference
    • /
    • 2017.11a
    • /
    • pp.1045-1048
    • /
    • 2017
  • 기존에 있는 발음연습 앱이 청소년 청각장애인이 언어치료용으로 사용하기에 부적절한 이유와 그들에게 맞는 언어치료 앱 도입 필요 이유를 설명한다. 현장에서 일하시는 언어치료사와 청각장애인의 의견을 수용하여 개발한 청소는 청각장애인을 위한 앱의 시스템 구성도와 서비스 흐름도, 개발 앱의 기능과 기술, 사용자 시나리오를 설명하여 인공와우를 이식받은 청소년 청각장애인이 언어치료 앱인 '발연기'를 통해 어떻게 언어치료를 받을 수 있을지에 대한 연구이다.