• 제목/요약/키워드: 시각 음성인식

검색결과 130건 처리시간 0.033초

시각 음성인식을 위한 영상 기반 접근방법에 기반한 강인한 시각 특징 파라미터의 추출 방법 (Robust Feature Extraction Based on Image-based Approach for Visual Speech Recognition)

  • 송민규;;민소희;김진영;나승유;황성택
    • 한국지능시스템학회논문지
    • /
    • 제20권3호
    • /
    • pp.348-355
    • /
    • 2010
  • 음성 인식 기술의 발전에도 불구하고 잡음 환경하의 음성 인식은 여전히 어려운 분야이다. 이를 해결하기 위한 방안으로 음성 정보 이외에 시각 정보를 이용한 시각 음성인식에 대한 연구가 진행되고 있다. 하지만 시각 정보 또한 음성과 마찬가지로 주위 조명 환경이나 기타, 다른 요인에 따른 영상잡음이 존재하며, 이런 영상잡음은 시각 음성 인식의 성능 저하를 야기한다. 따라서 인식 성능 향상을 위해 시각 특징 파라미터를 어떻게 추출하느냐는 하나의 관심분야이다. 본 논문에서는 HMM기반 시각 음성인식의 인식 성능 향상을 위한 영상 기반 접근방법에 따른 시각 특징 파라미터의 추출 방법에 대하여 논하고 그에 따른 인식성능을 비교하였다. 실험을 위해 105명에 화자에 대한 62단어의 데이터베이스를 구축하고, 이를 이용하여 히스토그램 매칭, 입술 접기, 프레임 간 필터링 기법, 선형마스크, DCT, PCA 등을 적용하여 시각 특징 파라미터를 추출하였다. 실험결과, 제안된 방법에 의해 추출된 특징 파라미터를 인식기에 적용하였을 때의 인식 성능은 기본 파라미터에 비해 약21%의 성능 향상이 됨을 알 수 있다.

스마트폰을 이용한 시각장애인을 위한 음성인식 홈 리모트 컨트롤 시스템 (Voice Recognition Home Remote Control System for the Visually Handicapped using a Smartphone)

  • 이세훈;최승준
    • 한국컴퓨터정보학회:학술대회논문집
    • /
    • 한국컴퓨터정보학회 2015년도 제52차 하계학술대회논문집 23권2호
    • /
    • pp.339-340
    • /
    • 2015
  • 시각장애인은 주변 인지 장애로 정보 습득이 어렵고, 공간 정보 습득에 있어서 제약이 있는 신체조건으로 이동에 불편을 겪는다. 또한 특정 상황에서 적절한 분위기를 인지하고 그에 맞는 대응을 하기가 어렵다. IoT 시대에 맞춰 홈 네트워크 시스템이 널리 보급되어지는 추세이지만, 여전히 시각장애인이 사용하기에는 많은 어려움이 있고, 불편을 호소하는 게 현실이다. 본 논문에서는 이러한 시각장애인을 위해 스마트폰을 이용해 음성으로 집안의 사물을 원격 제어하는 구글 음성인식 홈 리모트 컨트롤 시스템을 제안한다.

  • PDF

음성인식 기능을 이용한 시각장애인용 키오스크 (Kiosk for the Visually Impaired using Voice Recognition)

  • 김대영;이아현;이건행;김세현;이붕주
    • 한국전자통신학회논문지
    • /
    • 제17권5호
    • /
    • pp.873-882
    • /
    • 2022
  • 본 논문에서는 현대사회에서 많이 사용되는 키오스크가 시각장애인들이 이용하는 것에 있어서 불편함을 보완해야 한다고 생각하여 편리성을 위한 음성인식 시스템 키오스크를 연구하였다. 초음파센서, 적외선센서를 활용하여 80cm-40cm 범위 안에 시각장애인을 인식하고, MP3 모듈을 통한 키오스크 소개 및 가까이 오도록 유도를 하고 40cm 이내의 시각장애인을 인식하면 MP3모듈을 통해 상품 설명 및 주문을 유도한다. 녹음 기반 데이터 음성인식 시스템과 서보모터를 통해 원하는 물건이 출력되는 키오스크를 연구하였다. 제작된 음성인식 키오스크에 대한 적외선, 초음파, 음성인식, 충격감지센서의 동작실험 및 최적화 실험을 통해 시각장애인의 편리성을 위한 키오스크를 제작하였고, 보안성을 강화하기 위해 충격감지센서, 비상벨을 활용했기 때문에 방범적인 측면에서도 기능을 추가한 시스템을 연구하였다.

시각장애인을 위한 음성인식 다용도 계량기 개발 (Development of A Voice Recognition Multipurpose Meter for Blind People)

  • 복선민;송채연;정경주;조선행;김성환
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2023년도 추계학술발표대회
    • /
    • pp.994-995
    • /
    • 2023
  • 일상생활에서도 불편함을 겪는 시각 장애인들을 위해 기초적인 생활을 보완할 수 있는 음성인식 다용도 계량기를 개발하고자 하였다. 본 제품은 API를 통해 저울의 측정값을 한국어 음성으로 변환하여 출력하는 음성 저울과 음성인식을 통해 슬라이드 포트로 정수기를 제어하는 작동 기기로 구성되어 있다. 현재 음성인식 다용도 계량기 개발을 완료했으며, Web, APP 등의 개선 방안을 연구 및 적용하는 중에 있다. 본 계량기를 통하여 시각장애인·시력저하자의 일상생활 및 삶의 질 향상뿐만 아니라 병원 등의 공공시설 개선에도 도움을 줄 수 있을 것으로 기대된다.

모바일 환경에서의 시각 음성인식을 위한 눈 정위 기반 입술 탐지에 대한 연구 (A Study on Lip Detection based on Eye Localization for Visual Speech Recognition in Mobile Environment)

  • 송민규;;김진영;황성택
    • 한국지능시스템학회논문지
    • /
    • 제19권4호
    • /
    • pp.478-484
    • /
    • 2009
  • 음성 인식 기술은 편리한 삶을 추구하는 요즘 추세에 HMI를 위해 매력적인 기술이다. 음성 인식기술에 대한 많은 연구가 진행되고 있으나 여전히 잡음 환경에서의 성능은 취약하다. 이를 해결하기 위해 요즘은 청각 정보 뿐 아니라 시각 정보를 이용하는 시각 음성인식에 대한 연구가 활발히 진행되고 있다. 본 논문에서는 모바일 환경에서의 시각 음성인식을 위한 입술의 탐지 방법을 제안한다. 시각 음성인식을 위해서는 정확한 입술의 탐지가 필요하다. 우리는 입력 영상에서 입술에 비해 보다 찾기 쉬운 눈을 이용하여 눈의 위치를 먼저 탐지한 후 이 정보를 이용하여 대략적인 입술 영상을 구한다. 구해진 입술 영상에 K-means 집단화 알고리듬을 이용하여 영역을 분할하고 분할된 영역들 중 가장 큰 영역을 선택하여 입술의 양 끝점과 중심을 얻는다. 마지막으로, 실험을 통하여 제안된 기법의 성능을 확인하였다.

바이모달 음성인식기의 시각 특징 추출을 위한 색상 분석자 SVM을 이용한 입술 위치 검출 (Lip Detection using Color Distribution and Support Vector Machine for Visual Feature Extraction of Bimodal Speech Recognition System)

  • 정지년;양현승
    • 한국정보과학회논문지:소프트웨어및응용
    • /
    • 제31권4호
    • /
    • pp.403-410
    • /
    • 2004
  • 바이모달 음성인식기는 잡음 환경하 음성인식 성능을 향상하기 위해 고안되었다. 바이모달 음 성인식기에 있어 영상을 통한 시각 특징 추출은 매우 중요한 역할을 하며 이를 위한 입술 위치 검출은 시각 특징 추출을 위한 중요한 선결 과제이다 본 논문은 색상분포와 SVM을 이용하여 시각 특징 추출을 위한 입술 위치 검출 방법을 제안하였다. 제안된 방법은 얼굴색/입술 색상 분포를 학습하여 이로부터 입술의 초기 위치를 빠르게 찾아내고 SVM을 이용하여 입술의 정확한 위치를 찾음으로써 정확하고 빠르게 입술의 위치를 찾도록 하였으며 실험을 통해 바이모달 인식기에 적용하기에 적합함을 알 수 있었다.

삼성종합기술원의 음성 DB 구축현황 (Trend on the Speech Database of SAMSUNG Advanced Institute of Technology (SAIT))

  • 김상룡
    • 한국음향학회:학술대회논문집
    • /
    • 한국음향학회 1995년도 제12회 음성통신 및 신호처리 워크샵 논문집 (SCAS 12권 1호)
    • /
    • pp.283-284
    • /
    • 1995
  • 삼성종합기술원의 음성 인식, 합성 분야의 음성 데이터 베이스 구축 현황과 향후 연구 방향에 대하여 기술한다. 삼성종합기술원에서는 1989년 한국어 문음 변환기술 개발을 시작하여 그 동안 남성음, 여성음 합성 시스템을 발표하였고, 최근에는 시각장애자용 컴퓨터를 개발하여 전국 13개 시각 장애자 학교에 기정한 바 있다. 음성 인식 분야는 100 단어 내외으 소용량 화자 종속 시스템을 개발하여 키폰용 음성인식 다이얼 장치를 실용화하였다. 약 5년여에 걸친 연구 결과 자체적으로 구축하게 된 음성 DB는 크게 남, 여 합성용 DB와 인식용 DB로 요약할 수 있다. 이러한 경험을 바탕으로 향후 국내외 대학, 연구소 등과 공동연구를 통해 상품화 수준의 문음 변환기술과 대용량, 화자독립 음성인식 시스템을 개발하고자 한다. 궁극적으로는 휴대용 통역기의 요소 기술을 확보하여 제한된 영역에서 자동 통역기를 상품화하는데 이바지할 계획이다.

  • PDF

시각장애인의 안전한 이동을 도와주는 지능형 카트 (Intelligent Carts that Help the Visually Impaired Move Safely)

  • 서찬;윤인경;이세희;박지원;김인수
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2023년도 추계학술발표대회
    • /
    • pp.976-977
    • /
    • 2023
  • 본 논문은 시각장애인 안내견이 부족한 상황 개선과 시각장애인에게 안전하고 자유로운 이동을 제공해주는 "시각장애인의 안전한 이동을 도와주는 지능형 카트"를 제안한다. 주요 특징은 다음과 같다. 첫째, 지문 인식 센서를 활용해 지문 등록 후 본인 인증을 하고 압력 센서를 활용해 카트 손잡이를 잡았을 경우에만 카트가 출발하도록 한다. 둘째, 라이다, 카메라를 이용하여 자율 주행 한다. 셋째, 음성인식 통해 목적지 설정, 속도 조절, 경고 알림 기능을 제공한다. 넷째, 짐칸을 설치하여 음성인식으로 여닫을 수 있도록 한다. 다섯째, 앱을 통해 카트 운전 모드를 변경할 수 있다.

시각 장애인 홈페이지 빌더의 인터페이스 디자인에 관한 연구 (A Study on the interface design of the homepage builder focusing on the domestic portal sites)

  • 하태현;백현기
    • 한국디지털정책학회:학술대회논문집
    • /
    • 한국디지털정책학회 2005년도 춘계학술대회
    • /
    • pp.497-503
    • /
    • 2005
  • 본 연구의 목표는 시각장애인을 위해 음성 인식, 음성 합성 기술을 이용하여 일반인과 마찬가지로 개인의 특성에 맞는 홈페이지를 구축하게 하는 웹 사이트 자동 생성 툴을 개발하는 것이며, 음성매일, 개인 일정, 주소록, 북마크 등을 생성 할 수 있는 개인정보관리기능은 물론 개인 맞춤 정보 생성 기능을 제공하며, 시각장애인들이 원하는 정보를 스스로 제공하여 일반인과 공유함으로써 의사소통의 통로 역할을 담당 할 수 있게 한다. 웹 사이트 자동 생성 툴에서는 기본적인 명령어를 음성인식으로 처리할 수 있게 지원하며 음성출력이 지원되는 TTS를 추가적으로 제공한다. 본 연구개발을 통해 시각장애인들이 사회적 소외감을 없애며 정보화 시대에 동등한 위치에서 생활 할 수 있도록 하는 것이다.

  • PDF

무선 카메라 모듈과 Window Phone을 이용한 시각장애인 보조 프로그램 개발 (Blind Helper program development by using Wireless Camera and Window Phone)

  • 김용운;박종기;유재훈;황영섭;허정
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2012년도 추계학술발표대회
    • /
    • pp.474-477
    • /
    • 2012
  • 현대사회는 시각장애인에 대한 복지가 부족하다. 예를 들어 유도블럭의 홰손, 지폐의 점자처리의 모호함 등 시각장애인을 위해 만들어진 복지조차 사용하기 어려운게 현실이다. 그래서 우리는 무선카메라와 Window Phone을 이용하여 상기 불편함을 해소하기 위하여 이 프로젝트를 시작하였다. Guide Line Detection은 앞을 못 보는 시각장애인에게 무선카메라에 보이는 영상에서 유도블럭을 찾아 시각장애인과의 거리를 음성으로 알려준다. Bill Recognition은 지폐를 인식하여 음성으로 알려준다. 길 안내 기능은 길을 찾아가지 못하는 시각장애인에게 특정 지점마다 길 안내정보를 등록하고, 등록된 정보는 시각장애인이 실시간으로 길 안내를 받을 수 있다. 음성인식은 기기를 사용하기 힘든 시각장애인들에 대한 접근성을 높이기 위해 WinPhone Application이 제공하는 모든 기능을 흔들기와 음성만으로 사용할 수 있도록 제공한다. 무선카메라의 화질과 Window Phone의 GPS 불규칙적인 오차 때문에 많은 시행착오가 있었지만 무선카메라는 웹 캠으로, GPS오차는 BingMap API의 GPS 가상 좌표로 대체하여 프로젝트를 마칠 수 있었다.