• 제목/요약/키워드: 청각이미지

검색결과 75건 처리시간 0.029초

청각장애인을 위한 동영상 이미지캡션 생성 소프트웨어 개발 (The Development of Image Caption Generating Software for Auditory Disabled)

  • 임경호;윤준성
    • 한국HCI학회:학술대회논문집
    • /
    • 한국HCI학회 2007년도 학술대회 1부
    • /
    • pp.1069-1074
    • /
    • 2007
  • 청각장애인이 PC환경에서 영화, 방송, 애니메이션 등의 동영상 콘텐츠를 이용할 때 장애의 정도에 따라 콘텐츠의 접근성에 있어서 시각적 수용 이외의 부분적 장애가 발생한다. 이러한 장애의 극복을 위해 수화 애니메이션이나 독화 교육과 같은 청각장애인의 정보 접근성 향상을 위한 콘텐츠와 기술이 개발된 사례가 있었으나 다소 한계점을 가지고 있다. 따라서 본 논문에서는 현대 뉴미디어 예술 작품의 예술적 표현 방법을 구성요소로서 추출하여, 기술과 감성의 조화가 어우러진 독창적인 콘텐츠를 생산할 수 있는 기술을 개발함으로써 PC환경에서 청각장애인의 동영상 콘텐츠에 대한 접근성 향상 방법을 추출하고, 실질적으로 청각적 효과의 시각적 변환 인터페이스 개발 및 이미지 캡션 생성 소프트웨어 개발을 통해 청각장애인의 동영상 콘텐츠 사용성을 극대화시킬 수 있는 방법론을 제시하고자 한다. 본 논문에서는 첫째, 청각장애인의 동영상 콘텐츠 접근성 분석, 둘째, 미디어아트 작품의 선별적 분석 및 유동요소 추출, 셋째, 인터페이스 및 콘텐츠 제작의 순서로 단계별 방법론을 제시하고 있다. 이 세번 째 단계에서 이미지 캡션 생성 소프트웨어가 개발되고, 비트맵 아이콘 형태의 이미지 캡션 콘텐츠가 생성된다. 개발한 이미지 캡션 생성 소프트웨어는 사용성에 입각한 일상의 언어적 요소와 예술 작품으로부터 추출한 청각 요소의 시각적요소로의 전환을 위한 인터페이스인 것이다. 이러한 기술의 개발은 기술적 측면으로는 청각장애인의 다양한 웹콘텐츠 접근 장애를 개선하는 독창적인 인터페이스 추출 환경을 확립하여 응용영역을 확대하고, 공학적으로 단언된 기술 영역을 콘텐츠 개발 기술이라는 새로운 영역으로 확장함으로써 간학제적 시도를 통한 기술영역을 유기적으로 확대하며, 문자와 오디오를 이미지와 시각적 효과로 전환하여 다각적인 미디어의 교차 활용 방안을 제시하여 콘텐츠를 형상화시키는 기술을 활성화 시키는 효과를 거둘 수 있다. 또한 청각장애인의 접근성 개선이라는 한정된 영역을 뛰어넘어 국가간 언어적인 장벽을 초월할 수 있는 다각적인 부가 동영상 콘텐츠에 대한 시도, 접근, 생산을 통해 글로벌 시대에 부응하는 새로운 방법론으로 발전 할 수 있다.

  • PDF

거리경관에 대한 청각적 이미지의 평가구조 - 대학생들의 음풍경 체험을 통한 의미론적 고찰 - (The Evaluation Structure of Auditory Images on the Streetscapes - The Semantic Issues of Soundscape based on the Students' Fieldwork -)

  • 한명호
    • 한국음향학회지
    • /
    • 제24권8호
    • /
    • pp.481-491
    • /
    • 2005
  • 이 연구의 목적은 사운드스케이프의 의미론적 관점에 기초하여 도시의 거리경관에 관한 청각적 이미지의 평가구조를 파악하는 것이다. 캡션평가법이라는 새로운 환경심리조사수법을 이용하여 2001년부터 2005년까지 총45명의 대학생이 남원시의 주요 거리를 걸으면서 듣고 느끼는 소리의 이미지 파악을 위한 현장조사에 참가하고, 그 결과 청각적 경관에 대한 요소, 특징, 인상 및 선호도 등을 포함한 다양한 자료를 얻을 수 있었다. 남원시에 있어서, 청각적 이미지의 구성 요소는 자연음, 그리고 기계음, 사회음, 지시음 등을 포함한 인공음으로 분류되고, 청각적 경관의 특징은 소리종류, 양태, 상황, 성질, 주변관계, 이미지 등으로, 그리고 청각적 경관의 인상은 인간의 감성, 거리의 분위기, 소리 자체의 특성이라는 3가지 카테고리로 분류된다. 청각적 경관과 판단과의 관계로 부터, 청각적 경관의 요소, 특징, 인상 등은 긍정적, 중립적, 부정적 이미지 등의 항목으로 구성된다. 또한, 남원시의 거리경관의 평가구조모델로부터 그 장소 또는 공간의 청각적 이미지특성을 파악할 수 있었다.

도형을 그리는 소리: 소리를 이용한 형태정보의 전달 가능성 탐색 (Auditory shaping _Conveying shape information using auditory images)

  • 박영현;한광희
    • 한국HCI학회:학술대회논문집
    • /
    • 한국HCI학회 2006년도 학술대회 1부
    • /
    • pp.506-512
    • /
    • 2006
  • 시각적인 정보전달이 어려운 상황에서의 대상인식, 혹은 시각장애인의 대상인식에 있어서 소리는 어느 정도의 역할을 할 수 있을까? 이 연구는 소리를 통해 대상의 형태정보를 전달하기 위해 진행되었다. 하나의 음(musical tone)을 음높이와 음색, 지속시간을 조정한 후, 머리전달함수(Head-Related Transfer Function: HRTF)를 이용하여 수평선, 수직선, 대각선, 곡선의 형태로 운동하는 3-D 사운드 형태소로 만들었다. 그리고 이들의 연속적인 조합을 통해 단순한 도형에서부터 복잡한 도형, 이들 2차원상의 도형을 단면으로 하는 3차원상의 도형들까지 그려내는 소리자극을 구성하였다. 성인 대학생을 대상으로 한 실험에서, 이렇게 만들어진 청각이미지(auditory image)를 듣고 표상된 형태를 여러 개의 시각적인 이미지들(visual images) 중에서 선택하는 과제를 실시하였는데, 실험 결과는 평균 78%의 정확율을 보였다. 이는 소리를 이용한 형태정보 전달의 가능성이 있음을 시사하는 것이며, 이러한 시도는 청각 인터페이스의 응용범위를 확장하는데 도움이 될 것이다.

  • PDF

청각장애인을 위한 지상파 UHD 기반 감정표현 자막 송출 시스템 개발 (Development of Emotion Subtitles Broadcast System based on Terrestrial UHD TV for the Hearing-Impaired)

  • 이준;안충현
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2021년도 하계학술대회
    • /
    • pp.141-144
    • /
    • 2021
  • 최근 지상파 UHD 방송에서는 자막을 비디오 패킷에 삽입하여 전달하는 기존 방식이 아닌 별도의 전송로로 전달하는 폐쇄형 자막(closed caption) 방식을 적용하고 있다. 또한 자막에는 문자 뿐만 아니라 이미지까지 포함하여 청각장애인의 프로그램 이해도를 높이는데 활용할 수 있다. 따라서 본 논문에서는 청각장애 시청자가 방송 콘텐츠 내용의 이해도를 향상시키기 위하여 지상파 UHD 방송에서 기존의 문자 자막과 움직이는 이미지 자막(=감정표현 자막)을 송출하여 동시에 표현할 수 있는 송출시스템을 제안한다.

  • PDF

청각이미지의 색채분석 연구 (A Study on Color Analysis of Auditory Image)

  • 최영조
    • 한국콘텐츠학회:학술대회논문집
    • /
    • 한국콘텐츠학회 2012년도 춘계 종합학술대회 논문집
    • /
    • pp.307-308
    • /
    • 2012
  • 인간은 음에서도 색을 느낄 수 있다. 그리고 청각을 통하여 음의 높고(고음), 낮음(저음), 장(길고), 단(짧음), 맑고, 탁함에 따라 색을 다르게 느낄 수 있다. 이러한 현상을 색청(色聽)이라고 한다. 소리와 색의 연관성에 대하여 선행 연구를 고찰한 결과 색의 3속성 색상, 채도, 명도는 음악의 음계, 옥타브, 음색과 연관성이 있었다. 그리고 음악의 리듬은 조형의 공간, 형태의 조화와 반복이 유사하다는 것을 알 수 있었다. 본 연구는 에드워드 마이언(Edward D. Maryon)의 마르코톤의 음과 색의 이론을 바탕으로 뉴턴의 색채와 음계로 경상도 민요 밀양아리랑의 색채를 분석하였다. 분석 결과 밀양아리랑 음의 빈도에 의한 색채는 Blue Violet, Green Blue, Red, Yellow, Orange의 순으로 색채를 추출할 수 있었다. 추출된 색에서 연상되는 형용사 이미지는 힘, 정열, 인내, 열정, 진취적인, 우호적, 야망, 불꽃 등으로 경상도 지역 이미지로 연관 시킬 수 있다. 본 연구는 경상도민요 밀양아리랑의 음을 분석하여 색의 연상이미지와 지역 색을 찾는데 그 의의를 두었다.

  • PDF

청각장애인을 위한 지상파 UHD 기반 감정표현 자막 수신 시스템 설계 (Design of Emotion Subtitles System based on Terrestrial UHD TV for the Hearing-Impaired)

  • 송진혁;배병준;조숙희;안충현
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2021년도 하계학술대회
    • /
    • pp.135-136
    • /
    • 2021
  • 최근 지상파 UHD 방송에서는 자막을 비디오 패킷에 삽입하여 전달하는 기존 방식이 아닌 별도의 전송로로 전달하는 폐쇄형 자막(closed caption) 방식을 적용하고 있다. 또한 자막에는 문자 뿐만 아니라 이미지까지 포함하여 청각장애인의 프로그램 이해도를 높이는데 활용할 수 있다. 따라서 본 논문에서는 청각장애 시청자가 방송 콘텐츠 내용의 이해도를 향상시키기 위하여 지상파 UHD 방송에서 기존의 문자 자막과 움직이는 이미지 자막(=감정표현 자막)을 수신하여 동시에 표현할 수 있는 수신시스템을 제안한다.

  • PDF

이미지를 활용한 오디오-비쥬얼 시스템 구성 (Configuration of Audio-Visual System using Visual Image)

  • 서준석;홍성대;박진완
    • 한국콘텐츠학회논문지
    • /
    • 제8권6호
    • /
    • pp.121-129
    • /
    • 2008
  • 소리를 이용한 정보의 표현 방법은 무형의 특징을 가진 매체를 이용하여 어떠한 방법을 통하여 구체적인 형태를 이끌어 내는가에 대한 문제에서 시작된다. 이 과정에서 소리를 매개체로 이용하여 구성되는 오디오-비쥬얼 시스템은 청각적 소재를 이용한 시각적 표현이라는 방법적 측면에서 감각 기관의 연계에 대한 역할을 맡고 있는 부분에서 청각의 시각화라는 비 구체적 감각에 대한 구체화라는 변형의 의미를 갖는다. 오디오-비쥬얼 시스템 형태를 통한 작품을 표현하는데 있어 기존에 사용되던 프로그래밍을 통한 비규칙적 프로시쥬얼(Procedure)적 동적(動的) 이미지 또는 비동적(非動的) 이미지를 사용한 표현 방법에서 시각적 출력 방법의 제한으로 인한 표현 방법의 제한이 생겨날 수 있는 부분에 있어 동적 이미지를 이용한 오디오-비쥬얼 시스템을 통하여 소리를 매체로 한 다양한 표현 결과물을 이끌어낼 수 있다. 본 논문에서는 동적 이미지를 사용한 오디오-비쥬얼 시스템을 통해 다양한 청각적 소재의 시각화 방법 및 소리를 이용한 애니메이션 표현법의 새로운 대안을 제시한다.

남원시의 도시경관에 대한 시각과 청각의 이미지구조와 인지특성 (The Visual and Auditory Images and Cognitive Characteristics on the Townscapes in Namwon City)

  • 한명호;오양기
    • KIEAE Journal
    • /
    • 제8권2호
    • /
    • pp.11-21
    • /
    • 2008
  • The purpose of this study is to interpret the visual and auditory images and cognitive characteristics about townscapes in Namwon city. It was acquired the survey results about 8 types of verbal interviews and 2 kinds of sketch maps which are based on urban images from 102 Namwon residents. They held in a variety of images of Namwon in their minds such as Jiri mountain, clean environment, sightseeing, special products, urban/building structures, Korean classical music, historical novel, local sports, and emotional images. The nice streets or places which the residents recommended are the places which have abundant natural areas, psychological peace and rest, available space for physical activity, places for performances and events, and regional attractions. The streets or places which they didn't like are decadent places, and areas of crowded traffic. The transition times of visual and auditory scene can be classified with the Saemaul movement in the 1970's(the rural new community movement) and the improvement of the city in the 1990's. The elements of visual images in Namwon city on the basis of the cognitive maps were expressed such elements as paths, districts, nodes, edges, and landmarks. The elements of auditory images, which are on the basis of the concept of the soundscape, included sounds of narrative musical form unique to Korea; p'ansori, sounds of traditional markets, and sounds of nature. It was found that the imageability of visual and auditory images is relatively clear in specific areas in Namwon city.

색상과 음향의 복합자극에 대한 인간감성의 변화 (Effects of Combined Stimuli of Color and Sounds on Human Sensibility)

  • 정일석;이구형;김병주
    • 한국감성과학회:학술대회논문집
    • /
    • 한국감성과학회 2001년도 춘계학술대회 논문집
    • /
    • pp.97-103
    • /
    • 2001
  • 인간은 외부 자극 중 시각 및 청각 자극으로부터 가장 많은 정보를 받아들이며 감성이 유발된다. 지금까지의 제품 개발 과정에서 디자인은 시각적 이미지에 중점을 두고 제품에 대한 사람의 느낌을 긍정적으로 만들어주는 외형적 심미성을 추구하여 왔다. 그러나 증대하는 고객의 감성욕구를 충족시키기 위해 기존의 시각 단독 자극에 의한 방법은 한계가 있으며, 따라서 두 가지 이상의 자극을 동시에 제공하는 복합자극을 활용함으로써 고객의 감성만족을 극대화하는 제품 디자인이 필요하다. 본 연구는 이미지 스케일에 나타난 대표적은 8가지 색상과 음향을 함께 제시할 때 인간 감성의 변화를 파악하고 두 자극간 상호 관련성을 조사하였다. 실험결과 동일속성의 색상, 음향이 제시될 때 유발되는 감성은 요소자극과 동일한 속성을 따르며 감성크기가 감소하였고, 반대 속성의 자극이 제시될 때 가성 변화 방향은 청각(음향) 방향과 동일하고, 자극의 크기는 상반된 속성에 의해 가성의 상쇄현상을 보여주었다. 또한 피실험자를 정적, 동적인 성격으로 구분하여 분석한 결과 감성 변화에 차이를 보였으며 이 결과를 토대로 다감각 디자인을 위해 감성의 개인성도 고려해야 함을 알 수 있었다.

  • PDF