• 말소리와 음성과학
• /
• 제13권3호
• /
• pp.71-78
• /
• 2021

인공신경망에 기반한 대부분의 음성 합성 모델은 고음질의 자연스러운 발화를 생성하기 위해 보코더 모델을 사용한다. 보코더 모델은 멜 스펙트로그램 예측 모델과 결합하여 멜 스펙트로그램을 음성으로 변환한다. 그러나 보코더 모델을 사용할 경우에는 많은 양의 컴퓨터 메모리와 훈련 시간이 필요하며, GPU가 제공되지 않는 실제 서비스 환경에서 음성 합성이 오래 걸린다는 단점이 있다. 기존의 선형 스펙트로그램 예측 모델에서는 보코더 모델을 사용하지 않으므로 이 문제가 발생하지 않지만, 대신에 고품질의 음성을 생성하지 못한다. 본 논문은 뉴럴넷 기반 보코더를 사용하지 않으면서도 양질의 음성을 생성하는 Tacotron 2 & Transformer 기반의 선형 스펙트로그램 예측 모델을 제시한다. 본 모델의 성능과 속도 측정 실험을 진행한 결과, 보코더 기반 모델에 비해 성능과 속도 면에서 조금 더 우세한 점을 보였으며, 따라서 고품질의 음성을 빠른 속도로 생성하는 음성 합성 모델 연구의 발판 역할을 할 것으로 기대한다.

• 전기전자학회논문지
• /
• 제24권4호
• /
• pp.1122-1128
• /
• 2020

대역 확장(Bandwidth Extension)이란 채널 용량 부족 혹은 이동통신 기기에 탑재된 코덱의 특성으로 인해 부호화 및 복호화 과정에서 대역 제한(band limited)되거나 손상된 협대역 신호(NB, Narrow Band)를 복원, 확장하여 광대역 신호(WB, Wide Band)로 전환 시켜주는 것을 의미한다. 대역 확장 연구는 주로 음성 신호 위주로 대역 복제(SBR, Spectral Band Replication), IGF(Intelligent Gap Filling)과 같이 고대역을 주파수 영역으로 변환하여 복잡한 특징 추출 과정을 거쳐 이를 바탕으로 사라지거나 손상된 고대역을 복원한다. 본 논문에서는 딥러닝 모델 중 오토인코더(Autoencoder)를 바탕으로 1차원 합성곱 신경망(CNN, Convolutional Neural Network)들의 잔차 연결을 활용하여 복잡한 사전 전처리 과정 없이 일정한 길이의 시간 영역 신호를 입력시켜 대역 확장 시킨 음향 신호를 출력하는 모델을 제안한다. 또한 음성 영역에 제한되지 않는 음악을 포함한 여러 종류의 음원을 포함하는 데이터셋에 훈련시켜도 손상된 고대역을 복원할 수 있음을 확인하였다.

• 스마트미디어저널
• /
• 제10권4호
• /
• pp.9-14
• /
• 2021

기존의 원격협업 경우, 원격지원 서비스 중심의 시스템으로 현장 중심의 다자간 원격 협업 시스템의 활용에는 적합하지 않다. 본 논문은 다양한 산업현장을 위한 원격 협업 시스템 개발로 산업현장의 다양한 요구에 부합하는 관리자의 원격지원 및 작업관리, 작업자 간의 실시간 영상 원격지원, 작업자들 다자간의 실시간 음성 작업공유 기능 개발을 수행한다. 또한 영상 내 암호화를 통해 보안 기능을 강화하여 활용도를 높이고 보다 효율적인 시스템 개발을 목표로 한다. 최종적으로 개발 내용은 원격 관리 및 지원 소프트웨어 개발, 작업자 안드로이드 앱 개발, WebRTC 기반 원격 협업 시스템 구축 및 개발, 시제품 개발이다. 이러한 제품은 산업현장에 설치, 운영하여 수요처 증대 및 매출 증가가 예상되며 인력양성, 트랜드 기술 이해 및 능력 향상을 도모할 수 있다.

• 한국엔터테인먼트산업학회논문지
• /
• 제13권1호
• /
• pp.139-156
• /
• 2019

동계스포츠는 레저인구의 확대와 함께 국내 및 국제수준의 대회가 자주 개최됨에 따라 수요자 중심의 스포츠 정보가 더욱 필요해지고 있다. 특히 기상 및 환경정보는 동계스포츠대회를 조직체는 물론이고 직접 진행을 하는 경기운영요원 및 지도자와 선수 모두에게 필수적인 요소가 되고 있다. 이 연구는 동계 스포츠 설상 종목을 4개의 종목군으로 그룹화하여 각 그룹별 기상 및 환경정보에 의해 경기운영 및 경기력을 위한 제고하는 중요성 요인이 무엇인가를 구명(究明)하는데 목적이 있었다. 이 연구는 질적연구방법에 의해 이루어졌으며, 11명의 동계스포츠 관련자들이 유목적적 표집법(purposeful sampling)에 의해 정보제공자로서 선정하였다. 심층면담(in-depth interview)을 통해 얻은 자료는 내용분석(content analysis)과 함께 유형화(categorizing)과정으로 분석되었다. 이러한 과정을 통해 얻은 결론은 동계 스포츠경기를 위해 종목별 특화된 기상 및 환경정보 요소들에 의해 경기운영과 경기력에 중요하게 고려해야 하는 요인들이 구명하였다. 이는 동계스포츠 특성에 맞는 세분화된 정보를 제공하여 정보수요자의 활용과 정보재생산의 의미를 갖는다.

• 한국인터넷방송통신학회논문지
• /
• 제23권5호
• /
• pp.83-88
• /
• 2023

본 논문에서는 홈 트레이닝 인구가 늘어나면서 증가한 운동과 식단 보조 서비스에 대한 수요를 충족시키기 위해 운동 및 식단 보조 애플리케이션을 개발하였다. 애플리케이션은 카메라를 통해 실시간으로 촬영되는 사용자의 운동 자세를 분석하여, 안내선과 음성을 이용해 올바른 자세를 유도하는 기능을 가진다. 또한, 사용자가 사진을 촬영하면 사진에 포함된 음식들을 분류하고 각 음식의 양을 추정하여, 칼로리 등의 영양 정보를 계산하여 제공하는 기능을 가진다. 영양 정보 계산은 외부의 서버에서 수행되도록 구성했다. 서버는 계산된 결과를 애플리케이션으로 전송하고, 애플리케이션은 결과를 받아 시각적으로 출력한다. 추가로, 운동 결과와 영양 정보는 날짜별로 저장하고 확인할 수 있도록 하였다.

• International Journal of Computer Science & Network Security
• /
• 제23권10호
• /
• pp.37-43
• /
• 2023

The hospital situation, timing, and patient restrictions have become obstacles to an optimum therapy session. The crowdedness of the hospital might lead to a tight schedule and a shorter period of therapy. This condition might strike a post-stroke patient in a dilemma where they need regular treatment to recover their nervous system. In this work, we propose an in-house and uncomplex serious game system that can be used for physical therapy. The Kinect camera is used to capture the depth image stream of a human skeleton. Afterwards, the user might use their hand gesture to control the game. Voice recognition is deployed to ease them with play. Users must complete the given challenge to obtain a more significant outcome from this therapy system. Subjects will use their upper limb and hands to capture the 3D objects with different speeds and positions. The more substantial challenge, speed, and location will be increased and random. Each delegated entity will raise the scores. Afterwards, the scores will be further evaluated to correlate with therapy progress. Users are delighted with the system and eager to use it as their daily exercise. The experimental studies show a comparison between score and difficulty that represent characteristics of user and game. Users tend to quickly adapt to easy and medium levels, while high level requires better focus and proper synchronization between hand and eye to capture the 3D objects. The statistical analysis with a confidence rate(α:0.05) of the usability test shows that the proposed gaming is accessible, even without specialized training. It is not only for therapy but also for fitness because it can be used for body exercise. The result of the experiment is very satisfying. Most users enjoy and familiarize themselves quickly. The evaluation study demonstrates user satisfaction and perception during testing. Future work of the proposed serious game might involve haptic devices to stimulate their physical sensation.

• 전기전자학회논문지
• /
• 제23권4호
• /
• pp.1440-1447
• /
• 2019

현재 아이들의 자폐스펙트럼장애 유병률이 한층 더 높게 보고되고 있으며 다양한 형태의 장애 징후를 보이고 있다. 특히 이들은 사회적 의사소통 영역에서 의사소통장애로 인한 대화에 어려움을 겪고 있으며 이를 훈련을 통해 개선 시킬 필요가 대두된다. 이를 위해 본 연구에서는 사전 연구를 통해 설계된 로봇에 장착된 마이크를 통해 음성 정보를 취득하고 이러한 정보를 이용하여 지능적인 동작을 만드는 방식을 제안한다. 음성 정보를 로봇 동작으로 분류하기 위해 인공신경망을 이용하였으며 여러 신경망 기법중 합성곱 방식을 기본으로 한 순환신경망을 결합하여 정확도를 향상시키려고 하였다. 입력 음성 데이터의 전처리는 MFCC를 이용하여 분석하였으며 여러 데이터 정규화 및 인공신경망 최적화 기법을 활용하여 로봇의 동작을 추정하였다. 아울러 설계된 인공신경망은 기존에 사용한 구조 및 사람이 개입하여 분석하는 방법과의 정확도 비교 실험을 진행하여 분석 결과가 높은 정확도를 나타냈다. 향후 보다 높은 정확도를 가질 수 있는 로봇 동작을 설계하여 실제의 자폐아 치료 및 교육 환경에서 적용할 수 있기 위하여 다양한 형태의 데이터를 수집하고 효율적으로 전처리하는 방식에 대한 연구가 요구된다.

• 공연문화연구
• /
• 제43호
• /
• pp.47-78
• /
• 2021

본 연구는 판소리를 소재로 한 영화를 대상으로 영화 속에서 판소리가 수용된 양상을 살핌으로써, 판소리에 대한 현대사회의 인식과 기대의 변화를 탐색하는 것을 목적으로 한다. 조선후기 상하층의 사랑을 두루 받았던 판소리는 일제 강점기와 한국 전쟁을 겪으며 그 위상이 꺾이게 된다. 일본에서 유입된 신문물의 영향과 미국 문화의 유입으로 대중적 관심을 잃게 되며, 고루하고 낡은 전통의 이미지를 갖게 되었다. 이에 국가는 점차 사라지는 판소리를 보호 및 계승하기 위해 1964년 판소리를 중요무형문화재로 지정하지만 1980년대까지도 판소리의 자생적 대중성 확보는 어려웠다. 그러나 판소리는 국가의 꾸준한 지원과 명창들의 판소리 전승 노력, 그리고 2000년대 들어 우리의 것을 세계화하자는 사회문화적 담론 속에서 점차 동시대의 대중과 호흡하는 노력을 해왔고, 문화콘텐츠의 주요 소재로도 각광을 받게 되었다. 그리고 지금은 팝밴드 '이날치'와 현대무용그룹 '앰비규어스 댄스 컴퍼니'가 선보인 뮤직비디오 형식의 'Feel the Rhythm of KOREA'가 보여주듯 현재의 주목받은 대중문화 가운데 하나가 되었다. 현대사회 속에서 점차 변화해가는 판소리에 대한 대중적 인식과 판소리의 위상은 영화라는 대중매체 속에서도 엿볼 수 있다. 본 연구는 1993년 임권택 감독의 <서편제>를 비롯하여 최근의 <소리꾼>까지 판소리를 소재로 한 6편의 영화를 선별하여 이와 같은 변화의 추이를 탐색하였다. 먼저 1990년대에 제작된 영화 <서편제>와 <휘모리>이다. 이 두 편의 영화는 모두 당대에서 그리 멀지 않은 시대의 판소리, 즉 20세기 초중반 전승의 위기와 대중적 관심에서 멀어진 판소리의 현실을 보여주며, 그 속에서도 판소리 자체의 예술적 완성을 위해 치열하게 분투하는 소리꾼의 모습을 영화에 담아내었다. 판소리가 가진 정서로써 '한'과 북과 소리의 조화를 통한 판소리 미학을 강조함으로써 우리 소리의 숭고함과 특수함을 대중에게 선보였다. 판소리에 관해 관심이 적었고, 따라서 이의 가치를 잘 모르던 대중은 즉각 이에 화답하며 우리 음악과 우리의 정서에 대한 폭발적 지지를 보여 이른바 '<서편제> 신드롬'을 불러일으키기도 하였다. <서편제>와 <휘모리>는 우리 소리에 대한 관심과 지식이 부족한 시기, 그러나 그 필요성이 지속적으로 요청되던 1990년대라는 시대적 상황이 영화의 내용과 구성에 반영되며 당대 판소리에 대한 사회적 인식과 기대를 드러내었다. 다음으로 2008년에 제작된 영화 <소리, 아이>와 2012년의 <두레소리>이다. 두 영화는 판소리와 국악을 하는 동시대의 어린이, 학생을 주인공으로 하여 예술을 하는 아이들의 성장기를 그려나가는 데 초점을 맞췄다. 이들 영화에서 판소리는 '요즘 세상에 누가 그것을 하냐'의 소리를 듣는 옛 음악도 아니고, 혹독한 수련과 고통 속에서 완성이 되는 숭고한 음악으로 묘사되지도 않는다. 부모님의 권유, 집안의 사정 속에서 판소리를 시작한 아이들이 소리를 익히고 성장하고, 갈등하고, 고민하는 이야기를 통해 판소리는 동시대의 하나의 자연스러운 예술로 그려질 뿐이다. 판소리를 비롯한 국악의 정통성을 신념화하여 강조하지 않고, 교조적으로 이를 대중에게 전달하지 않는다. 이는 동시대의 예술로 판소리를 바라보는 2000년대의 달라진 대중적 인식을 반영하는 속에서 판소리가 해석된 것이라 볼 수 있다. 마지막으로 2015년의 <도리화가>와 최근 상영된 2020년의 <소리꾼>이다. 흥미롭게도 두 작품 모두 판소리가 민중의 사랑을 가장 많이 받던 조선후기를 영화의 시간적 배경으로 삼고 있다. 영화의 이야기를 판소리의 역사를 토대로 구성하였는데, <도리화가>의 경우는 실존 인물인 신재효와 진채선을 바탕으로 영화적 상상력을 덧붙인 서사를 전개하였다. 그리고 <소리꾼>의 경우는 광대의 소리가 판소리 사설의 원류가 되었다는 판소리 이론과 판소리 <심청가>의 서사를 활용하여 당대 존재했을 법한 소리꾼의 삶의 이야기를 그려냈다. 두 영화는 판소리의 역사에서 이야기의 소재를 찾아 이를 영화화하였다고 할 수 있는데, 이는 전통을 문화콘텐츠의 소재로 삼고자 하는 시대적 분위기와 연결된다. 정보통신 기술의 발달로 국가 간의 문화장벽이 허물어지고 있는 때에, 콘텐츠의 소재는 더욱 다양해지고 있다. 역사를 활용한 이야기가 그간 없었던 것은 아니지만, 전통의 문화를 적극적으로 문화콘텐츠의 소재로 삼고자 하는 시도는 2000년대 들어 본격화되었고, 판소리의 음악뿐만 아니라, 판소리의 역사 또한 활용 가능한 콘텐츠의 대상이 되었다. 지금의 판소리는 향수를 불러일으키는 옛것도, 낡은 전통도 아닌 동시대와 끊임없이 소통하는 예술이자, 다양한 콘텐츠의 소재로 활용 가능한 자리에 온 것이다. 상기 영화들은 현대 판소리가 걸어온 길과 변모하는 위상, 그리고 이에 따라 달라지는 대중적 인식을 보여주고 있다는 점에서 판소리 문화의 흐름을 이해하는 기초가 될 수 있다.

• 인터넷정보학회논문지
• /
• 제16권6호
• /
• pp.11-21
• /
• 2015

Human-Computer Interaction(HCI)에 대한 관심도가 높이지면서, HCI에 대한 연구도 활발히 진행되고 있다. 이와 더불어 사용자의 몸짓이나 음성을 이용하는 Natural User Interface/Natural User eXperience(NUI/NUX)에 대한 연구도 활발히 진행되고 있다. NUI/NUX의 경우, 제스처 인식이나 음성 인식 등의 인식 알고리즘이 필요하다. 하지만 이러한 인식 알고리즘은 전처리, 정규화, 특징 추출과 같은 단계를 거쳐야하기 때문에 구현이 복잡하고, 트레이닝에 많은 시간을 투자해야 한다는 단점이 있다. 최근에는 NUI/NUX 개발 도구로 Microsoft 사의 Kinect가 개발되어 개발자와 일반인들에게 많은 관심을 받고 있고, 이를 이용한 다양한 연구가 진행 중에 있다. 본 저자들의 이전 연구에서도 사용자의 신체적 특징을 이용하여 뛰어난 직관성을 가진 핸드 마우스를 구현하였다. 하지만 마우스의 움직임이 부자연스럽고 정확도가 낮아 사용자가 사용하기 다소 어려웠다는 단점이 있다. 본 연구에서는 Kinect를 통해 사용자의 신체적 특징을 실시간으로 추출하고, 이를 이용해 가상 모니터라는 새로운 개념을 추가한 핸드 마우스 인터페이스를 설계하고 구현하였다. 가상 모니터는 사용자의 손으로 마우스를 제어할 수 있는 가상의 공간을 의미한다. 이를 통해 가상 모니터 상의 손의 좌표를 실제 모니터 상의 좌표로 정확하게 매핑(mapping)이 가능하다. 가상 모니터를 사용함으로써 이전 연구의 장점인 직관성을 유지하고, 단점인 정확도를 높일 수 있다. 추가적으로 뇌파 집중 지표를 이용해 사용자의 불필요한 행동을 인식하여 핸드 마우스 인터페이스의 정확도를 높였다. 제안하는 핸드 마우스의 직관성과 정확성을 평가하기 위하여 10대부터 50대까지 50명에게 실험을 하였다. 직관성 실험 결과로 84%가 1분 이내에 사용방법을 터득하였다. 또한 동일한 피실험자에게 일반적인 마우스 기능(드래그, 클릭, 더블클릭)에 대해 정확성 실험을 한 결과로 드래그 80.9%, 클릭 80%, 더블 클릭 76.7%의 정확성을 보였다. 실험 결과를 통해 제안하는 핸드 마우스 인터페이스의 직관성과 정확성을 확인하였으며, 미래에 손으로 시스템이나 소프트웨어를 제어하는 인터페이스의 좋은 예시가 될 것으로 기대된다.

• 대한후두음성언어의학회지
• /
• 제10권2호
• /
• pp.164-169
• /
• 1999

본 교실에서 시행했던 후두미세수술 1900례중에서 술후 성대낭종으로 확진된 83례를 대상으로 다음과 같은 결과를 얻었다. 1) 전체 후두미세수술 1900례 중 성대낭종이 차지하는 비율은 83례로 4.4%였다. 2) 성대낭종 83례중 유표피낭종은 27례로 32.5%. 저류낭종은 56례로 67.5%를 차지하였다. 3) 성별분포는 83례의 성대낭종중 여성이 55례(66.3%). 남성이 28례 (33.7%)로 여성에서 호발하였고 저류 낭종에서는 남녀비가 17 : 39. 유표피낭종에서는 11 : 16으로 나타났다. 4) 이학적검사 소견으로서 유표피낭종은 보다 진단이 용이하여 술전 이학적 검사상 63%에서 낭종을 의심할 수 있었으나 저류낭종은 성대 폴립이나 결절 등으로 오인되는 경우가 많았고 술전 진단과 술후 진단이 일치하는 경우는 34%에 지나지 않았다. 5) 병리 조직학적 검사상 유표피낭종은 중층 평편상피로 구성된 막을 가지고 있고 내부는 대개 PAS 음성인 케라틴과 콜레스테롤양(cholesterol-like)물질을 포함하고 있고 저류낭종은 원주 또는 입방세포로 구성되어있는 막을 가지고 있으며 주로 PAS양성인 점액 분비물을 내부에 포함하고 있다. 6) 애성 발생과 관련된 유발 요인으로는 성대과용후 33례, 상기도감염후 16례로 성대과용과 상기도감염이 주요한 유발 요인으로 나타났고 성대낭종의 발생에 수다스러움(talkativeness)이 관련성 있게 나타났고 저류낭종에서 관련성이 더욱 높게 나타났다. 7) 발병부위는 대부분에서 막성대유리연의 중간부 및 전방부 1/3에 발생하였고 수술결과는 저류낭종 50례 중 12례에서만 낭종의 파열없이 완전제거가 가능하였으며 유표피낭종은 24례 중 16례에서 낭종의 파열없이 완전제거가 이루어져 저류낭종이 유표피낭종에 비해 파열없이 완전제거가 매우 어려움을 알 수 있었다. 8) 수술전후의 음성만족도는 전체적으로 59%를 나타내어 성대폴립에서의 만족도와의 유사한 결과를 보였다.m)은 각각 0.60, 0.44, 0.40%로 시험초기와 비슷한 수준이었다.의성있게 최대발성지속시간은 감소하고, 평균호기류율은 증가하였으며, 발성기류량과 성문하압은 여자환자에서만 의미 있게 각각 감소하거나 증가하였다. 이상의 결과는 정상인과 성대용종 환자에 있어서 객관적인 공기역학적 검사결과를 보여주며 이는 성대용종 환자의 음성이상에 대한 상태판정이나 치료 후 효과 판정에 기본자료로 이용할 수 있을 것으로 생각된다.야 할 것으로 생각된다. 발생과 피해정도를 예측하여 벼멸구 방제에 중요한 자료로 활용될 수 있을 것으로 생각한다.5) 실험 3에서는 zygote의 VS1 에 노출시간에 따른 생존율을 조사한 결과 융해후 2-cell (91.6, 88.5 및 88.9%) 및 배반포기 (83.3, 74.3 및 69.4%) 까지 배발달율은 1,2 및 3분간의 노출시간에 따른 유의적인 차이를 보이지 않았다. 또한 융해후 노출시간에 따른 할구수에서도 유의적인 차이를 보이지 않았다 (36.4$\pm$4.76, 32.4$\pm$4.67 및 27.6$\pm$4.52). 이상의 결과에서 OPP vitrification 방법은 EFS 또는 EDS 동결보존액에 따른 유의적인 차이 없이 이용될 수 있는 것으로 판단된다. 배발달단계에 따른 생존율은 zygote 의 초기배는 2, 4, 8, 상실배 및 배반포기보다 유의적으로 저조한 생존율을 보였다. Zygote의 VS1에 노출시간에 따른 생존율도 1 분간의 노풀시간에서 높은 배발달율을 보였다. OPP vitrification 동결보존방법으로 생쥐수정란의 동결보존에 유용하게 이용가능한 것으로 판단된다.l the training process, the subject, and area of research, can be pointed out one of the flimsy in our researches of science education.