• Proceedings of the Korean Information Science Society Conference
• /
• 2005.11a
• /
• pp.745-747
• /
• 2005

최근 가상현실을 이용한 응용에 대한 수요가 증가하고 있다. 특히, 모션캡쳐 시스템을 이용해서 가상현실 공간상의 인체 캐릭터를 동작시킬 수 있는 콘텐츠는 교육용, 오락용등으로 활용 범위가 많다고 할 수 있다. 본 논문은 그래픽 3D 사물 객체, 3D 인체 캐릭터, 소리로 가상현실 공간을 구축할 수 있고, 모션캡쳐 장비로부터 실시간 획득되는 모션데이터를 이용해서 3D 인체 캐릭터를 동작시킬 수 있는 시스템 (가상스튜디오 시스템이라 부름)을 제안한다. 참고로, 우리의 조사에 의하면, 본 시스템과 같은 연구켤과는 거의 발견할 수 없었다. 본 시스템을 가상현실을 이용한 성경콘텐츠 제작에 활용해 본 결과 만족할 만한 성과를 얻었다.

• Proceedings of the KIEE Conference
• /
• 2008.07a
• /
• pp.1907-1908
• /
• 2008

본 논문에서는 개인화 내비게이션 기능을 제공하는 3D 가상 국악 전시관을 제안하였다. 제안된 가상 국악 전시관은 키보드와 조이스틱, 마우스 등 입력장치를 이용하여 사용자의 조작으로 이동 가능하며, 해당 국악기의 설명을 한국어와 영어로 들을 수 있다. 또한, 모든 국악기에 대한 소리를 들을 수 있고, 형태와 연주 기법을 3D로 볼 수 있으며, 해당 악기의 연주 동영상을 시청할 수 있다. 가상 국악 콘텐츠는 7개의 악기와 상세설명, 그리고 한 개의 시청각 실을 포함한다. 또한, Virtools와 자바스크립트를 이용하여 사용자 개인이 원하는 정보만을 가상으로 체험할 수 있는 개인화 내비게이션 기능을 구현하여 제공한다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2022.11a
• /
• pp.14-17
• /
• 2022

본 논문에서는 현실세계에서 사용되던 오디오 처리 기법을 가상현실과 증강현실로 확장하는 기술에 대해 제시한다. 메타버스 서비스 구축 등에 활용되는 가상현실 공간을 설계할 때에는 오디오 처리를 위해서 가상현실 공간내 사용자가 위치하는 장면에 따른 소리의 회절과 반사에 따른 잔향 효과를 고려해 줄 수 있어야 장면에 몰입된 사용자 경험이 가능하다. 증강현실 응용에서는 실제 정보와 증강된 효과를 제공하기 위해 가상과 실제 정보간의 위치 정합이 영상 또는 위치를 기반으로 하여 제공되어야 한다. 가상현실과 증강현실 지원을 위해 현실세계 오디오 재생 기술에 추가되어야 하는 기술들과 함께 진행중인 몰입형오디오 서비스를 제공하기 위한 국제표준 기술 개발의 현황을 살펴보고, 향후 추가로 기술이 개발되고 보완되어야 할 부분을 제시한다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2021.11a
• /
• pp.393-396
• /
• 2021

본 논문에서는 가상현실에서 작업 과정별 컨트롤러 활용에 관하여 연구한다. 가상현실은 실제와 유사한 공간적, 시간적 체험을 하게 하여 교육, 산업, 훈련, 관광 등 다양한 분야에서 가상현실을 활용하고 있다. 하지만 실제 작업 과정과 비교했을 때 컨트롤러의 모양, 진동, 시각효과, 소리 등 여러 차이로 인하여 몰입감이 떨어지는 상황이다. 본 연구에서는 그중에서 컨트롤러를 활용하여 실제 작업과정과의 차이를 줄이는 방법에 관하여 연구한다. 실제 작업 과정과 차이를 줄인다면 사용자에게 최적의 경험을 주고 현실 작업과 가상현실 작업과의 차이를 줄여 교육, 훈련, 산업 분야에 도움을 줄 수 있을 것으로 기대된다.

• Journal of Biomedical Engineering Research
• /
• v.21 no.6
• /
• pp.615-621
• /
• 2000

A social phobia is an anxiety disorder characterized by extreme fear and phobic avoidance of social and performance situations. Medications or cognitive-behavior methods have been mainly used in treating it. These methods have some shortcomings such as being inefficient and difficult to apply to treatment. Lately the virtual rcality technology has been applied to dcal with the anxiety disorders in order to compcnsate for these defects. A virtual environment provides a patient with stimuli which cvokes a phobia. and the patient's exposure to the virtual phobic situation make him be able to overcome it. In this study, we suggested the public speaking simulator based on a personal computer for the treatment of social phobia. The public speaking simulator was composed of a position sensor. head mount display and audio system. And a virtual environment for the treatment was suggested to be a seminar room where 8 avatars are sitting. The virtual environment includes a tracking system the trace a participant's head-movement using a HMD with position sensor and 3D sound is added to the virtual environment so that he might fcel it realistic. We also made avatars' motion and facial expression change in reaction to a participant's speech. The goal of developing public speaking simulator is to apply to treat fear of public speaking efficiently and economically. In a future study. we should get more information about immergence and treatment efficiency by clinical test and apply it to this simulator.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.210-218
• /
• 2006

본 논문은 광주과학기술원(GIST)에서 개발하고 있는 전남지역 '운주사'의 천불천탑 설화를 근간으로 한 반응형 가상 문화 체험 시스템(Responsive Multimedia System for virtual storytelling)의 햅틱 변형 상호작용에 관한 것이다. 기존의 디지털 문화재 체험 시스템은 사실적인 체험을 제공하기 위해 시각 및 청각 기술 개발에 많은 연구 및 노력이 이루어져왔다. 그러나 최근 인간의 인지 체계의 중요 요소인 촉감 상호작용의 중요성이 증대 됨에 따라, 본 논문에서는 가상 문화재 체험을 위한 햅틱 변형 알고리즘 및 상호작용 시스템을 개발하여 가상 불상을 만져보고 그 표면을 변형시키게 함으로써 몰입감을 증대하고 재미를 주는 시스템을 제공하였다. 아울러 체험의 몰입감 증대를 위해 본 시스템은 시/청각과 더불어 청각 효과를 가미하여 체험 시 발생되는 주변 환경의 소리(새, 물, 바람소리)를 제공하고, 기존의 문화체험 시스템과의 차별성을 위해 3 차원 입력장치를 이용하여 체험자가 직접 가상 불상을 변형시키면서 체험자 고유의 작품을 만들어낼 수 있는 상호작용을 제공한다. 따라서 제안된 햅틱 변형 상호작용 시스템은 체험자의 능동적 참여 및 흥미 유발을 통하여 문화 유산에 대한 교육적 효과 및 관심 증대에 기여할 수 있을 것이라 여겨진다.

• The Science & Technology
• /
• v.33 no.9 s.376
• /
• pp.32-33
• /
• 2000

21세기의 화이트칼라는 아침에 출근하면 보안이 잘 된 지능형 문으로 걸어 들어와서 데스크탑의 가상조수가 그날의 스케줄을 큰 소리로 읽는 것을 듣느다. 그리고 지능형 의자에 앉아서 그날의 할 일을 음성인식장치 PC로 챙긴다. 평판스크린으로 된 벽의 영상과 데이터를 보면서... 멀리 있는 동료들과 얘기하려면 실물 그대로 입체 비디오 회의시스템에 불러낸다.

• Proceedings of the Korean Society for Noise and Vibration Engineering Conference
• /
• 2010.05a
• /
• pp.327-327
• /
• 2010

자동차에서 실내음질은 구매결정 요소들 중의 하나로 그 중요성이 점차 증가하고 있다. 따라서 다양한 운전조건에서 운전자가 기대하는 실내음질의 기대 수준을 충족시켜야 한다. 소비자는 운전경험과 습관에 따라 기대하는 음질에 차이가 있고 소리에 대한 표현방식도 모호하기 때문에 이러한 주관적 특성을 하나의 통일된 표현으로 정의 하기가 어렵다. 그러나 지난 이십여 년 동안의 음질개발과 차량 실내소음 주관평가의 통계처리로 통일된 표현을 할 수 있었다. 나아가 심리음향학 및 신호처리기술의 발달과 꾸준한 음질연구결과로 소리특성을 객관적으로 나타내는 소리의 시각화가 가능하였으며, 운전자가 인식하는 주관평가와의 상관관계를 높여 차량의 대표적인 음질인자로 정량화하여 음질목표를 설정할 수 있었다. 실내소음의 구성은 엔진 투과음, 흡배기 소음, 바람 소음, 도로 기인 소음 등으로 다양하므로 소음원에 따라 음의 균형을 맞추어 조화로운 음질개발을 하는 것이 중요했다. 또한 차량 판매되는 지역에 따라 선호음이 상이하여 지역별 실내음질의 차별화가 필요했다. 궁극적으로는 운전자의 감성품질을 만족할 수 있도록 음을 제어하여 브랜드 사운드를 개발하고 있다. 이러한 실내음질을 달성하기 위한 방법으로 소음원과 전달경로에 대해 기여도를 분석하고, 경로를 구성하는 시스템 별로 세분화하여 시스템 목표를 설정하였다. 시스템 개발에 중요한 인자로 차량의 동강성 및 흡차음 성능을 들 수 있다. 특히 디젤차량의 비중이 큰 유럽업체의 차량의 동강성 및 흡차음 개발 능력은 높게 평가되고 있다. 이에 유럽의 부품전문회사가 가지고 있는 해석과 시험적인 개발 방법을 통하여 전달계 특성을 만족하기 위한 시스템의 동강성 및 흡차음 특성을 개발하고 있다. 차량음질 튜닝의 중요한 기법 중 하나로 흡배기 개발을 추진하고 있다. 친환경자동차인 하이브리드차량, 전기차량 및 연료전지차량의 경우 전기구동부품에서 발생하는 각종 이음 발생을 최소화 했다. 보행자를 보호하고 운전의 즐거움을 향상하기 위한 가상사운드 개발을 진행하고 있다. 회사 수익성 향상을 위한 원가절감 및 구조 경량화에 따른 음질악화와 연비 향상 및 배기가스 규제 강화로 고성능 고출력 엔진탑재에 따른 음질악화 요인을 극복해야 했다. 운전자의 청감은 차량의 운전성에 따라서도 크게 영향을 받게 되므로 엔진제어와 변속기제어를 통해 음질과 운전성이 조화를 이룰 수 있도록 개발하고 있다. 향후, 소음원에 따른 시스템 최적화 개발, 운전성과 음질 연계 개발과 친환경차량의 가상사운드 개발 등이 자동차 음질 개발의 중요한 이슈로 생각한다.

• Broadcasting and Media Magazine
• /
• v.16 no.4
• /
• pp.31-45
• /
• 2011

사용자가 원하는 3D 사운드 혹은 소리의 공간감을 원하는 대로 재현할 수 있는 오디오 시스템은 오랜 기간 동안 인류가 가지고 싶었던 꿈의 기계였다. 그러나 과연 개인 혹은 사용자가 원하는 3D 사운드라는 것이 무엇이며 어떻게 정의하여야 하는지는 명확하지 않다. 이것은 매우 주관적인 개념일 뿐만 아니라 개인에 따라 다를 수 있으며, 그 평가에 대한 객관적인 방법 또한 존재하지 않는다. 관련된 연구를 살펴보면, 원하는 소리의 파동 전파 자체를 시공간 상에서 물리적으로 재현하는 WFS(Wave Field Synthesis)나 Ambisonics, 또는 머리전달함수(HRTF: Head Related Transfer Function)를 기반으로 한 많은 연구들이 있다. 이렇게 재현된 음장(sound field)을 보면 이들이 인지되고 평가되는 등의 객관화를 위하여는 청취 환경에 따라 그 특성이 바뀌고 동일한 환경에서도 청취자에 따라 다르게 인지되는 근본적인 문제점을 가지고 있다. 음장 재현 방법의 이러한 근본적인 문제는 놀랍게도 과거의 스테레오 시스템에서 볼 수 있는 밸런스 노브(balance knob)로부터 그 해결의 실마리를 찾을 수 있다. 밸런스 노브는 보편적인 최적의 소리를 찾는 대신에 청취자가 원하는 음향 효과를 얻을 때까지 직접적으로 소리를 청취하고, 스스로 조절하여 평가할 수 있는 매개체의 역할을 수행한다. 만일 밸런스 노브와 같이 청취자가 원하는 3D 사운드를 스스로 평가하고 조절하기 위한 방법을 마련할 수 있다면? 즉, 청취자가 시공간적으로 원하는 3D 사운드를 실시간으로 청취하고 변화시킬 수 있는 인터페이스를 구현할 수 있다면? 과연 그러한 것이 어떻게 가능할 수 있는지 체계적인 검토가 이루어질 수 있다면 매우 좋을 것이다. 본 고는 이러한 것을 가능케 할 수 있는 즉, 청취자가 자유 자재로 원하는 음장을 형성할 수 있는 렌더링 기법 및 즉각적인 피드백이 가능한 인터페이스를 소개하고 있다. 인터페이스는 현재까지 오디오 시스템에서 주로 사용되는 주파수 이퀄라이져(frequency equalizer)와 매우 유사한 특징이 있다. 이러한 점을 감안하여 "Spatial Equalizer$^{(R)}$"라는 이름을 붙여 보았다. Spatial Equalizer$^{(R)}$는 공간 상에 하나의 점 또는 다수의 점으로 표시되는 가상 음원을 사용자가 조종하여 원 소리의 공간감을 제어할 수 있도록 구성되어 있다. 공간 상에 다수의 점 음원들의 위치를 변화시키거나 크기를 변화시킴으로써 청취자가 원하는 공간감을 구현할 수 있도록 하고 있다. 중요한 것은 종전의 이퀄라이져와 같이 Spatial Equalizer$^{(R)}$에 의해 형성되는 음장이 어떤 객관적인 척도에 의해서 평가되는 대신 사용자에 의해 직접 주관적으로 평가되고, 선택된다는 점이다.

• Journal of the Korea Society of Computer and Information
• /
• v.27 no.11
• /
• pp.81-87
• /
• 2022

In this paper, we propose diffraction-based sound control method to improve sound immersion in a virtual environment. The proposed technique can express the wave and flow of sound in a physical environment and a pattern similar to diffraction in real-time. Our approach determines whether there is an obstacle from the location of the sound source and then calculates the position of the new sound reflected and diffracted by the obstacle. Based on ray tracing, it determines whether or not it collides with an obstacle, and predicts the sound level of the agent behind the obstacle by using the vector reflected and refraction by the collision. In this process, the sound attenuation according to the distance/material is modeled by attenuating the size of the sound according to the number of reflected/refracted rays. As a result, the diffraction pattern expressed in the physics-based approach was expressed in real time, and it shows that the diffraction pattern also changes as the position of the obstacle is changed, thereby showing the result of naturally spreading the size of the sound. The proposed method restores the diffusion and diffraction characteristics of sound expressed in real life almost similarly.