• 제목/요약/키워드: Sound Interpolation

검색결과 21건 처리시간 0.018초

가상현실 음향을 위한 심층신경망 기반 사운드 보간 기법 (A Sound Interpolation Method Using Deep Neural Network for Virtual Reality Sound)

  • 최재규;최승호
    • 방송공학회논문지
    • /
    • 제24권2호
    • /
    • pp.227-233
    • /
    • 2019
  • 본 논문은 가상현실 음향 구현을 위한 심층신경망 기반 사운드 보간 방법에 관한 것으로서, 이를 통해 두 지점에서 취득한 음향 신호들을 사용하여 두 지점 사이의 음향을 생성한다. 산술평균이나 기하평균 같은 통계적 방법으로 사운드 보간을 수행할 수 있지만 이는 실제 비선형 음향 특성을 반영하기에 미흡하다. 이러한 문제를 해결하기 위해서 본 연구에서는 두 지점과 목표 지점의 음향신호를 기반으로 심층신경망을 훈련하여 사운드 보간을 시도하였으며, 실험결과 통계적 방법에 비해 심층신경망 기반 사운드 보간 방법의 성능이 우수함을 보였다.

머리 전달 함수의 보간에 적합한 왜곡 척도 (A Relevant Distortion Criterion for Interpolation of the Head-Related Transfer Functions)

  • 이기승;이석필
    • 한국음향학회지
    • /
    • 제28권2호
    • /
    • pp.85-95
    • /
    • 2009
  • 양이 재생 환경에서 다양하고 정확한 공간 이미지 형성을 위해서는 다양하고 세분화된 머리 전달 함수가 요구된다. 방대한 양의 머리 전달 함수를 효과적으로 감축하기 위한 방법으로, 모든 방향에 대한 머리 전달 함수를 몇 개의 대표 값들을 이용해 보간을 통해 얻는 방법이 주로 사용되고 있다. 본 논문에서는 머리 전달 함수의 보간 시 중요한 역할을 하는 보간 왜곡의 측정 방법에 대해 연구하였다. 다양한 객관적 왜곡 측정 방법을 이용하여 보간된 머리전달 함수와 본래의 머리전달 함수 간 차이를 표현하였으며 차이 값과 청취 테스트의 결과를 비교, 분석하였다. 분석 결과로부터 음원의 공간 이미지 차이를 가장 잘 반영하는 객관적 왜곡 측정 방법을 선택하였으며 이를 실제 보간 기법에 적용하였다. 3명의 사람으로부터 측정된 머리전달함수와 1개의 마네킹에서 측정된 머리 전달함수에 제안된 방법을 적용한 결과, 3명의 사람에 대한 머리전달 함수에 대해서는 멜-주파수 켑스트럼 왜곡이, 4 종류의 머리전달 함수에 대해서는 시간 영역의 신호 대 왜곡비자 음원의 공간 이미지 차이를 가장 잘 예측하는 왜곡 척도임을 알 수 있었다.

원형 머리 모델을 이용한 머리 전달 함수의 보간 (HRTF Interpolation Using a Spherical Head Model)

  • 이기승;이석필
    • 한국음향학회지
    • /
    • 제27권7호
    • /
    • pp.333-341
    • /
    • 2008
  • 본 논문에서는 머리 전달 함수에 대한 새로운 보간 기법을 제안하였다. 제안된 기법은 각 방위각에 대한 머리 전달 함수의 충격파 응답이 인접 방위각에 대한 시간 지연된 충격파 응답의 선형 보간으로 주어진다고 가정하였다. 각 방위각에 대한 충격파 응답의 시간 지연은 방위각, 머리의 물리적 형태, 음원과 머리의 거리 정보를 이용하여 추정될 수 있는 귀와 음원간의 전파시간과 최소 자승 오차를 갖도록 하는 교정값의 합으로 주어진다. 또한 제안된 모델에서는 보간 시 방위각의 간격을 고정 간격이 아닌 가변 간격으로 하였으며 본래 충격파 응답과 보간된 충격파 응답이 본래의 충격파 응답과 비교하여 청취 상으로 큰 차이가 느껴지지 않고, 보간에 필요한 충격파 응답의 재수가 최소화되는 조건을 만족하도록 결정하였다. 제안된 보간 모델의 유용성을 검증하기 위하여 더미 헤드 및 3명의 사람으로부터 측정된 머리 전달 함수에 대해 제안된 보간 모델을 적용하였다 머리 전달 함수는 0도의 고도각을 갖는 수평면을 5도 간격의 방위각으로 분할한 총 72개가 사용되었으며, 실험 결과 전체 머리 전달 함수 중 단지 $30\sim40%$ 만을 사용하고 나머지는 보간에 의해 얻어진 머리전달 함수를 사용하더라도 청취상의 음원의 위치가 변동되지 않음을 알 수 있었다.

엔진 없이 전기로 구동되는 자동차의 가상 엔진 음 구현을 위한 음원합성 IC에 관한 연구 (The study of sound source synthesis IC to realize the virtual engine sound of a car powered by electricity without an engine)

  • 구재을;홍재규;송영욱;이기창
    • 한국음향학회지
    • /
    • 제40권6호
    • /
    • pp.571-577
    • /
    • 2021
  • 본 연구는 기존의 엔진 없이 전기로 운행되는 자동차에 가상의 엔진소리를 구현해주는 반도체 에 관한 연구로, 운전자의 욕구 및 보행자의 안전을 지키기 위해 Adaptive Difference PCM(ADPCM) 방식과 Frequency modulation 방식을 조합하여 생생한 엔진음을 구현하였다. 또한 미디를 응용하는 전자음 합성 알고리즘을 제안하여 엔진음 합성방법, 엔진음 발생 시스템의 구성 모델을 제시한다. 본 연구는 운전자와 보행자를 모두 만족시키기 위해 캔 통신을 이용하여 운전자의 운전 습관에 따라 전해지는 엔진회전량, 차량 속도, 가속 페달 눌림 량, 토크 등의 정보를 받은 후, 미리 설정된 적절한 파라미터에 따라 주파수 변조를 위한 인터폴레이션, 정보량 축소를 위하 ADPCM 알고리즘, 엔진음을 쉽게 만들기 위한 미디 포맷을 이용하여 시스템과 운전자의 의도를 정확히 반영할 수 있는 인터렉션 알고리즘을 구현하였다.

자연스러운 이동음 효과를 위한 머리전달함수 개선 (HRTF Improvement of Smooth Moving Sound Effect)

  • 이정경;서보국;차형태
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2007년도 하계종합학술대회 논문집
    • /
    • pp.427-428
    • /
    • 2007
  • In this paper, we propose the method of generating smooth moving sound in a two-channel based 3D sound technique. HRTF is generally used to make the moving sound effect in frequency domain. But, the moving sound using the interpolation has many problems to be resolved as there are only discrete measured point of HRTF database. Therefore, HRTF of the moving sound channel makes effective moving sound by the improved grouping. Informal listening tests show that the proposed improves the effective moving sound much better than the conventional methods.

  • PDF

3차원 곡면 내삽법을 이용한 자동차 박판 부품의 변형율 측정법 개선 (An Improvement of Strain Measuring Technique by using the B-spline Surface Interpolation Method)

  • 김종봉;양동열
    • 한국자동차공학회논문집
    • /
    • 제6권4호
    • /
    • pp.141-150
    • /
    • 1998
  • The measurement of strains in stamped sheet metal is essential to the design and manufacture of sound sheet metal products. The measured strains can also be used in verifying the reliability of the computer analysis such as finite element analysis. In most engineering applications, strains are measured from the deformed square grids or deformed circular grids in comparison with the initial undeformed grids. In such a case, however, strains are averaged in each grid and the localized strain in a region smaller than a grid size can not be measured. In the present study, the B-spline surface interpolation technique is introduced in order to measure the strains more exactly and effectively. The strains calculated by using the surface interpolation technique are compared with the strains calculated from the three-noded grids as well as with the finite element analysis.

  • PDF

키프레임 얼굴영상을 이용한 시청각음성합성 시스템 구현 (Implementation of Text-to-Audio Visual Speech Synthesis Using Key Frames of Face Images)

  • 김명곤;김진영;백성준
    • 대한음성학회지:말소리
    • /
    • 제43호
    • /
    • pp.73-88
    • /
    • 2002
  • In this paper, for natural facial synthesis, lip-synch algorithm based on key-frame method using RBF(radial bases function) is presented. For lips synthesizing, we make viseme range parameters from phoneme and its duration information that come out from the text-to-speech(TTS) system. And we extract viseme information from Av DB that coincides in each phoneme. We apply dominance function to reflect coarticulation phenomenon, and apply bilinear interpolation to reduce calculation time. At the next time lip-synch is performed by playing the synthesized images obtained by interpolation between each phonemes and the speech sound of TTS.

  • PDF

소나 시뮬레이터용 거리 종속 음선 모델 개발 (Development of Range-Dependent Ray Model for Sonar Simulator)

  • 정영철;이근화;성우제;김형록
    • 한국음향학회지
    • /
    • 제33권3호
    • /
    • pp.163-173
    • /
    • 2014
  • 소나 시뮬레이터에 적용되는 음파 전달 알고리즘은 빠른 계산 성능이 요구되며, 한국 해양 환경의 특성을 고려하여 거리와 깊이 방향의 환경 의존성을 구현할 수 있어야 한다. 이러한 요구사항을 충족하는 음파 전달 알고리즘은 음선 모델이며, 본 논문에서는 거리 종속 해양환경의 음선 알고리즘을 개발하였다. 본 알고리즘에서는 사각 격자법과 층법으로 음선을 추적하여 음속 구조의 깊이 방향 의존성을 고려하였으며, 거리 방향은 split-step 개념을 적용하여 음속구조의 거리 방향 의존성을 구현하였다. 고유음선은 음선 묶음의 보간법을 통해 계산되었으며, 가우시안 보간 함수가 적용되었다. 소나의 시계열 수신 신호는 음원 신호와 고유 음선 주파수 해의 푸리에 변환을 이용하여 모의되었다. 최종적으로 제안된 음파 알고리즘을 검증하기 위해 Pekeris 도파관, 쐐기, 심해의 환경에서 전달손실 결과를 BELLHOP, SNUPE, KRAKEN, OASES 등 검증된 모델의 결과와 비교하였으며, 결과적으로 만족스런 결론을 얻을 수 있었다.

온도장 측정 정밀도 향상을 위한 시간 지연 벡터의 재형성 (Regeneration of the Retarded Time Vector for Enhancing the Precision of Acoustic Pyrometry)

  • 김태균;이정권
    • 한국음향학회지
    • /
    • 제33권2호
    • /
    • pp.118-125
    • /
    • 2014
  • 역문제에 기반한 음향 온도 측정법에서는 단면의 음속 분포 계산이 필수적이며, 이를 위하여 단면 외곽에 위치한 센서들 간의 지연시간을 계측하고, 이를 입력으로 하는 전달행렬과 계수 벡터를 이용한 역문제를 이용하여 음속 분포를 예측한다. 그러나, 센서 개수의 부족으로 인하여 충분한 수의 음향 경로가 확보되지 못하면, 지연시간 벡터의 개수가 한정될 수 있다. 지연시간 벡터의 개수는 공간 해상도와 관련 있으며, 부족한 지연시간 벡터의 개수는 공간 해상도의 저하를 초래하여 정확한 온도 재구성 결과를 얻지 못할 수 있다. 본 연구에서는 이 문제를 해결하기 위하여, 실제 측정된 지연시간으로부터 온도장을 재구성 한 뒤, 임의의 경로에 해당하는 지연시간을 재구성 된 온도장으로부터 재형성하여 지연시간 벡터의 개수를 증가시켰다. 측정된 지연시간 벡터와 재형성 된 지연시간 벡터를 함께 사용할 경우, 음향 경로의 개수가 증가하므로 공간 분해능의 향상을 기대할 수 있다. 임의의 온도 분포를 가지는 2차원 단면을 수치 예제로서 채택하였고, 측정된 지연시간만을 이용한 결과와 재형성 된 지연시간을 함께 사용한 재구성 결과를 비교하였다. 그 결과, 재형성 된 지연시간과 측정된 지연시간을 함께 사용한 경우의 온도 재구성 오차가 측정된 지연시간만을 사용한 온도 재구성 오차보다 최대 15 % 감소하였다.