A Study of the spatial perception by audio-visual information

Psychophysical experiment was performed to investigate how audio-visual spatial disparity affects on perceptual space in peripheral vision. In the experiment, participants were exposed to two stimuli of vision and sound which comes simultaneously from different directions, respectively. The visual stimulus was implemented by 7 white LEDs which were located at an equal distance with 7 different angles of $-70^{\circ}$, $-40^{\circ}$, $-20^{\circ}$, $0^{\circ}$, $20^{\circ}$, $40^{\circ}$, and $70^{\circ}$ from the right front. Those audial stimuli were also implemented by loudspeakers which were placed at 9 different directions equally spaced by $5^{\circ}$ ranged from $-20^{\circ}$ to $20^{\circ}$. Each participant then evaluated spatial disparity between visual and audial stimuli with 5 levels of response, in which the higher level indicates the larger gap. When the visual stimulus is applied from the right, the results show that the response level gets higher for a larger angle between visual and auditory stimuli. A similar tendency for the visual stimulus with $0^{\circ}$ orientation was also be observed. On the other hand, when the visual stimulus is applied from the left, the response level gets lower for the larger angle.

시각과 청각에 의한 공간적 지각에 관한 연구

본 연구에서는 시청각 자극의 공간적 차이가 지각 공간에 있어서 사물과 영상의 배치에 주는 영향을 조사하기 위해 심리적 실험을 하였다. 실험에서는 시각자극과 청각자극을 동시에 제시하고 두 개의 자극이 공간적으로 어느 정도 차이를 느끼는가를 판단하였다. 시각자극은 정면에 있는 스피커를 중심으로 $-70^{\circ}$, $-40^{\circ}$, $-20^{\circ}$, $0^{\circ}$, $20^{\circ}$, $40^{\circ}$, $70^{\circ}$의 7방향, 청각자극은 시각자극을 중심으로 하여 $-20^{\circ}{\sim}20^{\circ}$까지 $5^{\circ}$ 간격으로 9방향을 제시하였다. 실험 참가자는 시각자극과 청각자극이 어느 정도 차이가 있다라고 느낀 것을 1에서 5까지 5단계 평가 척도를 이용하여 회답하였다. 그 결과 시각자극의 제시 각도가 $0^{\circ}$의 경우는 청각자극의 제시 각도가 시각자극의 제시 각도에서 멀어짐에 따라 점차적으로 크게 나타났으며 제시 각도를 중심으로 좌우 대칭으로 나타났다. 정면에서 우측에 시각자극이 제시된 경우는 청각자극의 제시 각도가 시각자극의 제시 각도에서 멀어짐에 따라 평가치가 크게 되었다. 이것은 시각자극의 제시 각도가 $0^{\circ}$의 경우와 같은 경향을 나타내었다. 반대로 좌측에 시각자극이 제시된 경우는 평가치가 작게 나타났다. 이것은 제시 각도가 멀어짐에도 불구하고 같은 방향에서 제시되고 있다는 것을 알 수 있으며 거리를 짧게 인식하는 경향이 나타났다.