Abstract
The study intends to use interactive multimedia art performances for rehabilitation exercises for patients with early dementia. The interactive performance is completed by communication and participation of the performer on the stage and the dementia patient, who is the audience, and through this process, the dementia patient performs efficient rehabilitation exercises with interest and immersion. For the study, the characteristics of early dementia patients and effective exercise methods are examined, and a program map is constructed so that the patient's performance viewing leads to participation and leads to rehabilitation exercises. Movements and sounds generated by the audience's participation are converted into MIDI signals of Sound Level, Pitch, and Velocity to become a performance that controls music and video in real time. Through this, the patient will be immersed in the rehabilitation exercise with interest and will be able to have a sense of accomplishment as a participant in the performance. In addition, this study has the significance of expanding the area through various uses and applications of interactive multimedia art.
본 연구는 인터랙티브 멀티미디어 아트 공연을 초기 치매 환자의 재활 운동을 위해 활용하고자 한다. 무대 위의 퍼포머와 관객인 치매 환자의 소통과 참여로 인터랙티브 공연이 완성되며 이러한 과정을 통해 치매 환자는 흥미와 몰입을 동반한 효율적인 재활 운동을 하게 된다. 연구를 위해 초기 치매 환자의 특성과 효과적인 운동 방법을 살펴보고 환자의 공연 관람이 참여로 이어지면서 재활 운동으로 유도 될 수 있도록 프로그램 맵을 구축한다. 관객의 참여로 발생하는 동작과 소리는 Sound Level, Pitch, Velocity의 MIDI 신호로 변환되어 실시간으로 음악과 영상을 콘트롤하는 퍼포먼스가 된다. 이를 통해 환자는 흥미를 가지고 재활 운동에 몰입하게 되며 공연의 참여자로서 성취감을 가질 수 있을 것이다. 또한 이 연구는 인터랙티브 멀티미디어 아트의 다양한 활용과 응용으로 영역 확장의 의의가 있다.