Development of Korean-Sign Language Generating System based on Motion-Primitives

Motion-Primitives에 의한 한국수화 생성시스템의 개발

We have developed the sign-language synthesis system, which can be applied for intelligent terminal equipments, for the purpose of communications between normal people and the hearing-impaired. In the system, we generate the behavior of the sign-language words using CG animation based on Motion-Primitives of the motion observed of each legion of the body in the generation of words, the conventional system was difficult to control the shape of hands and the motions of hands and shoulder, requiring lots of time for the processing. Also it is a big problem to make a large database of sign-language, because it requires over 5,000 words to translate the sign-language. Therefore, in this paper, we propose the new system that is easy to construct the database by using Motion-Primitives, which can make paths of various motions more smooth than conventional systems. We have tested 100 words of the sign-language against the hearing-impaired with the proposed system. As the result of testing by the proposed system, we have earned a good recognition rate with 82%. On the other hand, we had earned the recognition ratio with 76% by using the former system.

복지형 정보단말 장치로 청각장애인과 건청인사이의 커뮤니케이션을 지원하기 위한 수화 생성시스템이 개발되었다. 이 시스템에서는 신체의 각 부위의 움직임을 주목한Motion-Primitives에 기초로 하여 컴퓨터그래픽(CG) 애니메이션으로 수화 단어 동작을 생성하고 있다. 기존의 수화 생성시스템은 수화 단어를 생성할 때 손 모양이나 손과 어깨의 움직임을 제어하기가 어려워 수화 단어를 생성하는데 많은 시간이 소요되었다. 또한 수화 통역을 위해서는 수화단어가 5000단어 이상이 필요하기 때문에 수화단어 데이터 베이스를 구축하는 것도 큰 문제로 대두되고 있다. 따라서, 본 논문에서는 종래의 시스템보다 수화단어 구축에 있어서 다양한 움직임의 경로를 유연하게 만들수 있는 Motion-Primitives에 의한 새로운 시스템을 제안한다. 이 제안한 시스템을 적용하여 실제로 청각장애인을 대상으로 수화단어 100단어에 대하여 평가실험을 행한 결과 종래의 시스템으로 평균 76%의 인식 율을 얻을 수 있었던 것에 비하여 새롭게 제안한 시스템은 82%의 양호한 인식 율을 얻을 수 있었다.