• 한국통신학회논문지
• /
• 제38C권10호
• /
• pp.920-927
• /
• 2013

크로마키 방식에 의한 영상 합성은 색상 정보에 의해 전경 후경을 분리하기 때문에 객체 색상의 제약과 특정 스크린이 위치해 있어야 하는 공간의 제약이 있다. 특히 스테레오스코픽 3D 디스플레이를 위한 영상 합성은 크로마키 방식과는 달리 3D 공간에서의 자연스러운 영상 합성이 요구된다. 본 논문에서는 고해상도의 깊이 정보를 이용하여 깊이 키잉(depth keying) 방식에 의한 3D 공간에서의 스테레오스코픽 영상 합성을 제안하였다. 이를 위해 DSLR과 마이크로소프트사 키넥트 센서간의 카메라 캘리브레이션을 통해 고화질의 깊이 정보 획득 후 RGB 정보와의 정합 과정을 통해 3차원 데이터를 획득하였다. 깊이 정보에 의해 배경과 분리 된 객체는 3차원 공간에서의 포인트 클라우드 형태로 표현되어 가상 배경과 합성하였다. 이후 가상의 스테레오 카메라에 의해 Full HD 스테레오스코픽 비디오 합성 영상 획득 결과를 보였다.

• 정보처리학회논문지:컴퓨터 및 통신 시스템
• /
• 제5권10호
• /
• pp.303-310
• /
• 2016

최근 Wii Sport나 Xbox Fitness 등 실제와 똑같이 몸을 움직이도록 하는 기능성 운동 게임인 엑서 게임이 인기를 끌고 있다. 그런데 이런 체감형 운동 게임에서는 사용자가 운동 자세를 얼마나 정확하게 취했는지 자세의 교정이 얼마나 필요한지를 알 수 있기 위하여 자세 인식이 크게 중요하다. 본 연구에서는 고령자를 대상으로 한 운동프로그램 콘텐츠에서 사용자의 자세 정보를 인식하기 위하여 키넥트 센서에서 제공하는 골격 모델의 특징점을 추출하여 각각의 특징벡터를 생성하여 만든 운동 자세 인식 모델 방법을 제안하였다. 본 논문에서는 제안하는 운동 자세 인식 모델의 설계 및 구현을 설명하였고, 간단한 실험을 통해서 제안된 운동 자세 인식 모델의 사용 가능성을 증명하였다. 실험결과 10명의 참여자들의 12가지 운동 자세에 대한 전체 평균은 94.52% 정도 일치율을 보였다.

• 한국항행학회논문지
• /
• 제17권2호
• /
• pp.240-246
• /
• 2013

본 연구는 터치스크린 방식의 정보전달 기기인 DID 시스템에 Airtouch 기술을 융합하여 새로운 방식의 정보전달 시스템을 개발하는 것이다. 대학의 학내 공지사항, 교육정보 및 취업정보 등을 열람하고 활용 할 수 있는 시스템을 설계하고 Airtouch 기술을 구현하여 원격조작 및 공유 콘텐츠 스토어, 클라우드 서비스 개발을 통한 콘텐츠 동기화 기술 구현으로 스마트융합 DID 시스템을 개발하고자 한다. 키넥트는 USB 인터페이스를 가지고 있기 때문에 정보기기와 연결하여 사용 할 수 있으며, 저렴한 가격의 제품으로 키넥트 센서를 활용하여 Airtouch 기술을 구현한다. 논문에서는 유형의 입력장치 없이 사용자의 손동작만으로 정보기기와 상호작용이 가능한 시스템인 Airtouch 기술을 활용한 스마트융합 DID 시스템을 개발하여 사용자의 손 움직임을 추적하여 이를 바탕으로 마우스 포인터를 조작할 수 있고, 사용자의 손동작을 통해 정보기기에 명령을 내릴 수 있도록 하였다. Airtouch 기술을 활용한 스마트융합 DID 시스템 기술 활용으로 온라인 교육산업, 광고홍보, 정보화 산업 등 여타 산업에 파급효과를 증대시킨다. 또한, 폭넓은 범용성을 가지고 기존의 인터페이스 장치들을 대체기술 활용성이 무한 확장이 가능하다.

• 대한인간공학회지
• /
• 제31권4호
• /
• pp.593-599
• /
• 2012

Objective: This study aims to implement a non-contact gesture-based interface for presentation purposes and to analyze the effect of the proposed interface as information transfer assisted device. Background: Recently, research on control device using gesture recognition or speech recognition is being conducted with rapid technological growth in UI/UX area and appearance of smart service products which requires a new human-machine interface. However, few quantitative researches on practical effects of the new interface type have been done relatively, while activities on system implementation are very popular. Method: The system presented in this study is implemented with KINECT$^{(R)}$ sensor offered by Microsoft Corporation. To investigate whether the proposed system is effective as a presentation support tool or not, we conduct experiments by giving several lectures to 40 participants in both a traditional lecture room(keyboard-based presentation control) and a non-contact gesture-based lecture room(KINECT-based presentation control), evaluating their interests and immersion based on contents of the lecture and lecturing methods, and analyzing their understanding about contents of the lecture. Result: We check that whether the gesture-based presentation system can play effective role as presentation supporting tools or not depending on the level of difficulty of contents using ANOVA. Conclusion: We check that a non-contact gesture-based interface is a meaningful tool as a sportive device when delivering easy and simple information. However, the effect can vary with the contents and the level of difficulty of information provided. Application: The results presented in this paper might help to design a new human-machine(computer) interface for communication support tools.

• 한국정보통신학회:학술대회논문집
• /
• 한국정보통신학회 2017년도 추계학술대회
• /
• pp.185-188
• /
• 2017

고령화 인구 증가와 대비되는 노인의 낮은 건강 수명을 극복하기 위한 건강 증진은 필수적이다. 따라서 노인의 사망 위험 중 높은 비중을 차지하는 낙상을 예방하기 위한 하체 근력 강화 운동이 중요하다. 본 본문에서는 노인이 자연환경 속에서 운동을 한다고 느낄 수 있는 홈 트레이닝 콘텐츠를 개발을 목표로 하였다. 이를 위해 키넥트 센서를 사용하여 골격 모델의 특정 점을 추출하고 특징벡터를 생성하여 사용자의 운동 횟수를 인식하였다. 제안하는 게임 모델을 사용하여 운동 능력 테스트를 수행하고 이를 기반으로 개인의 능력에 맞는 운동을 처방 받아 운동을 수행할 수 있다.

• 전자공학회논문지
• /
• 제50권6호
• /
• pp.238-245
• /
• 2013

제스처 인식은 자연스러운 사용자 인터페이스를 위해 활발히 연구되는 중요한 분야이다. 본 논문에서는 키넥트 카메라로부터 입력되는 사용자의 3차원 관절(joint) 정보를 해석하여 제스처를 인식하는 방법이 제안된다. 대상으로 하는 제스처의 분포 특성에 따라 분류 트리를 설계하고 입력 패턴을 분류한다. 그리고 제스처를 리샘플링 및 정규화 하여 일정한 구간으로 나누고 각 구간의 체인코드 히스토그램을 추출한다. 트리의 각 노드별로 분류된 제스처에 다중 클래스 SVM(Multiclass Support Vector Machine)를 적용하여 학습한다. 이후 입력 데이터를 구성된 트리로 분류한 다음, 학습된 다중 클래스 SVM을 적용하여 제스처를 분류한다.

• 제어로봇시스템학회논문지
• /
• 제19권11호
• /
• pp.1036-1042
• /
• 2013

In this paper, an elderly assistance system is developed based on Xenomai, a real-time development framework cooperating with the Linux kernel. A Kinect sensor is used to recognize the behavior of the elderly and A-star search algorithm is implemented to find the shortest path to the person. The mobile robot also generates a trajectory using a digital convolution operator which is based on a Bezier curve for smooth driving. In order to follow the generated trajectory within the control period, we developed real-time tasks and compared the performance of the tracking trajectory with that of non real-time tasks. The real-time task has a better result on following the trajectory within the physical constraints which means that it is more appropriate to apply to an elderly assistant system.

• 한국산업융합학회 논문집
• /
• 제24권6_1호
• /
• pp.693-698
• /
• 2021

As technology advances, there is increasing need for research in different fields where this technology is applied. On of the most researched topic in computer vision is Human activity recognition (HAR), which has widely been implemented in various fields which include healthcare, video surveillance and education. We therefore present in this paper a human activity recognition system based on scale and rotation while employing the Kinect depth sensors to obtain the human skeleton joints. In contrast to previous approaches that use joint angles, in this paper we propose that each limb has an angle with the X, Y, Z axes which we employ as feature vectors. The use of the joint angles makes our system scale invariant. We further calculate the body relative direction in the egocentric coordinates in order to provide the rotation invariance. For the system parameters, we employ 8 limbs with their corresponding angles each having the X, Y, Z axes from the coordinate system as feature vectors. The extracted features are finally trained and tested with the Long short term memory (LSTM) Network which gives us an average accuracy of 98.3%.

• Journal of Information Technology Applications and Management
• /
• 제21권4호
• /
• pp.203-223
• /
• 2014

This study proposes a novel context-aware recommender system, which is designed to recommend the items according to the customer's responses to the previously recommended item. In specific, our proposed system predicts the user's emotional state from his or her responses (such as facial expressions and movements) to the previous recommended item, and then it recommends the items that are similar to the previous one when his or her emotional state is estimated as positive. If the customer's emotional state on the previously recommended item is regarded as negative, the system recommends the items that have characteristics opposite to the previous item. Our proposed system consists of two sub modules-(1) emotion prediction module, and (2) responsive recommendation module. Emotion prediction module contains the emotion prediction model that predicts a customer's arousal level-a physiological and psychological state of being awake or reactive to stimuli-using the customer's reaction data including facial expressions and body movements, which can be measured using Microsoft's Kinect Sensor. Responsive recommendation module generates a recommendation list by using the results from the first module-emotion prediction module. If a customer shows a high level of arousal on the previously recommended item, the module recommends the items that are most similar to the previous item. Otherwise, it recommends the items that are most dissimilar to the previous one. In order to validate the performance and usefulness of the proposed recommender system, we conducted empirical validation. In total, 30 undergraduate students participated in the experiment. We used 100 trailers of Korean movies that had been released from 2009 to 2012 as the items for recommendation. For the experiment, we manually constructed Korean movie trailer DB which contains the fields such as release date, genre, director, writer, and actors. In order to check if the recommendation using customers' responses outperforms the recommendation using their demographic information, we compared them. The performance of the recommendation was measured using two metrics-satisfaction and arousal levels. Experimental results showed that the recommendation using customers' responses (i.e. our proposed system) outperformed the recommendation using their demographic information with statistical significance.

• 한국정보통신학회논문지
• /
• 제20권12호
• /
• pp.2297-2304
• /
• 2016

본 연구에서는 스마트매트와 카메라 센서를 이용한 가상현실 체험형 운동게임 시스템 설계 및 구현하였다. 사용자 상반신 운동자세인식을 위해 키넥트 카메라 센서를 활용하고 사용자의 걷기 동작을 정확하게 인식하고 다음 취해야할 걷기 운동 동작에 대한 가이드를 제공하기 위해서 LED 표시가 가능한 스마트 매트를 개발하였다. 이를 통합하고 기능성 게임의 재미요소를 결합하여 실제 운동 상황에서 사용자에게 실시간으로 상호작용 정보를 제공하는 가상현실 체험형 운동게임 통합 시스템을 설계 및 구현하였다. 사용자들이 보다 자립적이고 독립적으로 가정 및 건강증진 관련 기관에서 쉽게 운동하는데 기여하는 체험형 운동게임 시스템으로 활용될 것이다.