• Journal of Broadcast Engineering
• /
• v.16 no.6
• /
• pp.941-950
• /
• 2011

With the recent advance in the performance of mobile phones, many effective interfaces for them have been proposed. This paper implements a hand-gesture-and-vision-based interface on a mobile phone. This paper assumes natural interaction scenario when user holds a mobile phone in a hand and sees the other hand's palm through mobile phone's camera. Then, a virtual object is rendered on his/her palm and reacts to hand and finger movements. Since the implemented interface is based on hand familiar to humans and does not require any additional sensors or markers, user freely interacts with the virtual object anytime and anywhere without any training. The implemented interface worked at 5 fps on mobile phone (Galaxy S2 having a dual-core processor).

• 한국HCI학회:학술대회논문집
• /
• 2008.02a
• /
• pp.91-96
• /
• 2008

증강현실(Augmented Reality)을 위한 효과적인 비전 기반 인터페이스 개발은 꾸준히 진행되어 왔으나, 대부분 환경적 제약을 받거나, 특수한 장비 혹은 복잡한 모델을 요구한다. 예를 들어, 마커를 이용하면 구현 상의 편의성과 정확성을 보장하지만, 일반적으로 마커는 환경과 대비되는 모양을 가지기 때문에, 사용자에게 거부감을 줄 수 있으며 무엇보다 복잡한 인터랙션에는 적용되기 힘들다. 한편, 손동작을 이용할 경우, 자연스럽고 다양한 인터랙션을 수행할 수 있지만, 색을 이용한 손동작 인식은 복잡한 환경에서 인식률이 크게 저하되고, 3 차원 모델 기반의 손동작 인식은 많은 연산량을 필요로 한다는 문제점을 가진다. 이로 인해 지금까지 제안된 방법을 증강현실 시스템에 적용하는 데는 한계가 있다. 본 논문에서는 기본적으로 손동작을 이용한 인터페이스를 제안하는데, 손동작 인식을 위한 알고리즘을 효율적으로 개선함으로써, 복잡한 환경에서 적은 연산량으로 자연스러운 인터랙션을 제공하고자 한다. 제안방법은 손목에 컬러 밴드를 착용하고, 색 정보를 이용하여 손을 포함하는 최소 영역을 용이하게 검출함으로써, 손 동작 인식률이 좋아지도록 하였다. 제안된 인터페이스는 손의 자연스러운 움직임을 감지해서 손의 모양과 동작에 따라서 가상의 물체를 자연스럽게 제어할 수 있도록 해 준다. 예를 들어, 손이 지정한 위치에 가상의 물체를 나타내고, 가상의 물체를 잡고 다양한 조작을 하는 등의 제어를 할 수 있다. 다양한 환경에서의 실험 및 사용자 평가를 통해 제안된 인터페이스의 유용성을 검증하였다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2000.10b
• /
• pp.919-922
• /
• 2000

본 논문에서는 가상 인터페이스로서 범용적으로 사용할 수 있는 실시간 비전 기반 얼굴 애니메이션을 제안한다. 이를 위해서 실시간으로 얼굴 구성요소를 추출하고, 이를 정량화 하였다. 정량화된 값과 자연스럽게 매핑하기 위해서 정합함수를 통해 3차원 모델에 맵핑하기 위한 방안을 제안한다. 일반적으로 3차원 애니메이션을 수행할 경우, 기본 모델을 중심으로 특정한 사용자만을 위주로 수행되나, 본 논문에서는 임의의 일반 사용자를 위한 3차원 애니메이션을 수행하였다. 여러 사용자에 대하여 얼굴 구성요소 추출을 이용한 3차원 얼굴 애니메이션 동작에 대하여 실험하였으며 실험결과 여러 사용자 얼굴 애니메이션 동작에 대하여 만족할 만한 성능을 보였다.

• The Journal of the Korea institute of electronic communication sciences
• /
• v.8 no.12
• /
• pp.1933-1940
• /
• 2013

Recently, due to improvement of computer performance and development of information devices, technology of mobile augmented reality is proliferating rapidly. However, because most of contents are passive or limitary, user can not feel interest and immersion. This paper designs interaction user interface system of 2 dimensional drawing based on mobile augmented reality to make bi-directional communication between the real world and the virtual world possible by using the vision based augmented reality and the database system.

• 한국HCI학회:학술대회논문집
• /
• 2006.02a
• /
• pp.1313-1318
• /
• 2006

게임이 생활의 일부분과 산업구조상 핵심산업으로 자리하면서 그 사용빈도가 점점 증가하고 있으나 그 주 사용층이 젊은층이고 온라인 형태의 게임컨텐츠가 주를 이루면서 사용자들의 체력저하 및 개인화, 그리고 그들 가족간의 대화시간이 줄어들고 있다. 본 논문에서는 개인화되는 온라인 게임을 탈피하여 게임의 장르를 가족형 게임 (Family Game), 아웃도어 (Outdoor) 그리고 협력(Cooperation)의 개념으로 설정하고, 게임 소재를 사회적 문제점으로 떠오르고 있는 다이어트로 함으로써 새로운 시각에서 가족 구성원 모두가 게임에 참여할 수 있는 다수 참여형 인터렉티브 게임, 펀치 펀치 다이어트 (Punch Punch Diet)를 구현하였다. 본 논문에서 구현한 펀치펀치다이어트 게임은 대형스크린을 기반으로 한 가족형 게임에 관한 것으로, 컴퓨터 비전을 이용하여 게임참여자의 특정색상 및 패턴검출을 함으로써 기존의 마우스와 조이스틱등이 가지고 있던 정적인 입력인터페이스 방식을 탈피하여 게임 참여자 모두가 몸의 위치를 입력으로 이용하는 직관적 사용자 입력 인터페이스를 사용하였다. 펀치펀치 다이어트 게임은 기존 게임이 가지고 있던 "사람-(물리적 입력장치)-게임"의 관계를 "사람-(비접촉 입력장치)-게임"의 관계로 매핑한 게임으로 게임에 참여하는 사용자가 특별한 컴퓨터 입력장치 조작에 관련된 지식없이도 능동적으로 게임에 참여할 수 있도록 하였다.

• The Journal of the Korea Contents Association
• /
• v.11 no.12
• /
• pp.619-628
• /
• 2011

Normally vision-based 3D human pose recognition technology is used to method for convey human gesture in HCI(Human-Computer Interaction). 2D pose model based recognition method recognizes simple 2D human pose in particular environment. On the other hand, 3D pose model which describes 3D human body skeletal structure can recognize more complex 3D pose than 2D pose model in because it can use joint angle and shape information of body part. In this paper, we describe a development of interactive game contents using pose recognition interface that using 3D human body joint information. Our system was proposed for the purpose that users can control the game contents with body motion without any additional equipment. Poses are recognized comparing current input pose and predefined pose template which is consist of 14 human body joint 3D information. We implement the game contents with the our pose recognition system and make sure about the efficiency of our proposed system. In the future, we will improve the system that can be recognized poses in various environments robustly.

• 한국HCI학회:학술대회논문집
• /
• 2009.02a
• /
• pp.443-448
• /
• 2009

We introduce an interactive image cartooning system based on personal subjectivity. To effectively tune various parameters needed to adjust image style, our system uses interactive genetic algorithm. By selecting several pre-stylized image samples using simple user interface, the user can easily achieve the desired result without having any signal-processing knowledge. Our system reduces the parameter tuning time drastically compared to the conventional system, which involves manual parameter setting.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• fall
• /
• pp.172-175
• /
• 2021

4차 산업혁명이 시작된 이래로 다양한 산업 분야에서 AI가 활용되고 있고, 그 중에서도 컴퓨터 비전 분야에서 딥러닝 기술이 각광받고 있다. 하지만 딥러닝 기술은 높은 전문 지식이 요구되어 관련 지식이 없는 일반인들은 활용하기 어렵다. 본 논문에서는 AI 관련 배경지식이 없는 사용자들도 UI를 통해 쉽게 이미지 분류 모델을 학습시킬 수 있는 노 코드 플랫폼에 관하여 기술하고, django 프레임워크를 이용해 웹 개발과 딥러닝 모델 학습을 통합 개발을 위한 아키텍처와 방향성을 제시하고자 한다. 사용자가 웹서버에 업로드한 이미지들을 웹 인터페이스를 통해 라벨링 하여 학습 데이터를 생성한 후, 이 데이터를 사용하여 모델을 학습시킨다. CNN 모델에 데이터를 학습시키는 과정과 생성된 모델 기반으로 이미지 예측하는 모듈을 통해 전문지식이 없는 사용자가 딥러닝 기술에 대해 쉽게 이해하고 이용하는 것을 기대할 수 있다.

• Journal of Digital Convergence
• /
• v.11 no.7
• /
• pp.157-163
• /
• 2013

In this paper, we propose a vision and depth information based real-time hand gesture interface method using finger joint estimation. For this, the areas of left and right hands are segmented after mapping of the visual image and depth information image, and labeling and boundary noise removal is performed. Then, the centroid point and rotation angle of each hand area are calculated. Afterwards, a circle is expanded at following pattern from a centroid point of the hand to detect joint points and end points of the finger by obtaining the midway points of the hand boundary crossing and the hand model is recognized. Experimental results that our method enabled fingertip distinction and recognized various hand gestures fast and accurately. As a result of the experiment on various hand poses with the hidden fingers using both hands, the accuracy showed over 90% and the performance indicated over 25 fps. The proposed method can be used as a without contacts input interface in HCI control, education, and game applications.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2005.05a
• /
• pp.1019-1022
• /
• 2005

멀티미디어 콘텐츠에 대한 처리기술과 사용자 인터페이스의 발전으로 인해, 교육 현장에서 광범위하게 사용되는 교육 도구로 e-러닝이 자리 잡고 있다. 현재까지 연구되어온 교육 콘텐츠는 단순한 상호작용만을 허용하고, 실습형 인터페이스를 제공하기에는 제약이 따르며, 기존의 콘텐츠를 재구성하여 개발하기에는 많은 비용과 시간이 소요된다. 그리고 학습효과 측정에 대한 의식이 희박하고, 콘텐츠 평가의 명확한 기준이 없어 품질 향상에 많은 어려움이 뒤따른다. 이를 개선하기 위해 본 논문에서는 멀티미디어를 이용한 자기주도적 학습 콘텐츠를 제작한다. 이렇게 제작된 교육 콘텐츠를 비전 기반의 증강현실을 이용하여 더욱더 직관적이고, 인터랙티브한 교육 콘텐츠를 제공한다.