• 인터넷정보학회논문지
• /
• 제15권3호
• /
• pp.11-19
• /
• 2014

내츄럴 유저 인터페이스는 마우스, 키보드, 펜과 마커를 이용하지 않는 신체를 이용한 자연스런 모션 인터페이스이다. 지금까지 대표적인 동작 인식 방법은 마커를 이용하는 방식이었고 그 인식 방법은 각 마커의 좌표를 상대적인 데이터로 입력 받아 데이터베이스에 각 좌표 값을 저장하는 것이었다. 그러나 정확한 동작을 인식하기 위해서는 더 많은 마커들이 필요하고 그 마커들을 붙이는 것과 데이터들을 처리하는 데에 상당한 시간이 걸린다. 또, NUI/NUX 프레임워크를 개발하면서, 가장 중요한 직관성을 배제한 개발로 사용상에 문제가 생겼고 계속해서 사용자에게 암기만을 강요하고 있다. 이 문제를 보완하기 위해, 본 논문에서는 마커를 이용하지 않았고 남녀노소 누구나 다룰 수 있도록 구현했다. 또, 목소리, 신체 동작, 얼굴 표정 등을 동시에 인식하는 멀티모달 NUI/NUX 프레임 워크를 설계했고, 직관적인 손동작을 인식하는 것과 모니터에 그것을 매핑하기 위해 새로운 마우스 이벤트 알고리즘을 제안했다. 우리는 사용자들이 쉽고 직관적으로 핸드마우스 이벤트를 다루도록 구현했다.

• 한국CDE학회논문집
• /
• 제21권2호
• /
• pp.159-169
• /
• 2016

In order to realize the virtual prototyping (VP) of digital products, it is important to provide the people involved in product development with the appropriate visualization and interaction of the products, and the vivid simulation of user interface (UI) behaviors in an interactive 3D virtual environment. In this paper, we propose an approach to web-based 3D virtual experience using Unity and Leap Motion. We adopt Unity as an implementation platform which easily and rapidly implements the visualization of the products and the design and simulation of their UI behaviors, and allows remote users to get an easy access to the virtual environment. Additionally, we combine Leap Motion with Unity to embody natural and immersive interaction using the user's hand gesture. Based on the proposed approach, we have developed a testbed system for web-based 3D virtual experience and applied it for the design evaluation of various digital products. Button selection test was done to investigate the quality of the interaction using Leap Motion, and a preliminary user study was also performed to show the usefulness of the proposed approach.

• 한국컴퓨터정보학회논문지
• /
• 제15권9호
• /
• pp.77-85
• /
• 2010

최근 다양한 컨버전스 제품이 활발하게 개발되면서 사용자 유저 인터페이스의 연구가 매우 활발하게 이루지고 있으며 사용자 중심 연구에서 좀 더 구체적인 방향으로 사용자 경험 중심으로 사용자 인터페이스를 개발하고 있는 추세이다. 이러한 경향은 사용자의 중심개발 단계에서 다음 단계로 사용자의 감성을 잘 나타낼 수 있는 제품 개발을 초점을 맞추고자 하자 객관적 접근이 어려운 점이 있어 과거 사용자의 경험 자료를 기반 근거를 제시함으로써 판단 근거가 있는 사용자 유저 인터페이스 디자인 프로세스 및 설계 방향을 정립하게 되므로 좀 더 구체적이고 객관적 근거를 나타낼 수 있게 되었다. 이러한 관점에서 사용자의 경험을 나타내는 심리학적 설명 변수로서는 연령, 직업 등 은 제품 개발 시점에 사용자에 연구를 통해서 활발히 연구가 되어왔으며 해당 변수에 따른 제품들이 출시되고 있다. 반면에 문화적 차이로서 사용자의 경험을 구분하는 등의 심리적 차이에 대한 고려한 제품 개발은 아직 진척이 되고 있지 않다. 문화적 차이를 익히 알고 있지만 판단 근거가 연령이나 나이, 직업처럼 구분하기 어려운 점도 있다. 따라서 먼저 문화적 차이에 대한 이론적 배경 중 사용자 인터페이스 디자인에 관련하여 고려할 수 있는 사고유형에 따른 메뉴 정보 구조를 어떻게 디자인 할 것 인지에 대한 개념을 제시한다. 사고 유형 중 사물에 범주에 관한 사고 유형에 따른 구분으로 분석적 유형과 관계적 유형으로 구분하여 컨버전스 제품의 대표적인 디지털 TV의 메뉴 정보에 대한 유사성 및 관계성에 대한 평가를 실시하였다. 실시한 결과 분석적 유형 집단과 관계적 유형 집단의 결과가 차이를 나타내고 있고 이러한 차이를 고려한 메뉴 정보 디자인 컨셉을 이용하여 사용자 경험 중심 디자인 개발의 설명 변수로 사용하고자 한다.

• 대한산업공학회지
• /
• 제38권3호
• /
• pp.182-190
• /
• 2012

With the progress of both wire and wireless home networking technology, various projects on smart home have been carried out in the world (Harper, 2003), and at the same time, new approaches to interact with smart home systems efficiently and effectively have also been investigated. A gesture-based interface is one of these approaches. Especially with advance of gesture recognition technologies, a variety of research studies on gesture interactions with the functions of IT devices have been conducted. However, there are few research studies which suggested and investigated the use of gestures for controlling smart home appliances. In this research the gestures for selected smart home appliances are suggested based on a user centered approach. A total of thirty-eight functions were selected, and a total of thirty participants generated gestures for each function. Based on the Nielsen (2004), Lee et al. (2010) and Kuhnel et al. (2011), the gesture with the highest frequency for each function (Top gesture) has been suggested and investigated.

• 한국정보통신학회논문지
• /
• 제25권10호
• /
• pp.1323-1329
• /
• 2021

손 표현 인식을 위해서는 손의 정적인 형태를 기반으로 하는 손 자세 인식과 손의 동적인 움직임을 기반으로 하는 손 동작 인식이 함께 사용된다. 이 논문에서는 손 표현 인식을 위해 손가락의 위치와 형태를 기반으로 하는 계층적 손 자세 모델을 제안한다. 손 자세 인식을 위해서는 오픈소스인 미디어파이프를 기반으로 하고, 손가락 상태를 나타내는 모델과 이를 통해 손 자세를 나타내는 모델을 계층적으로 구성하였다. 손가락 모델 역시 손가락 하나의 굽힘과 손가락 두 개의 닿음을 사용하여 계층적으로 구성하였다. 제안하는 모델은 손을 통해 정보를 전달하는 다양한 응용에 사용할 수 있으며, 수화에서의 숫자 인식에 적용하여 그 유용성을 검증하였다. 제안하는 모델은 수화 인식 이외에 컴퓨터의 사용자 인터페이스에서 다양한 응용이 가능할 것으로 기대한다.

• 한국산업정보학회논문지
• /
• 제24권5호
• /
• pp.129-137
• /
• 2019

정보 기술의 발전에 따라 유비쿼터스 컴퓨팅 기술이 대두되고 있다. 이에 맞춰 디바이스의 소형화와 사용자의 편리성을 증대시키기 위한 여러 연구가 진행되고 있다. 그중 몇몇의 제안된 디바이스들은 사용자가 착용해야 한다는 점과 손에 들고 동작시켜야 한다는 불편함이 있다. 본 논문에서는 이러한 불편함을 해결하기 위해 텔레비전 시청 시 사용할 수 있는 가상 버튼을 제안하였다. 텔레비전을 통해 영상 시청 시 전방에서 사용자가 영상을 시청한다는 점을 이용해 카메라를 TV 상단에 설치하여 카메라가 머리 위쪽을 촬영하게 한다. 촬영된 영상에서 배경과 손 영역을 분리하여 검출하고, 검출된 손 영역에 외곽선을 검출한 후 손가락의 끝점을 검출한다. 손가락의 끝점을 검출하면 전방을 촬영하고 있는 영상 상단에 가상 버튼 인터페이스가 출력되며 검출된 손가락의 끝점이 포인터가 되어 위치정보를 갖고 버튼 안쪽에 위치할 경우 버튼이 동작한다.

• 대한산업공학회지
• /
• 제36권1호
• /
• pp.52-58
• /
• 2010

The level of competition has reached the limits in cellular phone market and the cellular phone manufacture companies started to focus their solution in user interface. Design issues with controllability led the development and renovation of such products to the use of the touch-screen phone. Depending upon the readability, technical advances, portability and controllability, user satisfaction of touch-screen phones could vary significantly. In this research, the controllability was dealt in regard to various grip postures, in order to improve menu layout which fits for using the thumbs of both hands and a thumbs of single hand. Regression models are found to the suggest the location of buttons on the screen by redesigning the menu layout, it is expected to improve both controllability and satisfaction of the user. This result can be applicable not only to mobile phone design, but also to the design of various hand-held devices using a touch screen.

• 한국정보통신학회:학술대회논문집
• /
• 한국해양정보통신학회 2002년도 추계종합학술대회
• /
• pp.378-381
• /
• 2002

본 논문에서는 근전도(EMG) 신호를 이용하여 휴먼보조 장치나 원격 제어에 활용할 수 있는 가상 로봇 팔 제어 방식을 제안한다. 4개의 표면 전극에서 근전도 신호를 측정하여 SOM과 LVQ를 이용하여 동작을 분류하는 시스템이다. 인터페이스 프로그램은 PC 상에서 구성하였다. 제안한 방식의 실험결과 94%의 분류 성공률을 얻었다.

• 한국위성정보통신학회논문지
• /
• 제9권1호
• /
• pp.1-5
• /
• 2014

최근 산업의 발달로 인한 빌딩 등의 인텔리젼트화가 빠른 속도로 진행됨에 따라, 사무실환경, 주거환경에 있어서 쾌적성, 효율성, 편리성을 추구하게 되면서, 인간은 생활에서 다양한 디바이스를 사용 할 수 있게 되었다. 특히, 스마트TV 과 스마트폰 등이 널리 보급되면서 인간과 스마트 기기간의 인터랙션에 대한 관심이 증대되고 이러한 인터랙션을 위해 다양한 방법들이 연구되었지만 사람이 컨트롤러를 이용하여 인터랙션 해야 한다는 불편함과 한계점이 발생하였다. 본 논문에서는 사용자가 LED 제어를 컨트롤러 없이 제스처(손동작)를 통해 간편하게 인터랙션 및 제어 할 수 있도록 Kinect를 이용한 방법을 소개한다. Kinect 센서로부터 획득한 제스처의 관절 정보를 이용하여 발광 소재를 제어하는 인터페이스를 설계 및 구현하였다. 제스처(손동작)을 구현한 인터페이스를 통해 LED를 사용자가 원하는 대로 개별 제어 가능하다. 본 논문에서 설계한 인터페이스는 LED 제어 및 다양한 분야에 응용하여 유용하게 사용될 수 있을 것으로 기대된다.

• 한국컴퓨터그래픽스학회논문지
• /
• 제23권3호
• /
• pp.9-17
• /
• 2017

본 연구는 사용자에게 새로운 가상현실 환경에서 새로운 경험과 현존감을 제공하기 위하여 3인칭 시점의 가상현실 콘텐츠 제작 공정을 제안한다. 이를 위해 우선 이야기, 재미요소 그리고 게임성을 포함하는 3인칭 관찰자 시점의 가상현실 콘텐츠를 제작한다. 이는 기존의 가상현실 콘텐츠와 다른 3인칭 시점에 적합한 인터페이스를 사용자가 사전에 학습할 수 있는 튜토리얼 장면과 배경 이야기를 토대로 게임적 요소를 활용하여 목적을 달성하는 콘텐츠 장면으로 구성한다. 다음은 3인칭 가상현실 콘텐츠에 적합한 인터페이스를 설계한다. 본 연구는 손을 사용하여 가상환경 또는 객체와 상호작용할 수 있는 인터페이스를 제안한다. 제안하는 인터페이스는 캐릭터의 이동, 다중 선택을 포함한 가상객체의 선택, 가상공간을 활용한 3차원 메뉴 제어의 3단계로 구성한다. 마지막으로 제안한 인터페이스를 통해 제작된 3인칭 가상현실 콘텐츠를 높은 만족감으로 편리하게 제어할 수 있음을 설문 실험을 통해 확인한다.