• 제목/요약/키워드: Gesture-Based User Interface

검색결과 107건 처리시간 0.031초

Kinect와 Unity3D를 이용하여 제스처 기반 NUI를 적용한 3D 재활 치료 시스템 (Gesture-Based NUI 3D Rehabilitation System Using Kinect and Unity3D)

  • 손현호;구동현;정상철;이영만;이상민;이도훈
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2014년도 추계학술발표대회
    • /
    • pp.1142-1144
    • /
    • 2014
  • 본 논문에서는 뇌졸중, 치매 등 재활치료가 필요한 환자를 대상으로 하는 재활 프로그램을 Kinect와 Unity3D를 이용하여 구현하고, 이를 제어하기 위한 효과적인 제스처 기반 Natural User Interface를 적용하였다. 이는 동작 인식을 위해 Kinect 주변에 가까이 있기 어려운 프로그램 사용 환경을 원거리 조작이 가능케 하여 더욱 편하게 조작할 수 있게 하며, 직관적이고 단순한 제스처를 정의함으로써 가정에서도 손쉽게 사용할 수 있게 하였다.

사용자 손동작 추적에 기반한 증강현실 게임 인터페이스 (Augmented Reality Game Interface Using Hand Gestures Tracking)

  • 윤종현;박종승
    • 한국게임학회 논문지
    • /
    • 제6권2호
    • /
    • pp.3-12
    • /
    • 2006
  • 최근 게임 시장에서 한층 강화된 몰입감을 부여하는 증강현실 기술 기반의 3D 게임들이 등장하고 있다. 본 논문에서는 사용자의 손동작을 인식하여 게임 응용프로그램과 상호작용하는 증강현실 게임의 구현 기법을 제시한다. 웹캠을 통해 입력되는 영상 프레임에서 특징점들을 추출한다. 추출된 특징점들의 움직임을 통해 추적 대상의 움직임을 분석하여 사용자의 의도된 행위를 인식한다. 손동작 추적으로부터의 움직임의 궤적의 형태와 메뉴나 가상객체 위치 관계로부터 사용자의 의도된 움직임을 신뢰성있게 판단하는 기법을 제시한다. 제시한 방법의 우수성 입증을 위해 두 개의 증강현실 응용 시스템을 구현하고 인식의 정확도를 실험하였다. 응용으로 사람의 움직임을 감지해 동작하는 뮤직플레이어와 사용자가 위치한 현실공간에 대응되는 가상공간 내에서 가상농구게임을 개발하였다. 뮤직플레이어에서는 사용자가 손동작으로 다양한 메뉴를 선택할 수 있다. 가상농구게임에서는 가상의 공이 가상공간에 추가되고 이를 사용자가 물리공갈에서 직접 손을 움직여서 가상의 공과 상호작용한다. 사용자의 움직임 인식에 대하여 정상적인 움직임의 사용자에 대해서 평균 94%의 정확도를 보였으며 급격한 움직임의 사용자에 대해서는 약 84%의 정확도를 보였다.

  • PDF

영상처리 기반의 운전자 중심 정보처리 기술 개발 (A Driving Information Centric Information Processing Technology Development Based on Image Processing)

  • 양승훈;홍광수;김병규
    • 융합보안논문지
    • /
    • 제12권6호
    • /
    • pp.31-37
    • /
    • 2012
  • 오늘날 자동차 기술의 핵심은 IT 기반 융합 시스템기술로 변화하고 있다. 다양한 IT 기술을 접목하여 운전 중 다양한 상황에 대응하고 또한 운전자의 편의성을 지원하는 기술적 추세를 보이고 있다. 본 논문에서는 운전자의 안전성과 편의성을 증대하기 위해 영상 정보를 기반으로 도로 정보를 검출해 운전자에게 알려주고, 버튼을 직접 손으로 눌러야 하는 물리적 인터페이스를 대체할 비접촉식 인터페이스 기술을 융합한 Augmented Driving System (ADS) 기술을 제안한다. 본 기술은 카메라로부터 입력 받은 영상 정보를 제안된 알고리즘을 통해 앞차와의 거리, 차선, 교통 표지판을 검출하고 차량 내부를 주시하는 카메라와 운전자의 음성을 인식할 마이크를 기반으로 기본 음성인식과 동작인식이 융합된 인터페이스 기술을 제공한다. 이러한 요소 기술들은 운전자가 인지하지 못하더라도 운전자에게 현재의 주행상황을 인지하여 자동으로 알려줌으로써 교통사고 확률을 크게 낮출 수 있을 것이며, 또한 다양한 운전 중 기능 조작을 편리하게 지원함으로써 운전자의 전방 주시에 도움을 줄 수 있다. 본 논문에서 개발된 기술을 통해 테스트를 실시해 본 결과 표지판인식, 차선검출, 앞차와의 거리 검출 등의 인식률이 약 90% 이상이 되었다.

스마트카의 인터페이스를 위한 경험 디자인 가이드라인 (Experience Design Guideline for Smart Car Interface)

  • 유훈식;주다영
    • 디자인융복합연구
    • /
    • 제15권1호
    • /
    • pp.135-150
    • /
    • 2016
  • 통신 기술의 발달, 지능형교통체계(ITS: Intelligent Transport Systems)의 확산으로 자동차는 단순한 기계장치에서 종합편의 기능을 가진 제2의 생활 공간으로 변모하고 있으며, 이를 위한 인터페이스로써의 역할을 하는 플랫폼으로 진화하고 있다. 탑승자들에게 다양한 정보를 제공하는 인터페이스 영역이 확장됨에 따라 스마트카 기반의 사용자 경험(UX: User Experience) 연구에 대한 중요성이 높아지고 있다. 이 연구는 스마트카의 사용자 경험 요소에 대한 가이드라인을 제안하는데 목적을 두고 있다. 연구의 수행을 위해 기존 연구를 기반으로 스마트카의 사용자 경험 요소를 기능(function), 상호작용(interaction), 표면(surface)으로 정의하였으며, UX/UI 전문가들의 논의를 통해 각 요소 별로 8개의 대표 기술, 14개의 대표 기능, 8개의 유리창의 위치를 정의하였다. 이 후 100명의 운전자를 대상으로 정의된 스마트카 사용자 경험 요소들에 대한 우선순위를 설문조사 방식으로 분석하였다. 분석을 통해 사용자들은 차량에 주요 기술을 적용함에 있어서 안전, 주행, 감성의 순으로, 조작 방식에 있어서는 음성인식, 터치, 제스처, 물리적 버튼, 아이트레킹의 순으로, 디스플레이 위치에 대해서는 운전석을 중심으로 전방에서 후방으로 높은 우선순위를 가지고 있는 것을 알 수 있었다. 성별에 따른 분석에 있어서는 2개의 기능 외에는 큰 차이를 보이지 않아 남성과 여성에 대한 가이드가 공통되게 적용될 수 있음을 알 수 있었다.

광공진 현상을 이용한 입체 영상센서 및 신호처리 기법 (Optical Resonance-based Three Dimensional Sensing Device and its Signal Processing)

  • 박용화;유장우;박창영;윤희선
    • 한국소음진동공학회:학술대회논문집
    • /
    • 한국소음진동공학회 2013년도 추계학술대회 논문집
    • /
    • pp.763-764
    • /
    • 2013
  • A three-dimensional image capturing device and its signal processing algorithm and apparatus are presented. Three dimensional information is one of emerging differentiators that provides consumers with more realistic and immersive experiences in user interface, game, 3D-virtual reality, and 3D display. It has the depth information of a scene together with conventional color image so that full-information of real life that human eyes experience can be captured, recorded and reproduced. 20 Mega-Hertz-switching high speed image shutter device for 3D image capturing and its application to system prototype are presented[1,2]. For 3D image capturing, the system utilizes Time-of-Flight (TOF) principle by means of 20MHz high-speed micro-optical image modulator, so called 'optical resonator'. The high speed image modulation is obtained using the electro-optic operation of the multi-layer stacked structure having diffractive mirrors and optical resonance cavity which maximizes the magnitude of optical modulation[3,4]. The optical resonator is specially designed and fabricated realizing low resistance-capacitance cell structures having small RC-time constant. The optical shutter is positioned in front of a standard high resolution CMOS image sensor and modulates the IR image reflected from the object to capture a depth image (Figure 1). Suggested novel optical resonator enables capturing of a full HD depth image with depth accuracy of mm-scale, which is the largest depth image resolution among the-state-of-the-arts, which have been limited up to VGA. The 3D camera prototype realizes color/depth concurrent sensing optical architecture to capture 14Mp color and full HD depth images, simultaneously (Figure 2,3). The resulting high definition color/depth image and its capturing device have crucial impact on 3D business eco-system in IT industry especially as 3D image sensing means in the fields of 3D camera, gesture recognition, user interface, and 3D display. This paper presents MEMS-based optical resonator design, fabrication, 3D camera system prototype and signal processing algorithms.

  • PDF

WPS와 장갑 장치 기반의 동적 제스처 인식기의 구현 (An Implementation of Dynamic Gesture Recognizer Based on WPS and Data Glove)

  • 김정현;노용완;홍광석
    • 정보처리학회논문지B
    • /
    • 제13B권5호
    • /
    • pp.561-568
    • /
    • 2006
  • 차세대 PC를 위한 WPS(Wearable Personal Station)는 정보 처리 및 네트워크 기능을 포함하며 새로운 정보의 획득에 있어 공간적 한계성을 극복할 수 있는 '유비쿼터스 컴퓨팅'의 핵심 단말기로 정의할 수 있다. 기존의 유선 통신 모듈을 이용한 데스크톱 PC 기반의 제스처 인식기는 영상 또는 장갑 장치로부터 사용자의 의미 있는 동적 제스처 데이터를 획득함에 있어 공간상의 제약성 및 이동상의 한계성, 배경 및 음영조건의 변화에 따른 인식 성능의 변화 등 몇 가지 제약사항을 가지고 있다. 따라서 본 논문에서는 이러한 문제점들을 극복하고 해결하고자 제스처 입력모듈을 차세대 PC 플랫폼 기반의 유비쿼터스 환경으로 확대, 적용시켜 제스처 데이터 입력 모듈로부터 새로운 정보의 획득에 있어 한계성을 극복하고 효율적인 데이터 획득 방안을 제시한다 또한 퍼지 알고리즘과 신경망 이론을 이용하여 독립적인 제스처 인식 시스템을 구현하고 개별 시스템의 성능을 비교, 분석함으로써 차세대 PC를 위한 보다 효율적이며 합리적인 제스처 인식 시스템을 제안한다. 제안된 제스처 인식시스템은 동적인 손의 움직임을 입력데이터로 처리하는 제스처 입력모듈과 입력된 데이터로부터 의미 있는 제스처를 분리하기 위한 관계형 DBMS모듈, 그리고 인식의 확장성과 연속된 동적 제스처 중에서 의미 있는 제스처를 인식하기 위한 퍼지 인식 모듈 및 신경망 인식 모듈로 구성되어 있다. 30인의 피실험자에 대하여 15회의 반복 실험을 수행하였으며 사용자의 동적 제스처 인식 실험결과 퍼지 제스처 인식 시스템에서는 98.8%, 신경망 제스처 인식시스템에서는 96.7%의 평균 인식률을 도출하였다.형성에도 유의한 영향을 미치는 것을 알 수 있었다. 셋째, 신뢰와는 다르게 서비스품질이 몰입에는 유의한 영향을 미치지 못하는 것으로 나타났다. 그러나 이러한 직접적인 영향이외에 서비스품질은 고객만족을 통하여 간접적으로 몰입에 강한 영향을 미치는 것으로 나타났다. 넷째, 고객만족은 신뢰에 강하게 정(+)의 영향을 미치는 것으로 나타났다. 즉 고객들이 호텔서비스에 만족할수록 직접적으로 호텔에 대한 신뢰와 애착심이 증가하는 것을 알 수 있었고 간접적으로 서비스품질은 고객만족을 통하여 신뢰에 강한 영향을 미치는 것으로 나타났다. 다섯째, 또한 고객만족은 몰입에 강하게 정(+)의 영향을 미치는 것으로 나타났다. 간접적으로 서비스품질은 고객만족을 통하여 몰입에 강한 영향을 미치는 것으로 나타났다.미숙밭, 중점밭, 고원밭, 화산회밭으로 6개 유형으로 분류할 경우 각각의 분포면적은 41.9%, 23.3%, 17.5%, 13.9%, 1.1. 2.2% 이었다. 도시화 및 도로확대 등 다양한 토지이용 및 지형개변으로 과거의 토양정보가 많이 변경되었다. 그래서, 앞으로는 인공위성자료 및 항공사진을 이용하여 빠르고 쉽게 활용할 수 있는 토양조사 방법개발과 기 구축된 토양도의 수정, 보완 작업이 필요한 절실히 요구되고 있는 현실이다.브로 출시에 따른 마케팅 및 고객관리와 관련된 시사점을 논의한다.는 교합면에서 2, 3, 4군이 1군에 비해 변연적합도가 높았으며 (p < 0.05), 인접면과 치은면에서는 군간 유의차를 보이지 않았다 이번 연구를 통하여 복합레진을 간헐적 광중합시킴으로써 변연적합도가 향상될 수 있음을 알 수 있었다.시장에 비해 주가가 비교적 안정적인 수준을 유지해 왔다고 볼

멀티터치 인터페이스 회의시스템 구축 방안 연구 (Building Plan Research of Meeting System based on Multi-Touch Interface)

  • 장석주;박선희;최태준
    • 한국인터넷방송통신학회논문지
    • /
    • 제14권5호
    • /
    • pp.255-261
    • /
    • 2014
  • IT산업의 발달은 현대사회에 큰 변화를 가져왔다. 그 변화는 모든 분야에 적용되어 생활을 점점 더 편리하게하고, 업무는 더 효율적으로 빠른 처리가 가능하게 하면서 사람들을 편리한 삶으로 이끌고 있다. 이러한 변화의 중심에는 인터페이스가 크게 작용하고 있으며, 점점 발전해 현재는 사용자 행동기반의 인터페이스 NUI(Natural User Interface)기술을 사용 중에 있다. NUI는 별도의 입력 장치 없이 터치, 제스쳐 등의 자연스러운 행동을 통해 시스템과 소통할 수 있도록 하는 기술이다. 그 중 스마트 폰은 NUI 기술을 적용한 대표적인 디바이스이다. 스마트폰 뿐만 아니라 NUI 기술은 키오스크, 대형 테이블 등의 터치스크린에 적용하여 문화, 국방, 광고 산업 등 다양한 분야로 개발 및 활용 중에 있다. 이에 본 연구에서는 NUI기술을 활용하여 멀티 터치 테이블 기반의 멀티 터치 회의 시스템을 구축하여 기존의 회의 방식을 개선할 수 있는 효율적인 시스템을 제안한다.

직관적인 핸드 모션에 기반한 NUI/NUX 프레임워크 (NUI/NUX framework based on intuitive hand motion)

  • 이광형;신동규;신동일
    • 인터넷정보학회논문지
    • /
    • 제15권3호
    • /
    • pp.11-19
    • /
    • 2014
  • 내츄럴 유저 인터페이스는 마우스, 키보드, 펜과 마커를 이용하지 않는 신체를 이용한 자연스런 모션 인터페이스이다. 지금까지 대표적인 동작 인식 방법은 마커를 이용하는 방식이었고 그 인식 방법은 각 마커의 좌표를 상대적인 데이터로 입력 받아 데이터베이스에 각 좌표 값을 저장하는 것이었다. 그러나 정확한 동작을 인식하기 위해서는 더 많은 마커들이 필요하고 그 마커들을 붙이는 것과 데이터들을 처리하는 데에 상당한 시간이 걸린다. 또, NUI/NUX 프레임워크를 개발하면서, 가장 중요한 직관성을 배제한 개발로 사용상에 문제가 생겼고 계속해서 사용자에게 암기만을 강요하고 있다. 이 문제를 보완하기 위해, 본 논문에서는 마커를 이용하지 않았고 남녀노소 누구나 다룰 수 있도록 구현했다. 또, 목소리, 신체 동작, 얼굴 표정 등을 동시에 인식하는 멀티모달 NUI/NUX 프레임 워크를 설계했고, 직관적인 손동작을 인식하는 것과 모니터에 그것을 매핑하기 위해 새로운 마우스 이벤트 알고리즘을 제안했다. 우리는 사용자들이 쉽고 직관적으로 핸드마우스 이벤트를 다루도록 구현했다.

영상처리 기반의 제스처를 이용한 가상현실 입력기 (Image Processing Based Virtual Reality Input Method using Gesture)

  • 홍동균;천미현;이동화
    • 한국산업정보학회논문지
    • /
    • 제24권5호
    • /
    • pp.129-137
    • /
    • 2019
  • 정보 기술의 발전에 따라 유비쿼터스 컴퓨팅 기술이 대두되고 있다. 이에 맞춰 디바이스의 소형화와 사용자의 편리성을 증대시키기 위한 여러 연구가 진행되고 있다. 그중 몇몇의 제안된 디바이스들은 사용자가 착용해야 한다는 점과 손에 들고 동작시켜야 한다는 불편함이 있다. 본 논문에서는 이러한 불편함을 해결하기 위해 텔레비전 시청 시 사용할 수 있는 가상 버튼을 제안하였다. 텔레비전을 통해 영상 시청 시 전방에서 사용자가 영상을 시청한다는 점을 이용해 카메라를 TV 상단에 설치하여 카메라가 머리 위쪽을 촬영하게 한다. 촬영된 영상에서 배경과 손 영역을 분리하여 검출하고, 검출된 손 영역에 외곽선을 검출한 후 손가락의 끝점을 검출한다. 손가락의 끝점을 검출하면 전방을 촬영하고 있는 영상 상단에 가상 버튼 인터페이스가 출력되며 검출된 손가락의 끝점이 포인터가 되어 위치정보를 갖고 버튼 안쪽에 위치할 경우 버튼이 동작한다.

주변 전기장 측정센서를 이용한 손동작 신호 검출을 위한 신호처리시스템 연구 (Study on Signal Processing Method for Extracting Hand-Gesture Signals Using Sensors Measuring Surrounding Electric Field Disturbance)

  • 천우영;김영철
    • 스마트미디어저널
    • /
    • 제6권2호
    • /
    • pp.26-32
    • /
    • 2017
  • 본 논문에서는 지구전기장 왜란신호를 전위차로 변환하는 EPIC(Electric Potential Integrated Circuit) 센서를 이용한 NUI(Natural User Interface) 기술의 요소기술인 신호검출 전자회로를 기반으로 LED 조명을 제어하는 시스템을 구현하였다. 기존에는 CIB 개발 장비를 통해서만 제한적인 형태로 이용 가능했던 신호를 모든 EPIC 센서 각각의 신호를 추출할 수 있도록 개발된 신호검출 전자회로를 이용하였다. 이렇게 추출한 신호는 이후 손동작 인식프로세스에서 특징추출 등의 과정에서 더 많은 자유도와 성능개선 효과를 보여준다. 설계되어 제작된 회로의 실제 응용시스템으로서 적용성을 검증하기 위하여 4개의 손동작으로 LED 조명의 on/off 와 밝기를 조정할 수 있는 시스템을 설계하였다. 기존의 EPIC 센서를 이용하여 명령체계를 구축하고 인터페이스 제어신호를 이용하여 보다 빠른 패턴인식 처리 속도를 얻을 수 있었다.