• 한국멀티미디어학회논문지
• /
• 제17권2호
• /
• pp.248-256
• /
• 2014

본 연구는 장시간 동일한 자세로 자리에 앉아 있거나 컴퓨터 작업을 오래함으로써 생긴 어깨 통증을 호소하는 이들, 몸의 움직임이 적어 신체적 이상이 온 이들을 대상으로 치료를 동반한 운동 목적의 기능성 게임 설계와 프로토타입 단계의 게임 개발이다. 선택된 음악의 비트에 맞추어 신체를 움직이는 리듬액션게임으로서, 플레이어가 도전하는 동안 불편을 가진 신체 부위의 기능 개선뿐만 아니라 환자의 색채 치료를 병행할 수도 있다. 게임 기획서에 따라 제작된 프로토타입 게임은 XNA Game Studio와 동작 인식이 가능한 키넥트 인터페이스 기술을 활용하여 개발하였다. 조작이 용이한 인터페이스 기술과의 접목, 음악의 빠르기와 공의 출현 속도로 난이도를 조절하며 신체 움직임에 따라 수준별 콘텐츠 제공을 시도해 보았다. 향후 연구는 신체 장애 정도에 따라 움직임을 조절할 수 있도록 다양한 비트의 음악과 플레이어의 다양한 행위를 추가하고, 일반 재활 효과와의 비교 검증 시스템과 현장 테스트가 요구된다.

• 인터넷정보학회논문지
• /
• 제15권3호
• /
• pp.11-19
• /
• 2014

내츄럴 유저 인터페이스는 마우스, 키보드, 펜과 마커를 이용하지 않는 신체를 이용한 자연스런 모션 인터페이스이다. 지금까지 대표적인 동작 인식 방법은 마커를 이용하는 방식이었고 그 인식 방법은 각 마커의 좌표를 상대적인 데이터로 입력 받아 데이터베이스에 각 좌표 값을 저장하는 것이었다. 그러나 정확한 동작을 인식하기 위해서는 더 많은 마커들이 필요하고 그 마커들을 붙이는 것과 데이터들을 처리하는 데에 상당한 시간이 걸린다. 또, NUI/NUX 프레임워크를 개발하면서, 가장 중요한 직관성을 배제한 개발로 사용상에 문제가 생겼고 계속해서 사용자에게 암기만을 강요하고 있다. 이 문제를 보완하기 위해, 본 논문에서는 마커를 이용하지 않았고 남녀노소 누구나 다룰 수 있도록 구현했다. 또, 목소리, 신체 동작, 얼굴 표정 등을 동시에 인식하는 멀티모달 NUI/NUX 프레임 워크를 설계했고, 직관적인 손동작을 인식하는 것과 모니터에 그것을 매핑하기 위해 새로운 마우스 이벤트 알고리즘을 제안했다. 우리는 사용자들이 쉽고 직관적으로 핸드마우스 이벤트를 다루도록 구현했다.

• 전자공학회논문지CI
• /
• 제47권3호
• /
• pp.1-10
• /
• 2010

손동작을 통한 입력방법은 컴퓨터와 디지털 기기의 발전에 따라 요구되는 새로운 HCI(Human-Computer Interaction) 방법으로써 그 가능성을 가지고 있으며 이에 대한 다양한 시도가 있었다. 본 논문에서는 컴퓨터 비전을 기반으로 단일 카메라를 사용하는 손 영역 검출 및 추적방법을 제시하고 이에 의한 컴퓨터 인터페이스를 제안한다. 기존에 많이 쓰이는 피부색 매치 방법에 추가하여 형태 정보를 더함으로써 손 영역 검출능력을 향상 시켰다. 이러한 형태 정보를 추출하는 방법으로써 주요 방향 에지 기술자라는 방법을 제안하였고 이는 강력하여 학습 시간 없이 한 가지 손 모델만을 사용하여 손 영역 검출을 할 수 있다. 또한 손 영역 검출과 추적하는 방법을 나누어 추적할 때는 회전에 대한 자유도를 높이도록 설계 하였다. 위 방법을 이용하여 3차원 공간에 그려지는 필기체 숫자 인식에 적용해 보았으며 분류 방법으로 DNAC 알고리즘을 사용하였다. 결과적으로 손 영역 검출은 82%의 검출률을 보였고 필기체 숫자 인식은 90%의 인식률을 보였다.

• 한국콘텐츠학회논문지
• /
• 제11권8호
• /
• pp.77-87
• /
• 2011

기술의 발전과 함께 매해 쏟아져 나오는 새로운 플랫폼들은 콘텐츠 생산자들에게 창의적이고 혁신적인 콘텐츠를 개발할 수 있는 새로운 기회를 제공하고 있다. 이러한 현상은 디지털 미디어 콘텐츠 분야를 전공하는 학생들에게도 중요한 영향을 미쳐 콘텐츠 개발 시 새로운 기술 기반의 플랫폼을 활용해 봄으로써 그들에게 보다 새롭고 유익한 배움의 기회를 제공한다. 본 논문에서는 최근 디지털 미디어분야 학생들에게 주목받고 있는 주요기술로서 가상현실 디스플레이, 동작인식부, 물리엔진 그리고 체감형 인터페이스 기술을 제시하고, 이 4가지 기술을 사용하는 통합 플랫폼을 개발하여 콘텐츠 개발 시 보다 쉽고 편리하게 구현할 수 있도록 설계하였다. 또한 디지털 콘텐츠 개발 교육을 위한 목적으로서 플랫폼의 실용성을 검토하고자 제안한 플랫폼을 기반으로 4개의 프로토타입 콘텐츠를 개발하고 플랫폼의 활용성을 평가하였다. 사용자 평가결과 시스템의 기능성, 사용성, 유용성, 만족도 및 선호도 모두 전반적으로 높게 나타났으며 이 같은 플랫폼의 활용도는 학생들에게 쉽고 빠르게 프로토타입 콘텐츠(Rapid prototype)를 제작 할 수 있는 환경을 조성해 주어 창의적인 미디어 콘텐츠 연구에 있어 긍정적인 영향을 줄 것으로 사료된다.

• 한국정보통신학회논문지
• /
• 제25권10호
• /
• pp.1323-1329
• /
• 2021

손 표현 인식을 위해서는 손의 정적인 형태를 기반으로 하는 손 자세 인식과 손의 동적인 움직임을 기반으로 하는 손 동작 인식이 함께 사용된다. 이 논문에서는 손 표현 인식을 위해 손가락의 위치와 형태를 기반으로 하는 계층적 손 자세 모델을 제안한다. 손 자세 인식을 위해서는 오픈소스인 미디어파이프를 기반으로 하고, 손가락 상태를 나타내는 모델과 이를 통해 손 자세를 나타내는 모델을 계층적으로 구성하였다. 손가락 모델 역시 손가락 하나의 굽힘과 손가락 두 개의 닿음을 사용하여 계층적으로 구성하였다. 제안하는 모델은 손을 통해 정보를 전달하는 다양한 응용에 사용할 수 있으며, 수화에서의 숫자 인식에 적용하여 그 유용성을 검증하였다. 제안하는 모델은 수화 인식 이외에 컴퓨터의 사용자 인터페이스에서 다양한 응용이 가능할 것으로 기대한다.

• 한국지능시스템학회논문지
• /
• 제24권6호
• /
• pp.609-614
• /
• 2014

소뇌 운동실조는 점차 진행되는 신경퇴행질병이며 운동 조절을 위한 기능의 상실을 동반하기에 환자의 삶을 심각하게 저하시킨다. 소뇌 운동실조 환자는 운동제어 과정에서 부적절한 폐회로 소뇌 반응으로 인해 운동 명령이 제한된다. 본 논문에서는 최근 뇌-컴퓨터 인터페이스 기술을 이용하여 소뇌의 이상으로 인한 운동실조 환자들이 외부기기를 제어할 수 있도록 운동상상 기반의 뇌파의 특성을 분석하고 이를 이용한 뇌-컴퓨터 인터페이스 기법을 제안한다. 뇌파 기반의 뇌-컴퓨터 인터페이스의 효용성을 검증하기 위하여 소뇌 운동실조 환자와 정상인 그룹에서 운동상상에 따른 뮤밴드 파워를 조절하는 능력을 비교하였다. 이를 통하여 소뇌 운동실조 환자에의 뇌-컴퓨터 인터페이스의 가능성을 보여준다.

• 복식
• /
• 제61권8호
• /
• pp.57-72
• /
• 2011

The purpose of this research is to develop a safe and convenient wearable technology wear for bikers. For this, we studied the current usage of two-wheeled vehicles and have also researched the rate of accidents and its causes. We then used them along with previous studies in terms of visual perception as factors to decide the crucial elements of the riders' apparel. Case studies and the break down for the established prototypes for bikers were practiced as well. Based on this process, a survey was conducted to find out the needs of the bikers in the areas of both apparel and technology and then proceeded to produce the appropriate design and device modules. In the apparel sector, the result of the survey indicated that it was considerable that any digital devices were not shown to sustain a natural visible look. It also was essential that the materials were durable and made for safety and easy movement. In the digital function sector, it was significant that a motion input interface which will be embedded into the wear was needed to avoid any dangerous situations. This would ensure the safety of not only the rider but the surrounding riders as well. Lastly, protecting the rider's skin from any harmful elements was regarded necessary as well. Based on these requirements, a new prototype was created and will be tested if the requirements stated above are all met and will be evaluated according to the effectiveness of its functions.

• 정보처리학회논문지:소프트웨어 및 데이터공학
• /
• 제9권9호
• /
• pp.267-280
• /
• 2020

거울은 일반적으로 아말감으로 코팅된 물리적 반사 표면으로 거울 앞의 상을 선명하게 반사한다. 이것은 언제 어디서나 사용이 가능하며 사용자의 얼굴이나 외모를 확인하기 위한 필수적인 도구이다. 현대 소프트웨어 기술의 출현으로 사람들은 실시간 처리, Microservice 및 머신 러닝이 적용된 편의성과 지능성을 통해 거울 반사 기능을 향상시킬 수 있다. 본 논문에서는 거울로써 실시간 반영과 동시에 사용자 맞춤 정보 조회, 공공 정보 조회, 외모를 통한 나이와 감정 탐지 등의 기능을 가진 디지털 거울 시스템 개발을 제안한다. 더불어, 본 시스템은 터치 기반, 음성 인식 기반, 제스처 기반의 Multi-Modal 사용자 인터페이스를 제공한다. 본 논문에서는 이 시스템에 대한 디자인을 제시하고 현재 기술을 이용하여 실시간 거울 반영과 동시에 유용한 정보 제공 및 지능형 머신 러닝 기술을 제공하는 구현 방법을 제안한다.

• 한국차세대컴퓨팅학회논문지
• /
• 제15권5호
• /
• pp.53-63
• /
• 2019

모바일 환경에서 딥러닝을 통한 손 제스처 인터페이스를 제공하려면 높은 인식률을 제공하면서 실행속도의 저하를 막기 위한 네트워크 경량화의 연구가 필수적이다. 본 논문은 딥러닝 모델의 경량화를 통해 모바일 기기에서 손가락을 이용하여 공중에 쓴 문자를 실시간으로 인식하는 방법을 제안한다. MobileNet을 특징 추출기로 활용하는 객체 탐지 모델인 SSD (Single Shot Detector)를 기반으로 집게손가락을 탐지하고 손끝 경로를 이어 결과문자 영상을 생성한다. 이 영상은 서버로 전송되어 정규화 과정을 수행한 다음 학습된 OCR 모델을 이용하여 문자를 인식한다. 본 방법을 검증하기 위하여 12명의 사용자가 GALAXY S10+ 기기를 사용하여 1,000개의 단어를 실험한 결과 평균 88.6%의 정확도로 손가락을 인식하고 124 ms 이내로 인식된 텍스트가 출력되어 실시간으로 활용 가능함을 알 수 있었다. 본 연구결과는 모바일 환경에서 손가락을 이용한 간단한 문자 전송, 메모 및 공중 서명 등에 활용될 수 있다.

• 지능정보연구
• /
• 제19권2호
• /
• pp.73-85
• /
• 2013

정보기술의 비약적 발전에 힘입어, 오늘날 기업들은 지금까지 축적한 고객 데이터를 기반으로 맞춤형 서비스를 제공하는 것에 많은 관심을 가지고 있다. 고객에게 소구하는 맞춤형 서비스를 효과적으로 제공하기 위해서는 우선 그 고객이 처한 상태나 상황을 정확하게 인지하는 것이 중요하다. 특히, 고객에게 서비스가 전달되는 이른바 진실의 순간에 해당 고객의 감정 상태를 정확히 인지할 수 있다면, 기업은 더 양질의 맞춤형 서비스를 제공할 수 있을 것이다. 이와 관련하여 사람의 얼굴과 행동을 이용하여 사람의 감정을 판단하고 개인화 서비스를 제공하기 위한 연구가 활발하게 이루어지고 있다. 얼굴 표정을 통해 사람의 감정을 판단하는 연구는 좀 더 미세하고 확실한 변화를 통해 정확하게 감정을 판단할 수 있지만, 장비와 환경의 제약으로 실제 환경에서 다수의 관객을 대상으로 사용하기에는 다소 어려움이 있다. 이에 본 연구에서는 Plutchik의 감정 분류 체계를 기반으로 사람들의 행동을 통해 감정을 추론해내는 모형을 개발하는 것을 목표로 한다. 본 연구는 콘텐츠에 의해 유발된 사람들의 감정적인 변화를 사람들의 행동 변화를 통해 판단하고 예측하는 모형을 개발하고, 4가지 감정 별 행동 특징을 추출하여 각 감정에 따라 최적화된 예측 모형을 구축하는 것을 목표로 한다. 모형 구축을 위해 사람들에게 적절한 감정 자극영상을 제공하고 그 신체 반응을 수집하였으며, 사람들의 신체 영역을 나누었다. 특히, 모션캡쳐 분야에서 널리 쓰이는 차영상 기법을 적용하여 사람들의 제스쳐를 추출 및 보정하였다. 이후 전처리 과정을 통해 데이터의 타임프레임 셋을 20, 30, 40 프레임의 3가지로 설정하고, 데이터를 학습용, 테스트용, 검증용으로 구분하여 인공신경망 모형을 통해 학습시키고 성과를 평가하였다. 다수의 일반인들을 대상으로 수집된 데이터를 이용하여 제안 모형을 구축하고 평가한 결과, 프레임셋에 따라 예측 성과가 변화함을 알 수 있었다. 감정 별 최적 예측 성과를 보이는 프레임을 확인할 수 있었는데, 이는 감정에 따라 감정의 표출 시간이 다르기 때문인 것으로 판단된다. 이는 행동에 기반한 제안된 감정예측모형이 감정에 따라 효과적으로 감정을 예측할 수 있으며, 실제 서비스 환경에서 사용할 수 있는 효과적인 알고리즘이 될 수 있을 것으로 기대할 수 있다.