• 한국정보통신학회:학술대회논문집
• /
• 한국해양정보통신학회 2011년도 춘계학술대회
• /
• pp.611-614
• /
• 2011

최근 멀티미디어 기술의 발달, 특히 음향 기술의 급격한 발달과 더불어 고품질 오디오에 대한 요구와 함께보다 현실감 있는 오디오를 재생하기 위한 실감 오디오기술 개발이 요구되고 있다. 이러한 요구를 만족시키기 위해 사용자의 가상현실 및 증강현실에서 실감나는 오디오 효과를 제공해 줄 수 있는 3차원 오디오에 대한 연구가 활발히 진행되고 있다. 본 논문에서는 증강현실에서 좀 더 나은 오디오 기술을 적용하여 실감나는 오디오 효과를 제공해 줄 수 있는 방법을 연구하고자 하였다. 연구한 내용은 가상세계와 실제세계의 현실감을 제공하기 위하여 마커 위에 띄워진 3D 모델의 움직임에 따라서 움직임에 맞는 사운드. 즉, 거리, 각도 등의 변화에 따른 사운드의 크기 및 피치 변화를 줄 수 있도록 하였다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2009년도 춘계학술발표대회
• /
• pp.238-241
• /
• 2009

정보 과학 기술의 발전과 생활 수준의 향상이 가속화되면서 주변 환경을 구성하는 가구나 공간조차도 정보 통신과 컴퓨터 기능이 내재된 인간과 상호작용할 수 있는 개념으로 확장되고 있다. 또한 비즈니스의 규모가 방대해지면서 협업이 필요성이 증가되는 가운데 단일 사용자에게 맞춰진 표준 데스크탑을 대체할 새로운 기기와 인터페이스에 대한 요구가 증가하고 있다. 본 연구에서는 이런 패러다임에 맞춰 선호되고 있는 테이블탑 컴퓨팅을 다수의 LCD와 PC를 포함하는 분산 하드웨어 방식의 고해상도 대형 디스플레이로 구성하고, 다중 사용자의 입력을 동시적으로 처리할 수 있는 적외선 카메라를 활용한 마커 인식 기반의 탠저블 인터페이스를 개발하였다. 그리고 이 시스템에서 동작하는 고해상도 이미지 뷰어와 퍼베이스브 블록 격파 게임 응용프로그램을 구현하였다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2011년도 춘계학술발표대회
• /
• pp.394-397
• /
• 2011

애플의 아이폰4 스마트폰에 OpenCV 라이브러리를 활용하여 실시간 처리가 가능한 영상처리 프로그램을 구현하였다. 구현된 영상처리 프로그램은 이치화, 적응이치화, 에지 추출, 외곽선 추출 등이며 Objective-C 언어로 버튼 등의 인터페이스를 사용하는 아이폰 앱으로 구현되었다. 또한 증강현실을 구현하기 위해 Wagner가 개발한 ARToolKitPlus 라이브러리의 각 단계를 분석하였으며, 이 라이브러리를 이용해 Loulier가 아이폰에 구현한 VRToolKit을 이용하여 가상물체를 실시간으로 증강하는 실험을 진행하였다. 가상물체는 OpenGL ES 함수를 사용해 텍스처맵핑 기법으로 제작한 지구 모형으로 실시간 증강시에도 매끄럽게 정합되는 결과를 얻었다. 본 연구는 향후 스마트폰에서의 얼굴인식 등의 영상처리 프로그램 개발 및 멀티마커의 인식 등의 증강현실 프로그램 개발의 기본 토대로 사용될 수 있다.

• 예술인문사회 융합 멀티미디어 논문지
• /
• 제7권6호
• /
• pp.897-906
• /
• 2017

프로젝션 맵핑(공간증강현실)은 현실세계에서 다양한 가상의 환영(幻影)을 만들어내는 것으로 최근에 많은 분야에 사용되고 있다. 기존의 프로젝션 맵핑에서는 사용자와의 자연스러운 상호작용으로서 접히거나 구부러지는 것 과 같은 유연한 물체의 기하학적인 변형 속성(예: 용지)의 움직임을 고려하지 않았다. 또한, 정적 물체에 대한 프로젝션 맵핑에 대한 많은 연구가 있었지만, 유연한 타깃의 움직임을 추적하고 사용자와의 상호작용 측면에서 모양이 변형된 물체에 맵핑을 정확히 하는 다이내믹 프로젝션 맵핑은 여전히 도전해야할 연구 분야이다. 따라서 본 논문에서는 Unity3D와 ARToolkit을 이용한 실험을 통해 단단하지 않은 물체에 대한 견실한 추적과 정확한 맵핑 방법을 제안한다. 제안하는 방법은 큐빅 베지어 곡면 형성, 움직임 변형 값 렌더링 과정, 멀티플 마커 인식과 트래킹 과정, 실시간 웹캠 지속 촬영의 4가지 실험 단계로 구성된다. 사용자는 물체에 변형을 주기 위해 직접 접고, 휘고, 구부리고 비틀 수 있다. 제안 방법은 세 가지 긍정적인 결과를 도출할 수 있다. 첫째, 물체의 형태가 강하게 변형되어 있어도 감지 가능하다. 둘째, 사용자가 직접 물체에 변형을 주는 과정에서 물체의 일부분을 차단하고 있을 때의 Occlusion오류를 줄일 수 있어 정확한 트래킹을 할 수 있다. 셋째, 제안 방법의 견실하고 정확함은 빠른 속도로 물체의 움직임을 감지하게 하므로 실시간으로 결과 값을 물체에 투영할 수 있다.

• 한국멀티미디어학회논문지
• /
• 제23권8호
• /
• pp.940-952
• /
• 2020

The Alzheimer's disease (AD) is a neurodegenerative disease commonly found in the elderly individuals. It is one of the most common forms of dementia; patients with AD suffer from a degradation of cognitive abilities over time. To correctly diagnose AD, compuated-aided system equipped with automatic classification algorithm is of great importance. In this paper, we propose a novel deep learning based classification algorithm that takes advantage of MRI biomarker images including brain areas of hippocampus and cerebrospinal fluid for the purpose of improving the AD classification performance. In particular, we develop a new approach that effectively applies MRI biomarker patch images as input to 3D Deep Convolution Neural Network. To integrate multiple classification results from multiple biomarker patch images, we proposed the effective confidence score fusion that combine classification scores generated from soft-max layer. Experimental results show that AD classification performance can be considerably enhanced by using our proposed approach. Compared to the conventional AD classification approach relying on entire MRI input, our proposed method can improve AD classification performance of up to 10.57% thanks to using biomarker patch images. Moreover, the proposed method can attain better or comparable AD classification performances, compared to state-of-the-art methods.

• 한국멀티미디어학회논문지
• /
• 제9권4호
• /
• pp.377-387
• /
• 2006

디지털 문서가 가진 동적인 컨텐츠의 사용을 통한 높은 정보 전달성과 공유 용이성 등의 장점으로 인해 점차적으로 디지털 문서가 종이 문서의 역할을 대신하고 있다. 하지만 종이 문서가 가진 높은 가독성과 휴대성, 저렴한 가격 등의 장점 때문에 사용자들은 여전히 종이 문서를 선호한다. 이와 같이, 종이 문서를 선호하는 사람들에게 디지털 문서의 장점을 제공하기 위해서, 종이 문서에 디지털 정보를 담는 것에 대한 다양한 연구가 이루어지고 있다. 본 논문은 사용자가 직접 펜을 이용하여 종이 문서에 디지털 정보들을 삽입, 삭제, 수정할 수 있는 Hybrid Documents Authoring Tool(HDAT) 을 제안한다. 제안된 시스템은 읽기와 쓰기 기능을 모두 지원하는 통합형 저작 도구 시스템이다. 또한 문서의 인식을 위해 마커나 패턴 등과 같은 부수적인 장치의 도움 없이 컴퓨터 비전 기술만을 이용함으로써 사용자에게 최대한 자연스러운 환경을 제공한다. 실험을 통해 우리는 제안된 시스템의 효용성을 확인하고, 카메라에 의해 발생하는 제약 아래에서 영상 기반 문서 검색을 위한 카메라 해상도, 입력 영상의 크기, 비교할 샘플의 개수 등의 최저 한계를 측정함으로써 시스템이 실생활 에 적용되었을 때 발생할 수 있는 다양한 상황에서 만족할 만한 성능을 낼 수 있음을 확인하였다.

• 한국멀티미디어학회논문지
• /
• 제14권4호
• /
• pp.517-528
• /
• 2011

본 논문에서는 시각장애인이 실내에서 특정 목적지까지 안전하게 보행할 수 있도록 하는 시스템을 제안한다. 이 시스템은 카메라로 찍은 영상을 분석하여 마커의 ID를 구한 후 이로부터 보행자의 절대위치를 파악하고, IMU(Inertial Measurement Unit)의 가속도 센서와 자이로 센서를 통해 들어온 이동거리와 각도를 이용하여 보행자의 이전위치에 대한 상대위치를 파악하여 다음 진행 방향을 결정한다. 동시에 다수의 초음파 센서들을 이용하여 보행자 전방의 장애물 위치를 파악하여 사용자에게 최적의 진행방향을 알려준다. 이때 경로상의 계단이 있을 경우 IR(Infrared Rays)센서로 감지하여 보행자에게 알려준다. 본 시스템은 다중 복합 센서들을 융합하여 시각장애인에게 위치정보를 제공하고 원하는 목적지까지 안전하게 보행할 수 있도록 한다.

• 한국멀티미디어학회논문지
• /
• 제22권10호
• /
• pp.1168-1177
• /
• 2019

In order to diagnose and prevent Alzheimer's Disease (AD), it is becoming increasingly important to develop a CAD(Computer-aided Diagnosis) system for AD diagnosis, which provides effective treatment for patients by analyzing 3D MRI images. It is essential to apply powerful deep learning algorithms in order to automatically classify stages of Alzheimer's Disease and to develop a Alzheimer's Disease support diagnosis system that has the function of detecting hippocampus and CSF(Cerebrospinal fluid) which are important biomarkers in diagnosis of Alzheimer's Disease. In this paper, for AD diagnosis, we classify a given MRI data into three categories of AD, mild cognitive impairment, and normal control according by applying 3D brain MRI image to the Faster R-CNN model and detect hippocampus and CSF in MRI image. To do this, we use the 2D MRI slice images extracted from the 3D MRI data of the Faster R-CNN, and perform the widely used majority voting algorithm on the resulting bounding box labels for classification. To verify the proposed method, we used the public ADNI data set, which is the standard brain MRI database. Experimental results show that the proposed method achieves impressive classification performance compared with other state-of-the-art methods.

• 한국HCI학회:학술대회논문집
• /
• 한국HCI학회 2009년도 학술대회
• /
• pp.846-850
• /
• 2009

본 논문은 픽토그램(Pictogram)의 시각전달 요소를 재해석하고 증강현실 환경에서의 효율적 전달 방법에 대하여 제안한다. 픽토그램은 국경을 넘어 남녀노소 모두가 인지할 수 있어야 함이 규칙이며 불특정 다수라는 사용자들을 위해 정확한 정보를 담고 있는 시각전달 매체로서 공정성, 객관성을 가지고 디자인 되어야 한다. 사용자에게 정보전달 인식을 높이기 위해 표준 픽토그램 과 문화 속에서 발견할 수 있는 행위들을 접목하여 애니메이션으로 제작하고, 이를 다양한 연구분야에서 응용되고 있는 증강현실 (Augmented Reality 또는 AR) 기술에 적용하여 표현하였다. 증강현실은 사용자-콘텐츠 정보전달 매체로서 현실 환경을 기반으로 하는 3 차원공간의 시각정보에 대한 사용자의 인식을 향상시킬 수 있는 방법으로 인간-컴퓨터 상호작용(Human-Computer Interaction)을 제공한다. 본 논문에서 제시된 픽토메이션은 기존 공공장소 어디서나 만날 수 있는 다양한 픽토그램을 패턴화하여 마커로 활용하고 사용자는 현재 널리 보급되고 있는 UMPC 혹은 PDA를 통하여 증강현실 환경에서 제작된 픽토메이션 콘텐츠를 경험해 볼 수 있다. 픽토메이션은 시각커뮤니케이션의 효과를 증가 시킬 수 있고, 정보습득의 주체인 사용자에게 콘텐츠의 종류를 예측할 수 있는 선택의 자유를 준다. 본 논문에서는 멀티미디어디자인 요소를 포함한 콘텐츠와의 실시간 상호작용을 통하여 유희적 요소의 접목을 시도하고 증강현실환경에서 Pictomation을 통하여 사용자들과의 효과적 커뮤니케이션을 위한 방법을 모색하고자 한다.

• 한국정보통신학회논문지
• /
• 제15권12호
• /
• pp.2705-2711
• /
• 2011

최근 멀티미디어 기술의 발달, 특히 음향 기술의 급격한 발달과 더불어 고품질 오디오에 대한 요구와 함께보다 현실감 있는 오디오를 재생하기 위한 실감 오디오기술 개발이 요구되고 있다. 이러한 요구를 만족시키기 위해 사용자의 가상현실 및 증강현실에서 실감나는 오디오 효과를 제공해 줄 수 있는 3차원 오디오에 대한 연구가 활발히 진행되고 있다. 본 논문에서는 증강현실에서 좀 더 나은 오디오 기술을 적용하여 실감나는 오디오 효과를 제공해 줄 수 있는 방법을 연구하고자 하였다. 연구한 내용은 가상세계와 실제세계의 현실감을 제공하기 위하여 마커 위에 띄워진 3D 모델의 움직임에 따라서 움직임에 맞는 사운드. 즉, 거리, 각도 등의 변화에 따른 사운드의 크기 및 피치 변화를 줄 수 있도록 하였다.