• 한국통신학회논문지
• /
• 제38C권10호
• /
• pp.920-927
• /
• 2013

크로마키 방식에 의한 영상 합성은 색상 정보에 의해 전경 후경을 분리하기 때문에 객체 색상의 제약과 특정 스크린이 위치해 있어야 하는 공간의 제약이 있다. 특히 스테레오스코픽 3D 디스플레이를 위한 영상 합성은 크로마키 방식과는 달리 3D 공간에서의 자연스러운 영상 합성이 요구된다. 본 논문에서는 고해상도의 깊이 정보를 이용하여 깊이 키잉(depth keying) 방식에 의한 3D 공간에서의 스테레오스코픽 영상 합성을 제안하였다. 이를 위해 DSLR과 마이크로소프트사 키넥트 센서간의 카메라 캘리브레이션을 통해 고화질의 깊이 정보 획득 후 RGB 정보와의 정합 과정을 통해 3차원 데이터를 획득하였다. 깊이 정보에 의해 배경과 분리 된 객체는 3차원 공간에서의 포인트 클라우드 형태로 표현되어 가상 배경과 합성하였다. 이후 가상의 스테레오 카메라에 의해 Full HD 스테레오스코픽 비디오 합성 영상 획득 결과를 보였다.

• 융합신호처리학회논문지
• /
• 제15권3호
• /
• pp.85-90
• /
• 2014

본 논문에서는 키넥트의 3차원 영상정보를 이용하여 종이 바이올린 지판과 손가락 끝점을 검출하고 활 움직임을 판정한 뒤, 이 정보를 이용하여 가상 바이올린을 구현하는 방법을 제안한다. 키넥트의 컬러영상과 깊이영상을 이용하여 먼저 바이올린 지판을 식별하고 손가락 끝점을 검출한 뒤 지판 정보와 사용자의 지판 누름 여부를 판정하기 위한 지판의 깊이 정보를 검출한다. 운지와 활 움직임 정보에서 음이름을 판정하여 PC MIDI 인터페이스를 통해 가상 바이올린 연주 시스템을 구현하였다. 본 논문에서 제안하는 방법을 이용하여 가상 바이올린 성능평가를 수행한 결과 높은 검출 정확도를 보였다. 구현된 가상 바이올린 기능을 활용하여 바이올린 연주 입력장치를 구현함으로써 PC기반 바이올린 연주시스템 구현의 편리성을 보였으며 악기 초보자가 PC 기반 바이올린 연주 학습에 사용자 인터페이스로 활용할 수 있는 가능성을 확인하였다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2011년도 추계학술발표대회
• /
• pp.464-466
• /
• 2011

본 논문에서는 영상 처리 및 컴퓨터 비전 분야의 기술을 마이크로 소프트 사의 키넥트에 적용하여 효과적인 체감형 학습을 위한 콘텐츠를 구성하고자 한다. 일반적으로 사람들이 많이 알고 있는 손 그림자 놀이를 응용하여 참여자들의 움직임을 통해 인터랙션을 발생시킬 수 있도록 하였고, 깊이정보맵으로부터 카메라에서 가장 가까운 거리에 있는 영역을 검출하기 위해 Meanshift segmentation(평균이동분할) 알고리즘을 적용 시켰다. 본 시스템의 체감형 콘텐츠는 문화 콘텐츠의 한 종류로서 이의 확장된 버전이 여러 분야에서 많은 활용이 될 것을 기대한다.

• 한국컴퓨터정보학회:학술대회논문집
• /
• 한국컴퓨터정보학회 2016년도 제54차 하계학술대회논문집 24권2호
• /
• pp.315-316
• /
• 2016

본 논문에서는 가상현실이나 증강현실과 관련된 응용 콘텐츠 구성에 필요한 동적 터레인의 실시간 구현 기법에 관한 연구를 수행하였다. 동적 터레인은 게임 콘텐츠 개발 환경에서 일반적으로 구현되는 정적 터레인과 달리 런타임에 실시간 변형이 발생할 수 있으며 입력된 터레인의 변형을 콘텐츠 플레이에 지정을 받지 않을 수 있는 짧은 시간 내에 빠르게 실시간 처리하는 것이 필수적으로 필요하다. 본 논문에서는 키넥트의 깊이 카메라를 활용하여 샌드 박스 내의 모래 깊이 값을 인식하고 이를 반영하는 터레인을 실시간으로 생성하는 프레임워크를 개발하고 결과물을 콘텐츠에 적용하여 연구 결과의 유용성을 실증하도록 한다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송공학회 2013년도 추계학술대회
• /
• pp.120-123
• /
• 2013

본 논문에서는 키넥트 센서의 RGB영상을 이용하여 얼굴을 검출하고 검출된 영역의 깊이정보를 템플릿으로 사용하여 다수개의 얼굴을 추적하는 방법을 제안한다. 이 논문은 [1]의 단일 얼굴 추적방법을 다수의 얼굴을 추적하도록 확장한 것이다. 다수의 얼굴추적을 실시간으로 처리하기 위하여 영상을 down sampling 하여 사용한다. 얼굴 검출은 기본적으로 기존의 Adaboost 방법을 사용하나, 피부색만을 이용, 탐색영역을 최대한 축소하여 수행 시간 및 오검출율을 줄인다. 얼굴추적은 깊이정보를 템플릿으로 하며, 깊이값에 따라 크기, 탐색영역을 조정하고, 또한 일정 프레임마다 얼굴을 검출하며 겹침, 새로 나타남, 영상 밖으로 사라짐 등의 얼굴추적 시 발생하는 문제를 해결한다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2015년도 추계학술발표대회
• /
• pp.1400-1403
• /
• 2015

사람들의 TV 시청 경향을 조사해보면, 시청 도중에 다른 매체를 사용하거나 일을 하면서 소리만 듣는 경우가 많이 있다. 이 경우 화면 출력을 위한 전력 낭비의 문제가 있다. 본 논문에서는 이를 효율적으로 해결하기 위한 기술에 대하여 제안한다. 제안한 방법에서는 키넥트 센서를 이용하여 깊이 및 컬러 영상을 촬영하고 분석하여 사람들이 TV시청을 하지 않을 경우 화면을 자동으로 꺼 주고, 사람이 나타나면 다시 켜주는 형태로 동작한다. 기존 절전 기능이 단지 인간의 습관에 의존하거나, 센서 반향을 이용해 물체의 유무를 따진 후 전원을 완전히 차단하는 등 단순한 방법에 의존하였음에 비해 제안하는 방법은 대상의 움직임을 추적하여 좀 더 세밀하고 효과적인 절전을 가능하도록 한다.

• 한국콘텐츠학회논문지
• /
• 제17권1호
• /
• pp.137-144
• /
• 2017

얼굴 검출은 복잡한 배경 내에서 다양한 얼굴의 자세로 인해 여전히 어려운 문제에 직면하고 있다. 본 논문은 피부색과 깊이 정보를 기반으로 한 한명 또는 여러 명의 얼굴을 검출하는 효과적인 알고리즘을 제안한다. 먼저 우리는 컬러 영상에서 가우시안 혼합 모델을 이용한 피부색 검출 방법에 대해 소개한다. 그리고 Kinect V2의 깊이 센서를 이용하여 획득한 3차원의 깊이 정보는 배경으로부터 사람의 몸을 분할할 때 유용하다. 그리고 레이블링 과정에서 여러 개의 특징을 이용하여 얼굴이 아닌 영역은 성공적으로 제거된다. 실험 결과를 통해 제안한 얼굴 검출 알고리즘은 다양한 조건과 복잡한 배경에서 얼굴이 효과적으로 검출되는 것을 확인할 수 있다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2016년도 춘계학술발표대회
• /
• pp.858-860
• /
• 2016

최근 스포츠와 ICT 기술의 융합으로 스크린 스포츠라는 분야가 등장하였고, 스포츠 클라이밍도 스크린 스포츠로 구현하려는 시도가 이루어지고 있다. 이를 위해서는 실내 인공암벽에서 등반자의 모습을 추적해야 하는데, 이에 앞서 사람의 영역을 검출할 필요가 있다. 사람의 영역을 검출하는 데에는 키넥트를 이용하는데, 스켈레톤 정보와 영상 정보를 이용할 수 있다. 본 논문에서는 깊이 영상을 사용하여 등반자의 영역을 검출하는 방법을 제시한다. 실내 인공암벽 환경에서는 등반자 이외에 주변환경의 변화가 없으므로 등반자의 영역 검출을 위해 차영상을 적용한다.

• 한국방송∙미디어공학회:학술대회논문집
• /
• 한국방송∙미디어공학회 2016년도 추계학술대회
• /
• pp.89-91
• /
• 2016

본 논문에서는 실사 영상 기반으로 3D 영상을 생성하기 위하여 효율적으로 다시점 영상을 획득하는 시스템을 제안한다. 기존의 시스템은 대부분 다수의 카메라를 이용하여 다시점 영상을 획득하는 구조이다. 이 경우 각 카메라 간의 정합(calibration)을 수행해야 할 뿐만 아니라 스테레오 매칭을 통해 깊이 정보를 추출하는 과정이 필요하다. 제안하는 시스템에서는 카메라는 고정시킨 상태에서 촬영하고자 하는 객체를 턴테이블 위에 놓고 회전시키면서 촬영한다. 카메라는 Microsoft에서 출시한 컬러 정보와 깊이 정보를 동시에 얻을 수 있는 키넥트(Kinect) v2를 사용한다. 실험을 통하여 제안하는 시스템이 기존 시스템보다 다시점 영상을 효율적으로 생성하는 것을 확인하였다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2014년도 추계학술발표대회
• /
• pp.1008-1010
• /
• 2014

본 논문에서는 색상-깊이 영상간의 좌표 변환 관계 검출 시스템 및 변환 정확도 측정 시스템의 알고리즘을 제안한다. 자체 제작한 3D 체크 패턴 구조물을 이용하여 두 영상간의 대응점을 찾고, 이들 간에 관계식을 수치적 분석 또는 수학적인 분석을 통해 관계를 유도하였다. 키넥트 카메라를 이용하여 실험을 하였고, 3차원 영상으로 기존의 방법과 비교하여 성능이 향상됨을 확인 할 수 있었다.