• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2011.07a
• /
• pp.35-38
• /
• 2011

최근 3DTV 의 급격한 활성화로 스테레오 영상 콘텐츠 제작이 크게 증가하고 있다. 스테레오 영상은 일반 2D 영상과 달리 깊이(depth)가 존재하므로 자막과 같은 그래픽의 삽입에서 그 깊이를 반드시 고려해야 한다. 또한 시각피로를 줄이기 위해 스테레오 촬영 시 영상의 변이맵(disparity map)을 실시간 관찰할 필요성도 요구되고 있다. 본 논문에서는 최신의 그래픽 하드웨어를 이용하여 듀얼스트림 HD 영상을 실시간으로 스테레오 정합하는 방법을 제안한다.

• Journal of Broadcast Engineering
• /
• v.18 no.3
• /
• pp.362-371
• /
• 2013

This paper presents a framework of real-time augmented reality on 3-D mobile display with stereo camera tracking. In the framework, camera poses are jointly estimated with the geometric relationship between stereoscopic images, which is based on model-based tracking. With the estimated camera poses, the virtual contents are correctly augmented on stereoscopic images through image rectification. For real-time performance, stereo camera tracking and image rectification are efficiently performed using multiple threads. Image rectification and color conversion are accelerated with a GPU processing. The proposed framework is tested and demonstrated on a commercial smartphone, which is equipped with a stereoscopic camera and a parallax barrier 3-D display.

• The Journal of Korean Institute of Communications and Information Sciences
• /
• v.25 no.10B
• /
• pp.1821-1831
• /
• 2000

In this paper we propose a new adaptive stereo object tracking system that can extract the object from the complex background and foreground noises by using the image-based SAD algorithm and control the convergence angle and pan/tilt of cameras by using optical BPEJTC. From the experimental results the proposed stereo tracking system is found to track the object adpatively under the circumstance of complex and changing background noises and the possibility of real-time implementation of the proposed system by using the optical system is also suggested.

• Journal of the Institute of Electronics Engineers of Korea SC
• /
• v.37 no.2
• /
• pp.50-59
• /
• 2000

Stereo vision is a technique extracting depth information from stereo images, which are two images that view an object or a scene from different locations. The most important procedure in stereo vision, which is called stereo matching, is to find the same points in stereo images. It is difficult to match stereo images in real time because stereo matching requires heavy calculation. In this Paper we design a digital VLSI to Process stereo matching in real time, which we call stereo image match processor (SIMP). For implementation of real time stereo matching, sliding memory and minimum selection tree are presented. SIMP is designed with pipeline architecture and parallel processing. SIMP takes 64 gray level 64$\times$64 stereo images and yields 8 level 64 $\times$64 disparity map by 3 bit disparity and 12 bit address outputs. SIMP can process stereo images with process speed of 240 frames/sec.

• Proceedings of the Acoustical Society of Korea Conference
• /
• 1998.06c
• /
• pp.269-272
• /
• 1998

본 논문에서는 스테레오 스피커를 통해 입체 음향을 재생할 때 발생하는 크로스 토크(corss talk)를 제거하기 위한 트랜스오럴 필터를 실시간으로 구현하였다. 실시간 처리를 위하여 일반적인 트랜스오럴 필터를 재구성하였으며, 범용 DSP(Digital Signal Processor) 칩인 TMS320C40을 사용하였다. 메인 프로그램은 C-언어를 이용하여 작성하였으며, 빠른 연산을 필요로 하는 컨벌루션 함수는 어셈블러 언어를 이용하여 최적화 하였다. 구현된 트랜스오럴 필터의 평가를 위해서 더미 헤드를 이용하여 녹음된 binaural 신호와 DSP를 이용하여 실시간으로 합성된 binaural 신호를 스테레오 스피커를 통해 재생하여 청취 실험하였다. 청취 실험한 결과 머리 밖에서 음상 정위가 이루어지고 공간감과 거리감은 헤드폰으로 청취할 때 보다 우수하게 나타났다.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2009.11a
• /
• pp.243-246
• /
• 2009

본 논문에서는 스테레오 카메라를 이용하여 3차원 공간을 인식한 후 판별된 손동작에 의해 3차원 객체를 제어 할 수 있는 실시간 시스템을 구현 하고자 한다. 스테레오 카메라를 통해 획득한 현재 영상에서 배경 영상을 제거한 후 피부색의 특징을 이용한 이진화를 수행하여 손의 영역을 찾고 관심 영역에 대해서 변이(disparity)를 추정하여 손 영역의 깊이정보를 추가한 3차원 좌표를 실시간으로 얻을 수 있다. 손의 특징 점을 이용하여 손목을 찾고 손동작을 판별한다. 손을 관심 역역으로 설정한 시스템에서 3차원 공간 좌표는 실시간으로 사용자의 손의 움직임에 의해 획득되고 이를 가상과 현실이 합쳐진 3차원 증강현실과의 연동을 하게 한다. 실험을 통해 제안하는 실시간 시스템은 손과 카메라의 각도와 손가락의 개수에 따라 평균 손동작 인식률이 83%가 되는 것을 검증하였다.

• Proceedings of the Korea Information Processing Society Conference
• /
• 2002.11a
• /
• pp.31-34
• /
• 2002

본 논문에서는 2 대의 카메라로부터 입력된 스테레오 영상을 이용하여 가상캐릭터의 동작을 실시간으로 생성하는 방법에 대해 기술한다. 이 시스템은 동작자의 움직임을 캡쳐하기 위해 동작자의 좌, 우 전방에 동기화된 2 대의 컬러 CCD 카메라를 위치시킨다. 카메라로부터 입력된 스테레오 영상을 분석하여 신체의 중심이 되는 루트와 머리, 손, 발과 같은 end-effector의 2차원 특징점을 추출하고, 추출된 특징점들은 카메라의 사영행렬과 추적 알고리즘을 통해 3차원 위치를 생성한다. 생성된 루트와 end-effector 의 3 차원 위치정보는 노이즈 제거를 위한 필터링을 거친 후 역운동학 알고리듬에 적용하고, 인체 관절의 해부학적인 제약조건과 관절간의 상호 연관성 및 전 후 프레임간의 부드러운 연결 동작 생성을 고려하여 중간관절의 위치를 정밀하게 계산한다. 중간관절의 위치를 생성하므로 서 임의 동작자의 움직임에 대한 모든 관절의 정보를 획득할 수 있으며, 획득된 동작 데이터를 가상 캐릭터에 적용하므로 서 캐릭터의 움직임을 실시간으로 생성할 수 있다.

• The Journal of Korean Institute of Communications and Information Sciences
• /
• v.30 no.4C
• /
• pp.239-246
• /
• 2005

In this paper. we generate a virtual right image corresponding to the input left image by using given RGB texture data and 8 bit gray scale depth data. We first transform the depth data to disparity data and then produce the virtual right image with this disparity. We also proposed a stereo image synthesis algorithm which is adaptable to a viewer's position and an real-time processing algorithm with a fast LUT(look up table) method. Finally, we could synthesize a total of eleven stereo images with different view points for SD quality of a texture image with 8 bit depth information in a real time.

• The Journal of Korean Institute of Communications and Information Sciences
• /
• v.33 no.10C
• /
• pp.813-819
• /
• 2008

In this paper, we implemented a real-time system which displays 3-dimensional (3D) stereoscopic image with stereo camera. The system consists of a set of stereo camera, FPGA board, and 3D stereoscopic LCD. Two CMOS image sensor were used for the stereo camera. FPGA which processes video data was designed with Verilog-HDL, and it can accommodate various resolutional videos. The stereoscopic image is configured by two methods which are side-by-side and up-down image configuration. After the left and right images are converted to the type for the stereoscopic display, they are stored into SDRAM. When the next frame is inputted into FPGA from two CMOS image sensors, the previous video data is output to the DA converter for displaying it. From this pipeline operation, the real-time operation is possible. After the proposed system was implemented into hardware, we verified that it operated exactly.

• Proceedings of the KIEE Conference
• /
• 2015.07a
• /
• pp.1335-1336
• /
• 2015

스테레오 X-선 검색장치에서 취득된 2장의 영상을 통하여 얻어질 수 있는 3차원 정보의 한계를 극복하기 위하여 취득된 영상에 대하여 간단한 전처리 및 시점을 변환하여 실시간으로 3D 출력하여 관측자로 하여금 상당한 입체감을 느낄 수 있게 할 수 있는 기법을 제시하였으며, 본 연구의 결과는 실시간 스테레오 X-선 검색장치의 효율을 높이는데, 주요하게 활용될 수 있을 것으로 예상된다. 따라서, 본 연구에서는 기존 좌, 우 프레임 병합 출력을 연속 프레임 120Hz 출력으로 개선하고, 입체감 인지 시간을 줄이기 위하여 초기 영상을 제공하였다.