• 제목/요약/키워드: Multi-stereo image

검색결과 121건 처리시간 0.024초

3차원 얼굴 표정 추적을 위한 스테레오 시각 모듈 설계 및 구현 (Design and Realization of Stereo Vision Module For 3D Facial Expression Tracking)

  • 이문희;김경석
    • 방송공학회논문지
    • /
    • 제11권4호
    • /
    • pp.533-540
    • /
    • 2006
  • 본 연구에서는 2개의 CMOS 영상 센서가 탑재된 스테레오 시각 모듈을 사용하여 얼굴 움직임 및 표정을 효과적으로 추적할 수 있는 얼굴용 모션 캡쳐 기술을 제안한다. 제안한 추적 알고리즘에는 신경회로망 기반의 중심점추적기법 및 상관추적기법을 사용한다. 실험 결과, 일반 얼굴 표정에 대해 스테레오 시각 모션 캡쳐를 사용한 두 추적기법 모두 15, 30프레임율에 대해 각각 95.6%, 99.6%의 추적성공률을 가진다는 것을 보여준다. 그러나 '입술 떨림'의 경우, 입술부위는 중심점추적기법(82.7%/15frame, 99.1%/30frame)의 추적성공률이 상관추적기법(78.7%/15frame, 92.7%/30frame)보다 높다는 것을 보여준다.

GPU-based Stereo Matching Algorithm with the Strategy of Population-based Incremental Learning

  • Nie, Dong-Hu;Han, Kyu-Phil;Lee, Heng-Suk
    • Journal of Information Processing Systems
    • /
    • 제5권2호
    • /
    • pp.105-116
    • /
    • 2009
  • To solve the general problems surrounding the application of genetic algorithms in stereo matching, two measures are proposed. Firstly, the strategy of simplified population-based incremental learning (PBIL) is adopted to reduce the problems with memory consumption and search inefficiency, and a scheme for controlling the distance of neighbors for disparity smoothness is inserted to obtain a wide-area consistency of disparities. In addition, an alternative version of the proposed algorithm, without the use of a probability vector, is also presented for simpler set-ups. Secondly, programmable graphics-hardware (GPU) consists of multiple multi-processors and has a powerful parallelism which can perform operations in parallel at low cost. Therefore, in order to decrease the running time further, a model of the proposed algorithm, which can be run on programmable graphics-hardware (GPU), is presented for the first time. The algorithms are implemented on the CPU as well as on the GPU and are evaluated by experiments. The experimental results show that the proposed algorithm offers better performance than traditional BMA methods with a deliberate relaxation and its modified version in terms of both running speed and stability. The comparison of computation times for the algorithm both on the GPU and the CPU shows that the former has more speed-up than the latter, the bigger the image size is.

3차원 Volume PIV의 개발 (Development of 3-D Volume PIV)

  • 최장운;남구만;이영호;김미영
    • 대한기계학회논문집B
    • /
    • 제27권6호
    • /
    • pp.726-735
    • /
    • 2003
  • A Process of 3-D Particle image velocimetry, called here, as '3-D volume PIV' was developed for the full-field measurement of 3-D complex flows. The present method includes the coordinate transformation from image to camera, calibration of camera by a calibrator based on the collinear equation, stereo matching of particles by the approximation of the epipolar lines, accurate calculation of 3-D particle positions, identification of velocity vectors by 3-D cross-correlation equation, removal of error vectors by a statistical method followed by a continuity equation criterior, and finally 3-D animation as the post processing. In principle, as two frame images only are necessary for the single instantaneous analysis 3-D flow field, more effective vectors are obtainable contrary to the previous multi-frame vector algorithm. An Experimental system was also used for the application of the proposed method. Three analog CCD camera and a Halogen lamp illumination were adopted to capture the wake flow behind a bluff obstacle. Among 200 effective particle s in two consecutive frames, 170 vectors were obtained averagely in the present study.

Multi-Screen Virtual Reality System : VROOM - Hi-Resolution and four-screen Stereo Image Projection System -

  • NAKAJIMA, Masayuki;TAKAHASHI, Hiroki
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 1997년도 Proceedings International Workshop on New Video Media Technology
    • /
    • pp.95-100
    • /
    • 1997
  • In this paper, we report a system specifications of Hi-resolution and four-screen stereo image projection system which was established in VBL(Venture Business Laboratory) at Tokyo Institute of Technology on 3rd July 1996. The system is 3m $\times$ 3m $\times$2.2m rectangular parallelepiped composed of three 150inch side screens and floor. Host computers can generate virtual environment s in real-time and four projecters project these images to the screens. Viewers are, therefore, surrounded by these screens and an illusion of immersion can be created. Because, the views of users are completely covered with the projection images and many kinds of interactive devices can be used in this system. Moreover, many users can have experience the virtual environments at the same time. Usually, this kind of system uses hi-performance graphics workstations for host computers. One is SGI(Silicon Graphics, Inc.) Onyx with 3 Reality Engines. The other system is 4 personal computers. Because hi-performance and low price graphics accelerators for personal computer have been developed in these years, the abilities of VR(Virtual Reality) systems based on personal computers should be investigated.

  • PDF

임의 시점 영상 합성을 위한 깊이 정보 추출 기법 (Depth Information Extraction Technique for Arbitrary Viewpoint Image Synthesis)

  • 박남준;이제호;권용무;박상희
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송공학회 1997년도 학술대회
    • /
    • pp.161-164
    • /
    • 1997
  • 본 논문에서는 임의 시점 영상 합성을 위한 깊이 정보 추출에 관한 방법을 제안한다. 깊이 정보의 추출을 위한 방법으로서 기존의 MBS(Multiple-Baseline Stereo) 방법의 깊이 맵의 경계선 연장(boundary overreach) 문제를 감소시키며 처리 시간을 개선하는 방법으로서 계층적 방법인 MR-MBS(Multi-Resolution MBS) 방법을 제시한다. 또한 MBS 방법에서 고려하지 않고 있는 폐색 영역에 대한 적절한 처리 방법을 제시한다.

  • PDF

다중 영상으로부터 DEM 생성을 위한 정합기법의 성능향상 연구 (Research of Matching Performance Improvement for DEM generation from Multiple Images)

  • 이수암;김태정
    • 한국측량학회지
    • /
    • 제29권1호
    • /
    • pp.101-109
    • /
    • 2011
  • 본 논문에서는 다중 항공영상을 이용한 영상정합기법과, 그 성능을 향상시키기 위한 시도들에 대해 기술한다. 일반적으로 영상간의 정합은 하나의 기준영상을 기준으로 다른 영상과의 밝기값 상관계수를 이용한 유사도 분석으로 진행된다. 제안된 다중 영상 정합기법 알고리즘은 처리할 지역을 일정크기의 구역으로 나누고 각 구역에서 가장 정사영상에 가까운 영상을 기준으로 하여 Object space상에서 처리할 수 있는 방식이다. 이 방식을 통해 영상의 위치에 상관없이 균등한 품질의 DEM이 생성 가능함을 확인할 수 있었다. 또한 차폐탐지 및 생성된 차폐지도를 통한 성능 향상 실험을 하였으며 그 결과 더욱 정확한 3차원 정보의 표현이 가능함을 확인할 수 있었다.

아리랑3호 스테레오 영상의 에피폴라 기하 분석 및 영상 리샘플링 (Epipolar Image Resampling from Kompsat-3 In-track Stereo Images)

  • 오재홍;서두천;이창노
    • 한국측량학회지
    • /
    • 제31권6_1호
    • /
    • pp.455-461
    • /
    • 2013
  • 아리랑 3호는 2012년 5월 18일에 발사된 다목적실용위성으로서, 탑재된 AEISS센서는 고도 685km의 태양주기 궤도상에서 0.7m의 공간해상도 흑백 영상과 2.8m 공간해상도의 다중 파장대 영상을 폭 16.8km로 획득한다. 아리랑 3호는 아리랑 2호에 비해 많은 부분에서 성능의 향상이 이루어졌으며 그 중 단일 패스에서 스테레오 영상이 취득 가능하도록 설계되었다. 아리랑 3호를 이용하여 3차원 지형 정보의 추출을 하기 위해서는 정확한 에피폴라 기하를 규명하는 것이 필수적이며, 따라서 본 연구에서는 아리랑 3호 스테레오 영상으로부터 에피폴라 영상 제작을 위한 최적의 영상 변환식을 도출하기 위한 에피폴라 곡선의 특성에 대해 분석하였다. 영상과 함께 제공되는 RPCs(Rational Polynomial Coefficients)를 기반으로 영상 전역에 해당하는 에피폴라 커브를 도출하고 이에 대한 모양분석을 통해 에피폴라 커브가 최소 3차 다항식 이상의 변환식으로 모델링 될 수 있음을 알 수 있었다. 또한 아리랑 3호 AEISS센서의 두 개의 CCDs라인 특징 또한 확인 가능하였다. RPCs 업데이트 시에도 샘플 방향의 영상 오차를 최소화하기 위해 3차식이 필요했으며, 에피폴라 영상 리샘플링 시에도 3차 영상 변환식을 활용한 경우 최대 0.7 픽셀이내의 정밀한 y시차를 확보할 수 있었다.

Stereo Vision과 AlphaPose를 이용한 다중 객체 거리 추정 방법에 관한 연구 (A Study on the Estimation of Multi-Object Social Distancing Using Stereo Vision and AlphaPose)

  • 이주민;배현재;장규진;김진평
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제10권7호
    • /
    • pp.279-286
    • /
    • 2021
  • 최근 COVID-19 확산 방지를 위한 공공장소에서는 최소 1m 이상을 유지하는 물리적 거리두기 정책을 실행하고 있다. 본 논문에서는 드론과 CCTV가 취득한 스테레오 영상에서 실시간으로 사람들 간의 거리를 추정하는 방법과 추정된 거리에서 1m 이내의 객체를 인식하는 자동화 시스템을 제안한다. 기존의 CCTV를 이용하여 다중 객체 간의 거리 추정에 사용되었던 방법의 문제점으로는 한 대의 CCTV만을 이용하여 객체의 3차원 정보를 얻지 못한다는 것이다. 선, 후행하거나 겹쳐진 사람 간의 거리를 구하기 위해서는 3차원 정보가 필요하기 때문이다. 또한, 일반적인 Detected Bounding Box를 사용하여 영역 안에서 사람이 존재하는 정확한 좌표를 얻지 못한다. 따라서 사람이 존재하는 정확한 위치 정보를 얻기 위해 스켈레톤 추출하여 관절 키포인트의 2차원 좌표를 획득한 후, Stereo Vision을 이용한 카메라 캘리브레이션을 적용하여 3차원 좌표로 변환한다. 3차원으로 변환된 관절 키포인트의 중심좌표를 계산하고 객체 간 사이의 거리를 추정한다. 3차원 좌표의 정확성과 객체(사람) 간의 거리 추정 실험을 수행한 결과, 1m 이내에 존재하는 다수의 사람 간의 거리 추정에서 0.098m 이내 평균오차를 보였다.

Three-Dimensional Measurement of Moving Surface Using Circular Dynamic Stereo

  • Lee, Man-Hyung;Hong, Suh-Il
    • 제어로봇시스템학회:학술대회논문집
    • /
    • 제어로봇시스템학회 2001년도 ICCAS
    • /
    • pp.101.3-101
    • /
    • 2001
  • By setting a refractor with a certain angle against the optical axis of the CCD camera lens, the image of a measuring point recorded on the image plane is displaced by the corresponding amounts related to the distance between the camera and the measuring point. When the refractor that keeps the angle against the optical axis is rotated physically at high speed during the exposure of the camera, the image of a measuring point draws an annular streak. Since the size of the annular streak is inversely proportional to the distance between the camera and the measuring point, the 3D position of the measuring point can be obtained by processing the streak. In this paper, for one of the applications of our system, the measurement of a moving surface is introduced. In order to measure the moving surface, multi laser spots are projected on the surface of object. Each position of ...

  • PDF

스테레오 영상 정합에 의한 DEM 추출 (Extracting DEM by using Stereo Image Matching Technique)

  • 김한영;우동민
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 1999년도 하계학술대회 논문집 G
    • /
    • pp.2941-2943
    • /
    • 1999
  • The application of the aerial images are to find the 3-D elevations. Image matching techniques such as Multi-resolution techniques, WCC (Weighted Cross-Correlation), NSSR (Narrow Search Sub-pixel Registration) that we know robustly apply to images which have enough features. But the method is not adaptive in images which have not enough features due to increasing of disparity errors. In this paper, we propose Disparity Interpolation that decrease disparity errors occurring in the area where images have not enough features. By using real aerial images we compare the result from existing image matching techniques to the result from proposed method.

  • PDF