• 제목/요약/키워드: Multi-camera calibration

검색결과 82건 처리시간 0.026초

Auto-Calibration을 이용한 Unstructured Environment에서의 실내 위치추정 기법 (Localization of Mobile Robot In Unstructured Environment using Auto-Calibration Algorithm)

  • 엄위섭;서대근;박재현;이장명
    • 제어로봇시스템학회논문지
    • /
    • 제15권2호
    • /
    • pp.211-217
    • /
    • 2009
  • This paper proposes a way of expanding the use area of localization technique by using a beacon. In other words, we have developed the auto-calibration algorithm that recognizes the location of this beacon by attaching the beacon on an arbitrary position and by using the information of existing beacon under this situation. By doing so, the moving robot can overcome the limitation that the localization of moving robot is only possible within the area that has installed the existing beacon since the beacon cannot be installed on the accurate location when passing through a danger zone or an unknown zone. Accordingly, the moving robot can slowly move to the unknown zone according to this auto-calibration algorithm and can recognize its own location at a later time in a safe zone. The localization technique is essentially needed in using a moving robot and it is necessary to guarantee certain degree of reliability. Generally, moving robots are designed in a way to work well under the situation that the surroundings is well arranged and the localization techniques of using camera, laser and beacon are well developed. However due to the characteristics of sensor, there may be the cases that the place is dark, interfering radio waves, and/or difficult to install a beacon. The effectiveness of the method proposed in this paper has been proved through an experiment in this paper.

Parallel Multi-task Cascade Convolution Neural Network Optimization Algorithm for Real-time Dynamic Face Recognition

  • Jiang, Bin;Ren, Qiang;Dai, Fei;Zhou, Tian;Gui, Guan
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제14권10호
    • /
    • pp.4117-4135
    • /
    • 2020
  • Due to the angle of view, illumination and scene diversity, real-time dynamic face detection and recognition is no small difficulty in those unrestricted environments. In this study, we used the intrinsic correlation between detection and calibration, using a multi-task cascaded convolutional neural network(MTCNN) to improve the efficiency of face recognition, and the output of each core network is mapped in parallel to a compact Euclidean space, where distance represents the similarity of facial features, so that the target face can be identified as quickly as possible, without waiting for all network iteration calculations to complete the recognition results. And after the angle of the target face and the illumination change, the correlation between the recognition results can be well obtained. In the actual application scenario, we use a multi-camera real-time monitoring system to perform face matching and recognition using successive frames acquired from different angles. The effectiveness of the method was verified by several real-time monitoring experiments, and good results were obtained.

재난조사 특수차량과 드론의 다중센서 자료융합을 통한 재난 긴급 맵핑의 활용성 평가 (Applicability Assessment of Disaster Rapid Mapping: Focused on Fusion of Multi-sensing Data Derived from UAVs and Disaster Investigation Vehicle)

  • 김성삼;박제성;신동윤;유수홍;손홍규
    • 대한원격탐사학회지
    • /
    • 제35권5_2호
    • /
    • pp.841-850
    • /
    • 2019
  • 본 논문은 상업용 소형 드론의 드론 맵핑 기하 정확도 평가와 지상 LiDAR와 드론 점군 자료의 융합을 통하여 재난 긴급 맵핑 적용성에 관한 연구이다. 기존의 드론 맵핑 절차와 카메라 검정과 광속조정법으로 카메라 모델을 최적화한 드론 맵핑 간의 위치 오차를 비교 분석한 결과, 평면 위치오차는 2~3 m에서 약 0.11~0.28 m 수준으로, 수직 위치오차는 2.85 m에서 0.45 m 수준으로 위치결정 정확도가 향상되었다. 아울러, 드론 맵핑과정에서 누락되기 쉬운 점군 자료의 측면정보를 지상 LiDAR 점군자료와 융합을 통해 보완할 수 있도록 두 점군 자료간 정합을 위한 개선된 좌표계 변환 모델을 제시하여 연구 대상지내 이종 점군 자료를 최대 오차 0.07 m 이내로 정합하였다. 본 논문에서의 재난현장에서의 드론 기반의 긴급 맵핑과 재난 현장정보를 보다 정밀하게 구축하기 위한 점군 자료융합에 관한 연구 성과는 향후 국가 재난안전 관리 현업에 일조할 수 있을 것으로 기대된다.

스테레오 카메라와 균일 매시를 이용한 매립지의 환경감시를 위한 체적 계산 알고리즘 (Volume Calculation for Filling Up of Rubbish Using Stereo Camera and Uniform Mesh)

  • 이영대;조성윤;김경;이동규
    • 한국인터넷방송통신학회논문지
    • /
    • 제12권3호
    • /
    • pp.15-22
    • /
    • 2012
  • 안전하고 쾌적한 도시 환경을 조성하기 위해 폐기물 매립 시설은 필요하며 폐기물 부피 관리의 신뢰성 및 용량 정보의 정확성을 파악하는 것이 필요하다. 본 연구에서는 쓰레기 매립장 환경 개선을 위해 매립된 쓰레기의 체적을 스테레오 비전 카메라를 이용하여 계산하고 매립량을 계산하기 위한 알고리즘을 개발 하였다. 스테레오(stereo)) 카메라를 이용하여 왜곡 파라메타 교정을 한 후에 쓰레기 매립지의 대상 표면 점들의 클라우드를 얻게 되며 이를 체적 알고리즘의 입력으로 하여 제시된 두 가지 방법의 체적계산 알고리즘을 통해 대상체의 체적을 계산하게 된다. 그리고 이 부피 값과 비교하고자 하는 지난 시간의 체적 값을 감산하여 매립된 체적을 계산한다. 이를 통해 주간 매립 체적, 월간 매립 체적 및 년간 매립 체적을 계산하여 쓰레기 매립 제어를 위한 정량적인 통계값을 얻을 수 있게 된다.

드론 탑재 복합센서의 매핑 정확도 분석: 데이터 취득 환경에 따른 사전 캘리브레이션 여부를 중심으로 (Analysis on Mapping Accuracy of a Drone Composite Sensor: Focusing on Pre-calibration According to the Circumstances of Data Acquisition Area)

  • 전일서;함상우;이임평
    • 대한원격탐사학회지
    • /
    • 제37권3호
    • /
    • pp.577-589
    • /
    • 2021
  • 드론 매핑 시스템은 재난 피해 조사, 국토 환경 모니터링, 건설 공정 모니터링 등 여러 분야에 응용 가능하다. 드론에 장착된 다양한 개별 센서를 통합하여 활용하려면 시간동기화 등 여러가지 절차가 필요했다. 최근, 영상 센서와 GPS/INS가 함께 내장된 복합센서가 다수 출시되었다. 복합센서는 여러 가지 센서 데이터를 내부적으로 통합하여, 위치/자세를 영상 파일에 바로 태깅하여 제공한다. 이러한 복합센서를 드론 매핑 시스템에 활용하려면 매핑 정확도를 확인해 볼 필요가 있다. 이에 본 연구에서는 다양한 데이터 취득 환경과 사전 캘리브레이션 여부를 중심으로 복합센서의 매핑 정확도를 확인하였다. 첫째, 매핑 정확도가 지상기준점의 개수에 따라 어떻게 변하는지 살펴보았다. 지상기준점 개수가 2개일 때부터 총 RMSE가 1 m 이상에서 약 60 cm로 40 cm가량 줄어드는 것을 확인할 수 있었다. 둘째, 데이터 취득 상황과 사전 캘리브레이션 여부에 따른 매핑 정확도를 확인하였다. 지상기준점이 있는 경우에는 개수가 적을지라도 사전 캘리브레이션의 영향이 크지 않은 것을 확인할 수 있었다. 영상의 중복도가 충분하지 않을 때는 사전 캘리브레이션 하는 것이 정확도 개선에 영향을 주는 것을 확인할 수 있었다. 지상기준점이 없는 경우에는 카메라, 탑재체 모두 사전 캘리브레이션 하는 것이 정확도를 개선시키는데 영향이 있음을 확인하였다. 본 연구를 기반으로, 향후 복합센서를 이용한 드론 매핑 수행 시 데이터 취득 조건에 따라 지상기준점 측량과 캘리브레이션 과정을 효율화 하는데 기여할 것으로 기대한다.

Spectrum-Based Color Reproduction Algorithm for Makeup Simulation of 3D Facial Avatar

  • Jang, In-Su;Kim, Jae Woo;You, Ju-Yeon;Kim, Jin Seo
    • ETRI Journal
    • /
    • 제35권6호
    • /
    • pp.969-979
    • /
    • 2013
  • Various simulation applications for hair, clothing, and makeup of a 3D avatar can provide more useful information to users before they select a hairstyle, clothes, or cosmetics. To enhance their reality, the shapes, textures, and colors of the avatars should be similar to those found in the real world. For a more realistic 3D avatar color reproduction, this paper proposes a spectrum-based color reproduction algorithm and color management process with respect to the implementation of the algorithm. First, a makeup color reproduction model is estimated by analyzing the measured spectral reflectance of the skin samples before and after applying the makeup. To implement the model for a makeup simulation system, the color management process controls all color information of the 3D facial avatar during the 3D scanning, modeling, and rendering stages. During 3D scanning with a multi-camera system, spectrum-based camera calibration and characterization are performed to estimate the spectrum data. During the virtual makeup process, the spectrum data of the 3D facial avatar is modified based on the makeup color reproduction model. Finally, during 3D rendering, the estimated spectrum is converted into RGB data through gamut mapping and display characterization.

로봇의 시각시스템을 위한 물체의 거리 및 크기측정 알고리즘 개발 (Development of a Robot's Visual System for Measuring Distance and Width of Object Algorism)

  • 김회인;김갑순
    • 제어로봇시스템학회논문지
    • /
    • 제17권2호
    • /
    • pp.88-92
    • /
    • 2011
  • This paper looks at the development of the visual system of robots, and the development of image processing algorism to measure the size of an object and the distance from robot to an object for the visual system. Robots usually get the visual systems with a camera for measuring the size of an object and the distance to an object. The visual systems are accurately impossible the size and distance in case of that the locations of the systems is changed and the objects are not on the ground. Thus, in this paper, we developed robot's visual system to measure the size of an object and the distance to an object using two cameras and two-degree robot mechanism. And, we developed the image processing algorism to measure the size of an object and the distance from robot to an object for the visual system, and finally, carried out the characteristics test of the developed visual system. As a result, it is thought that the developed system could accurately measure the size of an object and the distance to an object.

Speeding up the KLT Tracker for Real-time Image Georeferencing using GPS/INS Data

  • Tanathong, Supannee;Lee, Im-Pyeong
    • 대한원격탐사학회지
    • /
    • 제26권6호
    • /
    • pp.629-644
    • /
    • 2010
  • A real-time image georeferencing system requires all inputs to be determined in real-time. The intrinsic camera parameters can be identified in advance from a camera calibration process while other control information can be derived instantaneously from real-time GPS/INS data. The bottleneck process is tie point acquisition since manual operations will be definitely obstacles for real-time system while the existing extraction methods are not fast enough. In this paper, we present a fast-and-automated image matching technique based on the KLT tracker to obtain a set of tie-points in real-time. The proposed work accelerates the KLT tracker by supplying the initial guessed tie-points computed using the GPS/INS data. Originally, the KLT only works effectively when the displacement between tie-points is small. To drive an automated solution, this paper suggests an appropriate number of depth levels for multi-resolution tracking under large displacement using the knowledge of uncertainties the GPS/INS data measurements. The experimental results show that our suggested depth levels is promising and the proposed work can obtain tie-points faster than the ordinary KLT by 13% with no less accuracy. This promising result suggests that our proposed algorithm can be effectively integrated into the real-time image georeferencing for further developing a real-time surveillance application.

깊이 정보에 따른 레이어별 히스토그램 매칭을 이용한 조명 불일치 보상 기법 (Illumination Mismatch Compensation Algorithm based on Layered Histogram Matching by Using Depth Information)

  • 이동석;유지상
    • 한국통신학회논문지
    • /
    • 제35권8C호
    • /
    • pp.651-660
    • /
    • 2010
  • 본 논문에서는 깊이정보를 이용하여 레이어별 객체를 분리하고 개별적으로 히스토그램 매칭기법을 적용하는 색상 불일치 보상기법을 제안한다. 다시점 비디오의 조명 불일치 현상은 서로 다른 카메라의 위치와 카메라간의 잘못된 보정으로 인하여 발생한다. 이러한 색상 불일치는 다시점 비디오 부호화의 성능을 저하시키는 요인이 된다. 이러한 문제를 해결하기 위한 히스토그램 매칭을 이용한 전처리기법이 제안되었다. 히스토그램 매칭을 통해 모든 시점의 다시점 영상 히스토그램은 정해진 참조 시점영상의 히스토그램과 매칭이 되고, 다시점 비디오 부호화의 성능을 개선할 수 있다. 그러나 일반적으로 영상은 상호 독립적인 색상 분포와 히스토그램 분포을 가지는 여러 개의 객체로 구성된다. 특히 다시점 영상은 시점에 따른 프레임마다 객체의 구성과 위치 및 그 깊이가 각각 다르다. 본 논문에서는 주어진 영상 내에서 깊이정보를 이용하여 객체를 먼저 분리하고, 객체별로 히스토그램 매칭기법을 적용하여 색상 보상을 수행하는 새로운 기법을 제안한다. 실험을 통해 제안하는 객체 단위의 조명 보상기법이 기존의 영상 단위의 조명 보상기법보다 향상된 다시점 비디오 부호화 효율을 보이는 것을 확인하였다.

3차원 측정 로보트 셀 개발 (Development of 3-dimensional measuring robot cell)

  • 박강;조경래;신현오;김문상
    • 제어로봇시스템학회:학술대회논문집
    • /
    • 제어로봇시스템학회 1991년도 한국자동제어학술회의논문집(국내학술편); KOEX, Seoul; 22-24 Oct. 1991
    • /
    • pp.1139-1143
    • /
    • 1991
  • Using industrial robots and sensors, we developed an inline car body inspection system which proposes high flexibility and sufficient accuracy. Car Body Inspection(CBI) cell consists of two industrial robots, two corresponding carriages, camera vision system, a process computer with multi-tasking ability and several LDS's. As industrial robots guarantee sufficient repeatabilities, the CBI cell adopts the concept of relative measurement instead of that of absolute measurement. By comparing the actual measured data with reference data, the dimensional errors of the corresponding points can be calculated. The length of the robot arms changes according to ambient temperature and it affects the measuring accuracy. To compensate this error, a robot arm calibration process was realized. By measuring a reference jig, the differential changes of the robot arms due to temperature fluctuation can be calculated and compensated.

  • PDF