• Journal of the Korea Academia-Industrial cooperation Society
• /
• v.21 no.6
• /
• pp.28-34
• /
• 2020

This paper proposes an approach to the fusion of two heterogeneous sensors with two different fields-of-view (FOV): LIDAR and an RGB camera. Registration between data captured by LIDAR and an RGB camera provided the fusion results. Registration was completed once a depthmap corresponding to a 2-dimensional RGB image was generated. For this fusion, RPLIDAR-A3 (manufactured by Slamtec) and a general digital camera were used to acquire depth and image data, respectively. LIDAR sensor provided distance information between the sensor and objects in a scene nearby the sensor, and an RGB camera provided a 2-dimensional image with color information. Fusion of 2D image and depth information enabled us to achieve better performance with applications of object detection and tracking. For instance, automatic driver assistance systems, robotics or other systems that require visual information processing might find the work in this paper useful. Since the LIDAR only provides depth value, processing and generation of a depthmap that corresponds to an RGB image is recommended. To validate the proposed approach, experimental results are provided.

• Proceedings of the Korean Association of Geographic Inforamtion Studies Conference
• /
• 2004.03a
• /
• pp.167-172
• /
• 2004

모바일 매핑시스템은 차량에 GPS(Global Positioning System), IMU(Inertial Measurement Unit), CCD 카메라 등을 탑재하고 공간 및 속성 정보를 취득하는 효율적인 방법이다. 모바일 매핑시스템은 도로 시설물 관리, 지도 갱신 등 다양한 분야에 이용되고 있다. 국외에서 개발된 모바일 매핑 시스템을 업그레이드하거나 새로운 센서를 추가 하고자 할 때 기존 시스템의 센서 통합 및 동기화 방안을 알 수 없으므로 시스템의 개선 및 향상이 어렵다. 본 연구에서는 모바일 매핑시스템의 개선 및 센서추가를 위해서 모바일 매핑시스템에 기본적으로 필요한 GPS, IMU, 그리고 CCD 카메라 등의 효율적인 통합 및 동기화 구현 방안을 제시하고, 동기화에 필요한 각 센서의 요구사항을 파악한 후 동기화 장비를 설계 및 제작하였다. 또한, 향후 추가될 센서인 레이져, 오도미터(Odometer) 등을 센서가 추가될 경우를 고려하여 통합장비를 설계하였다.

• Journal of the Korean Society of Surveying, Geodesy, Photogrammetry and Cartography
• /
• v.30 no.2
• /
• pp.181-188
• /
• 2012

The most recent, Digital photogrammetric camera, Airborne LiDAR and GPS/INS same sensors are used to acquire spatial information of various kinds in the field of aerial survey. In addition, Direct Georeferencing technology has been widely utilized with digital photogrammetric camera and GPS/INS. However, the sensor Calibration to be performed according to the combination of various sensors is followed by problems. Most of all, boresight calibration of integrated sensors is a critical element in the mapping process when using direct georeferencing or using the GPS/INS aerotriangulation. The establishment of a national test-bed in Sejong-si for aerial sensor calibration is absolutely necessary to solve this problem. And accurate calibration with used to integration of GPS/INS by aerotriangulation of aerial imagery was necessary for determination of system parameters, evaluation of systematic errors. Also, an investigation of efficient method for Direct georeferencing to determine the exterior orientation parameters and assessment of geometric accuracy of integrated sensors are performed.

• Proceedings of the KIEE Conference
• /
• 2006.10c
• /
• pp.372-374
• /
• 2006

방사선을 센싱하는 센서들에는 어려 종류가 있으며, 그 센서에 따라서 감도나 센싱방식이 다양하다. 본 연구에서는 해상도가 높은 범용 CCD 센서를 이용하여 방사선을 검출하는데, 들어오는 영상에서 방사선에 반응하여 생기는 백색량을 처리하여 방사선량을 측정하고 공간상에서 방사선이 가장 많이 나오는 포인터를 제시하며 스테레오 카메라 방식의 구현으로 방사선원까지의 거리 산출할 수 있다. 추후 영상을 합성하여 입체화 시키는 연구도 진행할 예정이다. 논 연구의 결과물로 예기치 않은 방사선 사고의 경우 효과적인 사친처리에 활용될 수 있을 것이다.

• Proceedings of the Korean Nuclear Society Conference
• /
• 1996.05c
• /
• pp.541-546
• /
• 1996

사용후핵연료 수송용기의 이송 및 개폐작업을 수행하기 위하여 수송용기 취급장치 (RCGLUD)를 개발하였으며, 카메라 및 다중센서를 사용하여 취급공정을 자동화하는 연구를 수행하였다. RCGLUD는 크레인에 매달려 구동되므로 수송용기에 정확히 위치를 일치시키는 작업이 어려우며, 이를 위하여 카메라 영상정보 처리방법을 도입하여 수송용기의 위치인식 방법을 개발하였으며, 수송용기의 효과적인 파지작업을 위해서 다중센서정보와 신경회로망을 이용하여 RCGLUD의 파지부와 수송용기의 Trunnion을 정확히 조심시키는 알고리즘을 개발하였다.

• Journal of Korea Game Society
• /
• v.21 no.5
• /
• pp.41-48
• /
• 2021

This paper introduces a mobile augmented visualization technology that augments a three-dimensional virtual human body on a mannequin model using two pose(position and rotation) tracking sensors. The conventional camera tracking technology used for augmented visualization has the disadvantage of failing to calculate the camera pose when the camera shakes or moves quickly because it uses the camera image, but using a pose tracking sensor can overcome this disadvantage. Also, even if the position of the mannequin is changed or rotated, augmented visualization is possible using the data of the pose tracking sensor attached to the mannequin, and above all there is no load for camera tracking.

• KIPS Transactions on Software and Data Engineering
• /
• v.4 no.4
• /
• pp.177-186
• /
• 2015

For data fusion of laser range finder (LRF) and vision camera, accurate calibration of external parameters which describe relative pose between two sensors is necessary. This paper proposes a new calibration method which can acquires more accurate external parameters between a LRF and a vision camera compared to other existing methods. The main motivation of the proposed method is that any corner data of a known 3D structure which is acquired by the LRF should be projected on a straight line in the camera image. To satisfy such constraint, we propose a 3D geometric model and a numerical solution to minimize the energy function of the model. In addition, we describe the implementation steps of the data acquisition of LRF and camera images which are necessary in accurate calibration results. In the experiment results, it is shown that the performance of the proposed method are better in terms of accuracy compared to other conventional methods.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2020.07a
• /
• pp.30-31
• /
• 2020

일반적으로 CCTV 녹화기는 24시간 중단없이 다중 카메라로 부터 수신되는 Video, Audio, Meta 데이터를 파일형태로 저장한다. 그리고 다양한 IoT 센서들은 사건(event)이 발생되었을 때, 입력되는 데이터를 기록한다. 그런데 이 형태의 데이터를 통합하여 사용하는 서비스들에 대한 요구가 증대되고 있다. 그런데 영상데이터와 IoT센서 데이터를 분리해 저장하고 관리하는 기존의 방식으로는 사용 센서의 개수 등에 따라 물리적인 크기가 커지고 관리의 복잡성이 커지는 문제가 발생한다. 본 논문에서는 다중 카메라로부터 입력되는 동영상 데이터와 IoT 센서 데이터를 통합하여 저장하는 방안을 제시한다. 이러한 통합 데이터의 고속 입출력을 지원하기 위해, 본 연구에서는 자체 파일시스템을 개발하였고 저장되는 각각의 파일을 mp4 표준을 따르게 하여 호환성을 보장하도록 구현하였다. 그래서 동영상 파일 포맷으로 널리 사용되는 MP4 포맷에 IoT센서 데이터를 함께 저장함으로써 동영상과 IoT센서의 정보를 효율적으로 관리하고 검색의 편의성을 높일 수 있게 되었다.

• Journal of Broadcast Engineering
• /
• v.8 no.1
• /
• pp.63-71
• /
• 2003

In sport programs, real-time virtual imaging system come into notice for new technology which can compose information like team logos, scores. distances directly on playing ground, so it can compensate for the defects of general character generator. In order to synchronize graphics to camera movements, generally two method is used. One is for using sensors attached to camera moving axis and the other is for analyzing camera video itself. KBS technical research institute developed real-time sensor-based virtual imaging system 'VIVA', which uses four sensors on pan, tilt, zoom, focus axis and controls virtual graphic camera in three dimensional coordinates in real-time. In this paper, we introduce our system 'VIVA' and it's technology. For accurate camera tracking we calculated view-point movement occurred by zooming based on optical principal point variation data and we considered field of view variation not only by zoom but also by focus. We developed our system based on three dimensional graphic environment. so many useful three dimensional graphic techniques such as keyframe animation can be used. VIVA was successfully used both in Busan Asian Games and 2002 presidential election. We confirmed that it can be used not only in the field but also in the studio programs in which camera is used within more close range.

• Proceedings of the Korean Society of Broadcast Engineers Conference
• /
• 2002.11a
• /
• pp.269-274
• /
• 2002

최근에 TV의 축구, 야구와 같은 스포츠 중계 방송에서 팀의 로고나 점수, 거리와 같은 그래픽 정보를 운동장에 합성시켜 보여주는 새로운 기술이 사용되고 있다. 이는 증강현실(AR: Augmented Reality)의 한 분야인 실시간 이미징 합성 기법을 사용한 것으로서 일반적으로 가상이미징 시스템이라 불리운다. 본 논문에서는 방송용 카메라의 렌즈와 팬(pan), 틸트(tilt) 축에 센서를 부착하여 이를 해석함으로써, 실시간으로 3차원 그래픽 좌표계의 가상 카메라를 제어하는 센서기반 가상이미징 시스템의 구현 결과와 관련기술을 소개한다. KBS 기술연구소에서는 실시간 가상이미징 시스템을 개발하여 'VIVA(Virtual Imaging & Virtual Advertising)'라 이름지었다. 이 시스템은 렌즈 데이터에 근거하여 카메라 캘리브레이션을 수행하며, 주밍(zooming)시 발생하는 카메라의 시점(view point) 변화를 반영하여 원거리 촬영이 이루어지는 스포츠 중계뿐만 아니라 보다 정확성이 요구되는 스튜디오 내의 근거리 프로그램 제작에도 사용이 가능하다. 합성되는 그래픽은 실세계와 같은 완전한 3차원 좌표 공간에 놓이게 되며, 월드 좌표계와 카메라 좌표계를 이용하여 사전 제작된 오브젝트들을 원하는 곳에 위치시킬 수 있다. 실사와 그래픽의 효과적인 합성을 위하여 오버레이(overlay) 모드는 물론 알파키(alphakey)와 크로마키(chromakey)를 조합한 모드를 사용하였다. VIVA는 2002년 부산 아시안 게임에서 수영과 양궁 중계에 활용하였다.