• 제목/요약/키워드: Vision-based monitoring

검색결과 232건 처리시간 0.031초

AprilTag and Stereo Visual Inertial Odometry (A-SVIO) based Mobile Assets Localization at Indoor Construction Sites

  • Khalid, Rabia;Khan, Muhammad;Anjum, Sharjeel;Park, Junsung;Lee, Doyeop;Park, Chansik
    • 국제학술발표논문집
    • /
    • The 9th International Conference on Construction Engineering and Project Management
    • /
    • pp.344-352
    • /
    • 2022
  • Accurate indoor localization of construction workers and mobile assets is essential in safety management. Existing positioning methods based on GPS, wireless, vision, or sensor based RTLS are erroneous or expensive in large-scale indoor environments. Tightly coupled sensor fusion mitigates these limitations. This research paper proposes a state-of-the-art positioning methodology, addressing the existing limitations, by integrating Stereo Visual Inertial Odometry (SVIO) with fiducial landmarks called AprilTags. SVIO determines the relative position of the moving assets or workers from the initial starting point. This relative position is transformed to an absolute position when AprilTag placed at various entry points is decoded. The proposed solution is tested on the NVIDIA ISAAC SIM virtual environment, where the trajectory of the indoor moving forklift is estimated. The results show accurate localization of the moving asset within any indoor or underground environment. The system can be utilized in various use cases to increase productivity and improve safety at construction sites, contributing towards 1) indoor monitoring of man machinery coactivity for collision avoidance and 2) precise real-time knowledge of who is doing what and where.

  • PDF

학내 드론 교육현장의 다중드론 감시시스템 개발에 관한 연구 (A study on the development of surveillance system for multiple drones in school drone education sites)

  • 임진택;유성구
    • 문화기술의 융합
    • /
    • 제9권1호
    • /
    • pp.697-702
    • /
    • 2023
  • 최근 4차 산업혁명의 핵심기술인 드론의 도입으로 학교 교육 현장에서는 드론을 활용한 다양한 융합교육이 진행되고 있다. 특히 자유학기제 수업 및 진로탐색과 연계하여 드론 이론 및 실습 교육을 진행하고 있다. 드론융합 교육프로그램은 단순 시연 실습교육 보다 학습자의 만족도가 높고 직접적인 실습 경험으로 인하여 학습효과가 높게 나타나고 있다. 그러나 다수의 학습자를 상대로 실습교육을 진행하고 있어 한정된 장소에서의 다중드론 비행에 제약 및 학습자 통제가 불가능한 실정이다. 본 논문에서는 학교에서 다중드론 교육 운영 시 교수자가 다수의 드론을 실시간 감시하고 드론 간의 충돌을 사전에 학습자에게 인식시켜 실시간으로 다수의 드론 감시가 가능한 감시시스템을 제안하였다. 실험에서 사용된 통신 모듈은 Murata LoRa에 GPS를 탑재하였고, 실시간으로 수신된 위치 데이터를 기반으로 모니터링이 가능하도록 서버와 클라이언트를 구성하였다. 개방형 공간에서 제안한 시스템의 성능을 평가하였으며, 약 120m 거리까지 통신 신호가 양호함을 확인하였다. 즉 240m 범위 안에서 25대의 교육용 드론의 제어가 가능하고, 교수자가 모니터링할 수 있음을 확인하였다.

무선 영상처리 기반의 차량 운전자 관리 시스템 (Wireless image processing based management system the driver of the vehicle)

  • 서지환;이재현;강성인;신동석;김관형
    • 한국정보통신학회논문지
    • /
    • 제13권11호
    • /
    • pp.2349-2354
    • /
    • 2009
  • 최근 전자 및 제어장치의 발달로 자동차에도 많은 전자 장비들을 적용하여 차량의 자동화 및 다양한 상황인식 시스템이 적용되고 있다. 특히, 비젼시스템을 도입하여 무인운전 시스템 개발이 활발히 진행되고 있다. 그러나, 일반 차량에 대한 비젼시스템은 아직 고가이며 유선을 통한 영상정보를 전달하므로 차량내의 복잡한 배선으로 인하여 실용화에 더욱 어려움을 격고 있다. 본 논문에서는 차량 내부에 간단하게 설치 할 수 있는 저가의 무선통신 영상처리 장치를 통해 전방의 차선과 장애물을 인식하고 장애물이 발견될 시 운전자에게 이를 알려주는 알람시스템과 ZigBee무선 통신기반의 적외선, 초음파 센서를 이용하여 차량 외부 상황을 모니터링 하여 주차 시 운전자에게 편의를 줄 수 있는 시스템을 설계 구현하였다. 본 논문에서 제안한 시스템의 효율성을 알아보기 위해 모형자동차에 이를 적용하여 확인해 보았다.

다중 어안 카메라를 이용한 움직이는 물체 검출 연구 (A Study on Detecting Moving Objects using Multiple Fisheye Cameras)

  • 배광혁;서재규;박강령;김재희
    • 대한전자공학회논문지SP
    • /
    • 제45권4호
    • /
    • pp.32-40
    • /
    • 2008
  • 기존의 보안 감시 시스템은 화각이 좁은 일반 렌즈를 주로 사용하여 천정이 낮고 실내가 넓은 환경에 적용하기가 어려웠다. 이를 해결하기 위해 단순히 카메라의 수를 늘리는 방법은 비용의 증가와 설치의 어려움 등의 문제가 있다. 따라서 본 논문에서는 화각이 180도인 어안 카메라를 다수 설치한 사용자 감시 시스템을 제안하였다. 단일 어안 카메라에서 물체간의 교차에 의한 가림현상이 발생되는 문제를 해결하기 위해서 카메라간의 상동관계를 다중 어안 카메라 시스템에 적용하였다. $17{\times}14m$의 공간의 2.5m 높이에 설치된 4대의 어안 카메라에서 5명이 서로 교차하면서 움직이도록 하여 수행한 결과, 단일 어안카메라에서 최대 46.1% 낮은 검출율을 보인 반면 제안된 시스템에서 83.0%로 향상된 성능을 보였다.

실시간 영상처리를 이용한 개별차량 추적시스템 개발 (Development of a Real Time Video Image Processing System for Vehicle Tracking)

  • 오주택;민준영
    • 한국도로학회논문집
    • /
    • 제10권3호
    • /
    • pp.19-31
    • /
    • 2008
  • 영상처리시스템(VIPS: Video Image Processing System)은 실시간으로 들어오는 영상정보를 분석하여 유용한 정보를 제공하며, 하나의 카메라로 여러 차로를 동시에 감시할 수 있는 알고리즘으로 교통량, 속도뿐만 아니라 밀도 및 점유율 등 다양한 정보를 제공한다. 영상검지시스템으로 상용화 제품은 Tripwire시스템으로 검지영역의 픽셀 변화량으로 차량검지를 하나, 이는 교통량, 속도 등 단편적인 정보에 국한될 수 밖에 없다. 반면, 영상검지시스템이 개별차량에 대한 추적시스템으로 개발할 경우 사고 및 차로 변경의 위험요소 감지 등 보다 다양한 정보를 제공할 수가 있다. 본 논문은 컴퓨터비전 기술을 이용하여 Tripwire에서 수집할 수 있는 교통정보와 동일한 정보를 제공하는 개별차량의 추적시스템을 개발하였으며 이 시스템을 실제 도로영상에 적용하여 상용화된 시스템과 결과를 비교함으로써 성능검증을 하였다.

  • PDF

Ensemble-based deep learning for autonomous bridge component and damage segmentation leveraging Nested Reg-UNet

  • Abhishek Subedi;Wen Tang;Tarutal Ghosh Mondal;Rih-Teng Wu;Mohammad R. Jahanshahi
    • Smart Structures and Systems
    • /
    • 제31권4호
    • /
    • pp.335-349
    • /
    • 2023
  • Bridges constantly undergo deterioration and damage, the most common ones being concrete damage and exposed rebar. Periodic inspection of bridges to identify damages can aid in their quick remediation. Likewise, identifying components can provide context for damage assessment and help gauge a bridge's state of interaction with its surroundings. Current inspection techniques rely on manual site visits, which can be time-consuming and costly. More recently, robotic inspection assisted by autonomous data analytics based on Computer Vision (CV) and Artificial Intelligence (AI) has been viewed as a suitable alternative to manual inspection because of its efficiency and accuracy. To aid research in this avenue, this study performs a comparative assessment of different architectures, loss functions, and ensembling strategies for the autonomous segmentation of bridge components and damages. The experiments lead to several interesting discoveries. Nested Reg-UNet architecture is found to outperform five other state-of-the-art architectures in both damage and component segmentation tasks. The architecture is built by combining a Nested UNet style dense configuration with a pretrained RegNet encoder. In terms of the mean Intersection over Union (mIoU) metric, the Nested Reg-UNet architecture provides an improvement of 2.86% on the damage segmentation task and 1.66% on the component segmentation task compared to the state-of-the-art UNet architecture. Furthermore, it is demonstrated that incorporating the Lovasz-Softmax loss function to counter class imbalance can boost performance by 3.44% in the component segmentation task over the most employed alternative, weighted Cross Entropy (wCE). Finally, weighted softmax ensembling is found to be quite effective when used synchronously with the Nested Reg-UNet architecture by providing mIoU improvement of 0.74% in the component segmentation task and 1.14% in the damage segmentation task over a single-architecture baseline. Overall, the best mIoU of 92.50% for the component segmentation task and 84.19% for the damage segmentation task validate the feasibility of these techniques for autonomous bridge component and damage segmentation using RGB images.

스테레오 비젼 기반의 능동형 물체 추적 시스템 (Active Object Tracking System based on Stereo Vision)

  • 고정환
    • 전자공학회논문지
    • /
    • 제53권4호
    • /
    • pp.159-166
    • /
    • 2016
  • 본 논문에서는 지능적인 보안 시스템 구현의 새로운 접근 방식으로, 인공지능형 시각 시스템에 기반한 팬/틸트 탑재형 스테레오 카메라의 기하학적 정보를 이용한 능동형 물체 추적 시스템을 제안하였다. 제안된 시스템에서는 먼저, 스테레오 카메라에서 입력된 영상으로 부터 YCbCr 컬러 모델과 위상형 상관 기법을 사용하여 표적 얼굴영역의 중심좌표를 검출한 다음, 지능형 시각 시스템에 기반한 팬/틸트 탑재형 스테레오 카메라의 능동적인 제어각도 산출을 통해 표적의 다양한 변화에 관계없이 표적의 3차원 좌표를 실시간적으로 검출하고, 이를 통한 표적 대상의 적응적인 신체 크기 추정을 수행하였다. 각기 다른 신장을 가진 3사람의 다양한 이동경로를 가진 480 프레임의 테스트용 스테레오 영상을 사용한 실험 결과, 표적의 추정된 신체 크기값 역시 계산치 및 측정치 사이의 표준편차가 평균 1.03의 작은 값으로 유지됨은 물론, 제안된 시스템에서 계산된 좌표값과 실제 실험대상으로 참여한 사람의 정확한 실제 위치와의 차이 역시 평균 1.2cm 미만의 오차와 전체적으로 1.18 %의 오차를 보임으로써 이를 통한 새로운 실시간 스테레오 표적 감시추적 시스템의 구현 가능성을 제시하였다.

다중 카메라 네트워크 가상의 관심선(Line of Interest)을 활용한 건물 내 재실자 인원 계수 방법론 개발 (Developing an Occupants Count Methodology in Buildings Using Virtual Lines of Interest in a Multi-Camera Network)

  • 천휘경;박찬혁;지석호;노명일
    • 대한토목학회논문집
    • /
    • 제43권5호
    • /
    • pp.667-674
    • /
    • 2023
  • 건물에서 재난이 발생할경우, 건물 내 인원을 신속히 구조하여 사상자를 최소화하는 것은 단연 최우선순위가 된다. 이러한 구조활동을 위해서는 건물내 어디에 몇 명이 있는지를 알아야 하는데, 실시간으로 알기가 어렵다보니 주로 건물주나 경비원 등 관계자의 진술이나 층별 면적, 수용 인원과 같은 기초자료에 의존하는 실정이다. 따라서 빠르고 정확하게 재실인원 정보를 파악하여 현장에 대한 불확실성을 낮추고 골든타임내 효율적인 구조활동을 지원하는 것이 반드시 필요하다. 본 연구는 컴퓨터 비전 알고리즘을 활용하여 이미 건물에 설치되어 있는 여러대의 CCTV 가 촬영한 이미지 로부터 건물 위치별 재실인원을 계수하는 방법론을 제시한다. 계수 방법론은 (1)카메라별 관심선(LOI) 설정을 통한 다중카메라 네트워크 환경구축, (2)딥러닝을 활용한 모니터링 구역내 사람 탐지 및 추적, (3)다중 카메라 네트워크 환경을 고려한 인원 합산 세단계로 구성된다. 제안된 방법론은 5층 건물을 대상으로 세 개의 시간대 별로 수행된 현장 실험을 통해 검증되었다. 최종 결과는 89.9%의 정확도로 재실자를 인식하는 것으로 나타났으며, 층별, 구역별 합산결과도 93.1%, 93.3%의 정확도로 우수했다. 층별 평균MAE와 RMSE는 각각 0.178과 0.339이었다. 이 처럼 실시간으로 제공하는 건물내 재실자 정보는 초기 재난 대응단계에 신속하고 정확한 구조활동을 지원 할 수있다.

정부출연연구기관 전략적 성과관리체계(BSC) 구축사례: K연구원을 중심으로 (Case Study on BSC System Implementation in Korean Public-Sector R&D Institution: Focused on K-Institute)

  • 임환;임호순;송용일
    • 기술혁신학회지
    • /
    • 제11권4호
    • /
    • pp.639-670
    • /
    • 2008
  • Kaplan과 Norton(1992)에 의해 소개된 BSC(balanced scorecard)는 다양한 기업과 산업에서 일반적인 성과평가 도구로 활용되고 있다. BSC는 전략적 목표를 구체적인 운영지표에 연계시켜 기업의 목표달성을 효과적으로 평가할 수 있도록 해 주는 장점이 있다. 본 연구는 설립 목적상 공공성을 갖으면서 지식전문가로 구성된 국가R&D조직에 BSC시스템을 구축하고 적용한 사례를 보여준다. 이러한 공공 전문조직이 BSC를 통해 전략적 방향을 재정렬하고 전략집중형 조직(Strategy Focused Organization)으로 변화하기 위해서는, 기관의 고유 미션으로부터 시작하여 비전 재설정, 전략방향과 목표 수립, 핵심성과지표 도출, 전략지도(Strategy Map) 설정, 모니터링 시스템 구축에 이르는 BSC 전체 구축과정에서의 방법론에 대한 이해와 현실적 적용이 성공의 핵심적인 요소라 할 수 있다. 이에 본 K연구원의 사례에서는 그러한 적용과정을 보여줌으로 해서 공공연구기관의 BSC구축에 대한 유익한 시사점을 제공하고자 한다.

  • PDF

USART 방법에 의한 X선 영상으로부터의 삼차원 물체의 형상 복원 (Three Dimensional Volume Reconstruction of an Object from X-ray Iamges using Uniform and Simultaneous ART)

  • 노영준;조형석;김형철;김종형
    • 제어로봇시스템학회논문지
    • /
    • 제8권1호
    • /
    • pp.21-27
    • /
    • 2002
  • Inspection and shape measurement of three-dimensional objects are widely needed in industries for quality monitoring and control. A number of visual or optical technologies have been successfully applied to measure three-dimensional surfaces. However, those conventional visual or optical methods have inherent shortcomings such as occlusion and variant surface reflection. X-ray vision system can be a good solution to these conventional problems, since we can extract the volume information including both the surface geometry and the inner structure of any objects. In the x-ray system, the surface condition of an object, whether it is lambertian or specular, does not affect the inherent characteristics of its x-ray images. In this paper, we propose a three-dimensional x-ray imaging method to reconstruct a three dimensional structure of an object out of two dimensional x-ray image sets. To achieve this by the proposed method, two or more x-ray images projected from different views are needed. Once these images are acquired, the simultaneous algebraic reconstruction technique(SART) is usually utilized. Since the existing SART algorithms have several shortcomings such as low performance in convergence and different convergence within the reconstruction volume of interest, an advanced SART algorithm named as USART(uniform SART) is proposed to avoid such shortcomings and improve the reconstruction performance. Because, each voxel within the volume is equally weighted to update instantaneous value of its internal density, it can achieve uniform convergence property of the reconstructed volume. The algorithm is simulated on various shapes of objects such as a pyramid, a hemisphere and a BGA model. Based on simulation results the performance of the proposed method is compared with that of the conventional SART method.