• 제목/요약/키워드: Sensor fusion

검색결과 820건 처리시간 0.032초

가시광선과 원적외선 듀얼카메라의 영상 정합도 향상을 위한 동축광학계 설계 및 분석 (Design and Analysis of Coaxial Optical System for Improvement of Image Fusion of Visible and Far-infrared Dual Cameras)

  • 강규리;김영일;손병수;박진영
    • 한국광학회지
    • /
    • 제34권3호
    • /
    • pp.106-116
    • /
    • 2023
  • 본 논문에서는 가시광선과 원적외선 전반의 파장대역에 걸쳐 사용 가능한 동축 듀얼카메라를 설계 및 분석하였다. 광학계는 빔 스플리터를 이용한 동축광학계 시스템으로 설계되었으며, 가시광선 광학계에서 적외선으로 인한 열 전달을 최소화하기 위해 hot mirror 타입의 빔 스플리터를 사용하였다. 원적외선 카메라는 비냉각형 검출기로 640×480의 센서 배열을 가지고, 가시광선은 1,945×1,097의 센서를 사용한다. 최적화 과정을 거친 후 최종 설계된 광학계의 정합도는 90% 이상이며, 기존에 존재하던 듀얼카메라에 비해 정합도가 향상된 효율적인 설계 결과를 얻었고, 테스트를 통해 향상된 정합도를 확인하였다.

멀티모달 방식을 통한 가스 종류 인식 딥러닝 모델 개발 (Development of Gas Type Identification Deep-learning Model through Multimodal Method)

  • 안서희;김경영;김동주
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제12권12호
    • /
    • pp.525-534
    • /
    • 2023
  • 가스 누출 감지 시스템은 가스의 폭발성과 독성으로 인한 인명 피해를 최소화할 핵심적인 장치이다. 누출 감지 시스템은 대부분 단일 센서를 활용한 방식으로, 가스 센서나 열화상 카메라를 통한 검출 방식으로 진행되고 있다. 이러한 단일 센서 활용의 가스 누출감지 시스템 성능을 고도화하기 위하여, 본 연구에서는 가스 센서와 열화상 이미지 데이터에 멀티모달형 딥러닝을 적용한 연구를 소개한다. 멀티모달 공인 데이터셋인 MultimodalGasData를 통해 기존 논문과의 성능을 비교하였고, 가스 센서와 열화상 카메라의 단일모달 모델을 기반하여 네 가지 멀티모달 모델을 설계 및 학습하였다. 이를 통해 가스 센서와 열화상 카메라는 각각 1D CNN, GasNet 모델이 96.3%와 96.4%의 가장 높은 성능을 보였다. 앞선 두 단일모달 모델을 기반한 Early Fusion 형식의 멀티모달 모델 성능은 99.3%로 가장 높았으며, 또한 기존 논문의 멀티모달 모델 대비 3.3% 높았다. 본 연구의 높은 신뢰성을 갖춘 가스 누출 감지 시스템을 통해 가스 누출로 인한 추가적인 피해가 최소화되길 기대한다.

시추공 공곡 측정의 원리 - 좌표계 변환의 응용 (Tutorial on the Principle of Borehole Deviation Survey - An Application of the Coordinate Transforms)

  • 송윤호
    • 지구물리와물리탐사
    • /
    • 제23권4호
    • /
    • pp.243-252
    • /
    • 2020
  • 이 논문에서는 시추공을 이용한 탐사나 자료 해석 시에 중요한 시추공 궤적 정보 획득 방법에 대한 이해를 공유하고자, 깊이에 따른 시추공의 좌표를 구하는 시추공 공곡 측정 문제를 좌표계 변환 공식에 기초하여 수학적으로 정리하였다. 먼저, 철재 케이싱이 설치되어 있지 않은 시추공에 적용 가능한 방법으로서 3성분 가속도계와 3성분 자력계를 함께 이용하여 시추공의 방위각, 편차각 그리고 센서회전각을 구하는 원리를 정리하였다. 다음으로, 철재 케이싱이 설치되어 있을 경우에 자이로스코프에서 3성분 각속도가 측정되었을 때, 좌표계 변환 행렬의 시간 미분 관계식에 기초해 각속도의 시간에 따른 적분을 통해 요-피치-롤 각을 구하는 수학적 이론을 정리하고 지구 자전의 영향을 제거함으로써 측정자료의 시간 적분에 의해 시추공의 궤적을 구하는 방법을 설명하였다. 오차가 포함된 측정 자료로부터 시추공 공곡 결정의 정확도를 높이는 중요한 방법으로 센서 또는 측정 자료를 융합하는 원리도 예를 들어 설명하였다. 시추공 공곡 측정원리는 GPS 수신이 불가능한 터널내에서의 궤적 추적 또는 무인비행체를 이용한 공중 탐사나 항공 탐사 시 센서의 자세 측정에도 활용될 수 있다. 또한, 센서의 융합에서 필수적으로 접목되어야 할 최적화 필터에 대해서도 중요 문헌 및 사례를 소개함으로써, 앞으로의 연구에 도움을 주고자 하였다.

다중 센서 융합 알고리즘을 이용한 운전자의 감정 및 주의력 인식 기술 개발 (Development of Driver's Emotion and Attention Recognition System using Multi-modal Sensor Fusion Algorithm)

  • 한철훈;심귀보
    • 한국지능시스템학회논문지
    • /
    • 제18권6호
    • /
    • pp.754-761
    • /
    • 2008
  • 최근 자동차 산업 및 기술이 발전함에 따라 기계적인 부분에서 서비스적인 부분으로 관심이 점점 바뀌고 있는 추세이다. 이와 같은 추세에 발맞추어 운전자에게 보다 안정적이며 편리한 운전 환경을 조성하기 위한 방법으로 감정 및 인지 인식에 대한 관심이 점점 높아지고 있다. 감정 및 주의력을 인식하는 것은 감정공학 기술로서 이 기술은 1980년대 후반부터 얼굴, 음성, 제스처를 통해 인간의 감정을 분석하고 이를 통해 인간 진화적인 서비스를 제공하기 위한 기술로 연구되어 왔다. 이와 같은 기술을 자동차 기술에 접목시키고 운전자의 안정적인 주행을 돕고 운전자의 감정 및 인지 상황에 따른 다양한 서비스를 제공할 수 있다. 또한 Real-Time으로 운전자의 제스처를 인식하여 졸음운전이나 부주의에 의한 사고를 사전에 예방하고 보다 안전한 운전을 돕는 서비스가 필요시 되고 있다. 본 논문은 운전자가 안전 운전을 하기 위해 생체-행동 신호를 이용하여 감정 및 졸음, 주의력의 신호를 추출하여 일정한 형태의 데이터베이스로 구축하고, 구축된 데이터를 이용하여 운전자의 감정 및 졸음, 주의력의 특징 점들을 검출하여, 그 결과 값을 Multi-Modal 방법을 통해 응합함으로써 운전자의 감정 및 주의력 상태를 인식할 수 있는 시스템을 개발하는데 목표를 두고 있다.

작물 스트레스 평가를 위한 드론 초분광 영상 기반 광화학반사지수 산출 및 다중분광 영상에의 적용 (Photochemical Reflectance Index (PRI) Mapping using Drone-based Hyperspectral Image for Evaluation of Crop Stress and its Application to Multispectral Imagery)

  • 나상일;박찬원;소규호;안호용;이경도
    • 대한원격탐사학회지
    • /
    • 제35권5_1호
    • /
    • pp.637-647
    • /
    • 2019
  • 작물의 스트레스를 탐지하는 것은 생산량 감소를 평가하는데 매우 중요하다. 광화학 반사 지수 (PRI)는 LUE의 원격 감지 지표로서 개발되었으며, 많은 연구자들에 의해 식생의 스트레스 탐지에 효과적으로 사용할 수 있음이 입증되었다. 그러나 원격탐사 영상에 기반한 PRI를 이용한 연구는 매우 드물다. 낮은 분광해상도로 인하여 드론 및 위성영상 기반의 PRI 모니터링이 어렵기 때문이다. 본 연구에서는 다중분광 센서 기반의 PRI를 산정하기 위하여 인접한 밴드를 이용한 융합 방법을 제안하였다. 제안한 기법을 초분광 및 다중분광 영상에 적용한 결과 산출된 PRI는 79%의 설명력을 나타내었으며, 지상고정형 센서의 관측값과도 유사한 변동 특성을 나타내었다. 따라서 밴드 융합에 의한 PRI는 작물 스트레스 평가에 적용이 가능할 것으로 판단된다.

가속도 및 각속도 데이터 융합 기반 유한요소모델 개선 (Finite Element Model Updating Based on Data Fusion of Acceleration and Angular Velocity)

  • 김현준;조수진;심성한
    • 한국구조물진단유지관리공학회 논문집
    • /
    • 제19권2호
    • /
    • pp.60-67
    • /
    • 2015
  • 유한요소모델 개선은 구조물의 설계검증, 손상추적, 내하력 평가 등 다양하게 활용되고 있는 기법이다. 일반적인 유한요소모델 개선은 구조물에서 계측된 가속도응답으로부터 구조물의 고유진동수와 모드형상을 구하고, 이를 바탕으로 모델을 개선하게 된다. 이와 같은 가속도응답기반 유한요소모델 개선은 구조물의 병진 자유도를 고려하기 때문에 물리적인 체계를 추정하는데 있어서 매우 적합하지만, 회전 자유도 상에서 변화하는 구조물의 경계조건을 판별하기에는 어려움이 있다. 최근 센서 기술의 개발로 인하여 저렴한 가격, 높은 정확성의 자이로센서들이 개발되고 있으며, 그에 따라 구조물의 회전 자유도에 관한 정보 획득이 용이해지고 있다. 본 연구에서는 이를 바탕으로 가속도와 각속도 응답을 함께 이용하는 데이터 융합 기반 유한요소모델 개선 기법을 제안하였다. 가속도와 각속도를 모두 활용한 데이터융합기법은, 가속도만 사용한 기존의 유한요소 모델 기법보다 구조물의 경계조건 판별에 정확한 정보를 제공한다. 본 논문에서는 단순보 모델을 이용한 수치 시뮬레이션을 통해서, 제안한 가속도와 각속도 데이터 융합기반의 유한요소모델 개선 기법의 성능을 검증하였다.

KOMPSAT-3와 Landsat-8의 시계열 융합활용을 위한 교차검보정 (Radiometric Cross Calibration of KOMPSAT-3 and Lnadsat-8 for Time-Series Harmonization)

  • 안호용;나상일;박찬원;홍석영;소규호;이경도
    • 대한원격탐사학회지
    • /
    • 제36권6_2호
    • /
    • pp.1523-1535
    • /
    • 2020
  • 원격탐사를 이용한 작황정보 생산은 작물의 생물계절을 이용하여 작물 분류, 생육 모니터링, 생산량 추정 분석이 선행되어야 한다. 생물계절에 추정을 위한 시계열 영상 자료가 필요하지만 KOMPSAT(Korea Multi-Purpose Satellite)만으로 획득하는 것은 물리적 제한이 있으므로 타 지구관측위성과의 융합 활용이 필요하다. 위성자료의 융합 활용을 위해서는 각 위성이 가지는 고유의 방사학적 센서 특성 차이를 극복해야 한다. 본 연구는 위성자료의 융·복합 활용을 위한 첫 단계로서 KOMPSAT-3와 Landsat-8 위성의 교차검보정을 수행하였다. Libya-4 PICS(Pseudo Invariant Calibration Sites)에서 2년간 수집된 위성자료에 대해 초분광위성을 이용하여 산정된 SBAF(Spectral Band Adjustment Factor)를 적용하여 대기상단 반사도를 비교하였다. 교차검보정 결과 KOMPSAT-3와 Landsat-8 위성은 Blue, Green, Red 밴드에서 약 4%, NIR밴드에서 6%의 반사율 차이를 보였다. 온보드 켈리브레이터가 없는 KOMPSAT-3는 Ladnsat-8에 비해 Radiometric Stability가 낮은 것으로 나타났다. 향후 교차검보정의 정확도를 높이기 위해 BRDF(Bidirectional reflectance distribution function) 보정 및 지형보정을 통하여 정규화 된 반사율 자료를 생산하기 위한 노력이 필요하다.

3차원 객체 탐지를 위한 어텐션 기반 특징 융합 네트워크 (Attention based Feature-Fusion Network for 3D Object Detection)

  • 유상현;강대열;황승준;박성준;백중환
    • 한국항행학회논문지
    • /
    • 제27권2호
    • /
    • pp.190-196
    • /
    • 2023
  • 최근 들어, 라이다 기술의 발전에 따라 정확한 거리 측정이 가능해지면서 라이다 기반의 3차원 객체 탐지 네트워크에 대한 관심이 증가하고 있다. 기존의 네트워크는 복셀화 및 다운샘플링 과정에서 공간적인 정보 손실이 발생해 부정확한 위치 추정 결과를 발생시킨다. 본 연구에서는 고수준 특징과 높은 위치 정확도를 동시에 획득하기 위해 어텐션 기반 융합 방식과 카메라-라이다 융합 시스템을 제안한다. 먼저, 그리드 기반의 3차원 객체 탐지 네트워크인 Voxel-RCNN 구조에 어텐션 방식을 도입함으로써, 다중 스케일의 희소 3차원 합성곱 특징을 효과적으로 융합하여 3차원 객체 탐지의 성능을 높인다. 다음으로, 거짓 양성을 제거하기 위해 3차원 객체 탐지 네트워크의 탐지 결과와 이미지상의 2차원 객체 탐지 결과를 결합하는 카메라-라이다 융합 시스템을 제안한다. 제안 알고리즘의 성능평가를 위해 자율주행 분야의 KITTI 데이터 세트를 이용하여 기존 알고리즘과의 비교 실험을 수행한다. 결과적으로, 차량 클래스에 대해 BEV 상의 2차원 객체 탐지와 3차원 객체 탐지 부분에서 성능 향상을 보였으며 특히 Voxel-RCNN보다 차량 Moderate 클래스에 대하여 정확도가 약 0.47% 향상되었다.

MEMS센서와 확장칼만필터를 적용한 팔의 자세정보 실시간 획득방법 (Real-Time Acquisition Method of Posture Information of Arm with MEMS Sensor and Extended Kalman Filter)

  • 최원석;김희수;김재현;조영기
    • 한국콘텐츠학회논문지
    • /
    • 제20권6호
    • /
    • pp.99-113
    • /
    • 2020
  • 미래에는 일상생활에서 우리 삶을 편의를 위한 로봇이나 드론들이 증가할 것이다. 그리고 이것을 제어하기 위한 방법으로 현재 리모컨이나 사람의 음성에 의한 방법이 가장 보편적으로 사용되고 있다. 하지만 리모컨은 사람이 찾아서 일일이 조작해야하며 음성의 경우에는 주변 노이즈를 무시할 수 없다. 그래서 본 논문에서는 팔의 자세정보만으로 무선으로 간편하게 주변 드론이나 로봇들을 제어 할 수 있다는 전제하에 실시간으로 정확하게 팔의 자세정보를 획득하기 위한 경제적인 자세정보 획득방법에 대하여 연구하였다. 이를 위해서 확장 칼만필터를 이용하여 팔의 자세정보에 대한 노이즈를 제거하였으며 팔의 움직임을 감지하기 위하여 저가의 MEMS 타입의 센서를 적용하여 장치의 경제성을 확보하였으며 팔의 착용성을 증대시키기 위하여 FPGA를 활용하여 최대한 칩 하나에 모든 기능을 집적화시켜 소형 경량의 자세정보 획득장치를 개발하였다. 그 결과 1 ms의 실시간성을 확보하였고 확장칼만필터를 적용하여 노이즈가 제거된 정확한 팔의 자세정보를 획득하고 실시간으로 팔의 자세정보를 전시하였다. 이를 통해서 팔의 실시간 자세정보를 이용하여 명령을 생성할 수 있는 기초가 마련되었다.

저항 센서와 기울기 센서의 융합에 의한 보행 의도 감지 (Walking Intention Detection using Fusion of FSR and Tilt Sensor Signals)

  • 장은혜;전병태;이재연;지수영;강상승;조영조
    • 감성과학
    • /
    • 제13권3호
    • /
    • pp.441-448
    • /
    • 2010
  • 보행보조로봇은 고령화 사회에 노인 복지 및 중증 신경계 손상을 입은 환자에게 이동을 도울 수 있는 반드시 필요한 장비이다. 특히, 하지 마비 환자를 위한 보행보조로봇의 편리성을 위해서는 환자의 보행 의도를 내현적으로 파악함으로써 환자 의지에 따라 로봇을 통제할 수 있어야 한다. 본 논문은 보행 의도 감지 모델을 개발하기 위한 선행 연구로, 먼저 저항 센서와 기울기 센서의 융합을 통하여 3족 보행 모델을 기반으로 사용자의 보행 의도를 분석하였다. 저항 센서는 사용자의 양쪽 손바닥과 발바닥에 각각 부착되어, 부착된 위치의 압력을 센싱하였다. 양쪽 손바닥의 신호는 보행 의도를 파악하기 위해, 발바닥의 신호는 보행 단계를 확인하기 위하여 사용되었다. 기울기 센서는 몸의 움직임 상태를 측정하기 위한 센서로서, 사용자의 등 부분, 요추에 부착되어 상체의 움직임(roll, pitch)을 센싱하였다. 연구 결과, 사용자가 지팡이를 바닥에 짚을 때 양 손바닥에서 측정되는 2개의 저항 신호만으로 기본적인 보행 의도를 파악할 수 있었으나, 기울기 센서 정보를 함께 이용함으로써 오른발 뻗기, 왼발 뻗기 등의 움직임을 시작하려는 상태 등에 대한 보행 의도를 보다 구체적으로 확인할 수 있었다. 결론적으로, 본 연구를 통하여 저항센서와 기울기 센서의 융합에 기반한 사용자의 보행 의도를 감지할 수 있었다.

  • PDF