• 제목/요약/키워드: Multi-modal sensor

검색결과 58건 처리시간 0.022초

다중 센서 융합 알고리즘을 이용한 사용자의 감정 인식 및 표현 시스템 (Emotion Recognition and Expression System of User using Multi-Modal Sensor Fusion Algorithm)

  • 염홍기;주종태;심귀보
    • 한국지능시스템학회논문지
    • /
    • 제18권1호
    • /
    • pp.20-26
    • /
    • 2008
  • 지능형 로봇이나 컴퓨터가 일상생활 속에서 차지하는 비중이 점점 높아짐에 따라 인간과의 상호교류도 점점 중요시되고 있다. 이렇게 지능형 로봇(컴퓨터) - 인간의 상호 교류하는데 있어서 감정 인식 및 표현은 필수라 할 수 있겠다. 본 논문에서는 음성 신호와 얼굴 영상에서 감정적인 특징들을 추출한 후 이것을 Bayesian Learning과 Principal Component Analysis에 적용하여 5가지 감정(평활, 기쁨, 슬픔, 화남, 놀람)으로 패턴을 분류하였다. 그리고 각각 매개체의 단점을 보완하고 인식률을 높이기 위해서 결정 융합 방법과 특징 융합 방법을 적용하여 감정 인식 실험을 하였다. 결정 융합 방법은 각각 인식 시스템을 통해 얻어진 인식 결과 값을 퍼지 소속 함수에 적용하여 감정 인식 실험을 하였으며, 특징 융합 방법은 SFS(Sequential Forward Selection) 특징 선택 방법을 통해 우수한 특징들을 선택한 후 MLP(Multi Layer Perceptron) 기반 신경망(Neural Networks)에 적용하여 감정 인식 실험을 실행하였다. 그리고 인식된 결과 값을 2D 얼굴 형태에 적용하여 감정을 표현하였다.

모바일 플랫폼에서 다중 특징 기반의 이미지 검색 (Image Retrieval using Multiple Features on Mobile Platform)

  • 이용환;조한진;이준환
    • 디지털융복합연구
    • /
    • 제12권6호
    • /
    • pp.237-243
    • /
    • 2014
  • 본 논문에서는 다양한 검색 환경과 모바일 디바이스의 센서 정보를 활용한 모바일 이미지 검색 방법을 제안하고 안드로이드 플랫폼에서 구동하는 검색 시스템을 구현하였다. 설계 개발 시스템은 JPEG 이미지를 대상으로 산업계 표준 메타데이터인 EXIF 속성과 시각적 특징을 결합한 새로운 검색 기술자이며, 검색을 위한 특징 추출 및 유사도 평가 알고리즘을 모바일 환경에 최적화한 이미지 검색 모듈이다. 실험을 통해, 대용량 이미지 데이터셋을 대상으로 안드로이드 폰에서 효율적인 이미지 검색을 수행하였음을 보였다.

멀티 모달 기반의 스마트 감성 주얼리 (Smart Affect Jewelry based on Multi-modal)

  • 강윤정
    • 한국정보통신학회논문지
    • /
    • 제20권7호
    • /
    • pp.1317-1324
    • /
    • 2016
  • 아두이노 플렛폼을 활용하여 스마트 주얼리에 보석처럼 빛나는 효과를 나타내기 위해 감성적인 주얼리로 색을 표현하였다. 감성적인 색 표현을 위해 플러칙의 감정 팽이 모형을 활용하여 감정과 색의 유사성을 적용하였다. 스마트폰에서 쉽게 접할 수 있는 온도, 조도, 소리, 자이로 센서와 스마트 주얼리의 맥박센서로부터 인식된 값을 입력받아 감성을 인식하고 처리하는 과정은 온톨로지 기반의 추론규칙을 적용하고, 상황정보에서 나타난 감성에 따라 감성 색을 찾고 그 감성 색을 스마트 주얼리의 LED에 적용하였다. 주얼리 착용자의 감정에 따라 스마트 주얼리에 내장된 LED에 결정된 감성 색으로 빛을 냈다.

Precedent based design foundations for parametric design: The case of navigation and wayfinding

  • Kondyli, Vasiliki;Bhatt, Mehul;Hartmann, Timo
    • Advances in Computational Design
    • /
    • 제3권4호
    • /
    • pp.339-366
    • /
    • 2018
  • Parametric design systems serve as powerful assistive tools in the design process by providing a flexible approach for the generation of a vast number of design alternatives. However, contemporary parametric design systems focus primarily on low-level engineering and structural forms, without an explicit means to also take into account high-level, cognitively motivated people-centred design goals. We present a precedent-based parametric design method that integrates people-centred design "precedents" rooted in empirical evidence directly within state of the art parametric design systems. As a use-case, we illustrate the general method in the context of an empirical study focusing on the multi-modal analysis of wayfinding behaviour in two large-scale healthcare environments. With this use-case, we demonstrate the manner in which: (1). a range of empirically established design precedents -e.g., pertaining to visibility and navigation- may be articulated as design constraints to be embedded directly within state of the art parametric design tools (e.g., Grasshopper); and (2). embedded design precedents lead to the (parametric) generation of a number of morphologies that satisfy people-centred design criteria (in this case, pertaining to wayfinding). Our research presents an exemplar for the integration of cognitively motivated design goals with parametric design-space exploration methods. We posit that this opens-up a range of technological challenges for the engineering and development of next-generation computer aided architecture design systems.

멀티모달 데이터 기반 위험 발생 유사성 비교 방법 (A Method of Comparing Risk Similarities Based on Multimodal Data)

  • 권은정;신원재;이용태;이규철
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2019년도 춘계학술대회
    • /
    • pp.510-512
    • /
    • 2019
  • 최근 공공안전 분야에서 위험상황을 감지하거나 선제적인 예측을 통해 안전을 보장하기 위한 요구사항이 대두대고 있다. 모바일 단말의 보급화로 인해 다양한 센서 데이터를 융합하여 분석할 경우 데이터의 잠재적 가치를 안전보장 측면에서 활용할 수 있다는 점에서 주목받고 있다. 스마트폰, 웨어러블 기기 등에서 발생되는 센서 데이터를 결합하여 사용자의 이동 경로 패턴, 행동 패턴을 분석하고, 사용자의 현재 위치에서 제공하는 위치 기반 범죄 위험 데이터를 융합하여 공공안전을 보장할 수 있는 효과적인 모델링 기법이 필요하다. 본 논문은 사용자의 과거 이동 궤적의 패턴과 행동 패턴을 분석하고, 사용자 별 이동 궤적들이 동일 공간 내에 다른 사용자와의 유사도를 분석하여 안전한 경로를 추천하게 된다. 본 논문은 위치기반 멀티모달 센서 데이터를 결합하여 사용자의 안전을 보장하기 위한 위험 예측 방법을 제안한다.

  • PDF

Layout optimization of wireless sensor networks for structural health monitoring

  • Jalsan, Khash-Erdene;Soman, Rohan N.;Flouri, Kallirroi;Kyriakides, Marios A.;Feltrin, Glauco;Onoufriou, Toula
    • Smart Structures and Systems
    • /
    • 제14권1호
    • /
    • pp.39-54
    • /
    • 2014
  • Node layout optimization of structural wireless systems is investigated as a means to prolong the network lifetime without, if possible, compromising information quality of the measurement data. The trade-off between these antagonistic objectives is studied within a multi-objective layout optimization framework. A Genetic Algorithm is adopted to obtain a set of Pareto-optimal solutions from which the end user can select the final layout. The information quality of the measurement data collected from a heterogeneous WSN is quantified from the placement quality indicators of strain and acceleration sensors. The network lifetime or equivalently the network energy consumption is estimated through WSN simulation that provides realistic results by capturing the dynamics of the wireless communication protocols. A layout optimization study of a monitoring system on the Great Belt Bridge is conducted to evaluate the proposed approach. The placement quality of strain gauges and accelerometers is obtained as a ratio of the Modal Clarity Index and Mode Shape Expansion values that are computed from a Finite Element model of the monitored bridge. To estimate the energy consumption of the WSN platform in a realistic scenario, we use a discrete-event simulator with stochastic communication models. Finally, we compare the optimization results with those obtained in a previous work where the network energy consumption is obtained via deterministic communication models.

지능형 서비스 로봇을 위한 온톨로지 기반의 동적 상황 관리 및 시-공간 추론 (Ontology-Based Dynamic Context Management and Spatio-Temporal Reasoning for Intelligent Service Robots)

  • 김종훈;이석준;김동하;김인철
    • 정보과학회 논문지
    • /
    • 제43권12호
    • /
    • pp.1365-1375
    • /
    • 2016
  • 일상생활 환경 속에서 자율적으로 동작하는 서비스 로봇에게 가장 필수적인 능력 중 하나가 동적으로 변화하는 주변 환경에 대한 올바른 상황 인식과 이해 능력이다. 다양한 센서 데이터 스트림들로 부터 신속히 의사 결정에 필요한 고수준의 상황 지식을 생성해내기 위해서는, 멀티 모달 센서 데이터의 융합, 불확실성 처리, 기호 지식의 실체화, 시간 의존성과 가변성 처리, 실시간성을 만족할 수 있는 시-공간 추론 등 많은 문제들이 해결되어야 한다. 이와 같은 문제들을 고려하여, 본 논문에서는 지능형 서비스 로봇을 위한 효과적인 동적 상황 관리 및 시-공간 추론 방법을 제시한다. 본 논문에서는 상황 지식 관리와 추론의 효율성을 극대화하기 위해, 저수준의 상황 지식은 센서 및 인식 데이터가 입력될 때마다 실시간적으로 생성되지만, 반면에 고수준의 상황 지식은 의사 결정 모듈에서 요구가 있을 때만 후향 시-공간 추론을 통해 유도되도록 알고리즘을 설계하였다. Kinect 시각 센서 기반의 Turtlebot를 이용한 실험을 통해, 제안한 방법에 기초한 동적 상황 관리 및 추론 시스템의 높은 효율성을 확인할 수 있었다.

저가의 머신 비전 카메라를 이용한 2차원 진동의 측정 및 교정 (Measurement of two-dimensional vibration and calibration using the low-cost machine vision camera)

  • 김서우;이정권
    • 한국음향학회지
    • /
    • 제37권2호
    • /
    • pp.99-109
    • /
    • 2018
  • 현존하는 진동 측정 센서는 정밀도 면에서는 대부분의 진동을 측정하기에 충분하나, 센서 한 개로 하나의 지점이나 방향에 한정하여 측정할 수밖에 없다는 단점을 갖고 있다. 반면 카메라의 경우, 정밀도나 측정 가능한 주파수 영역의 면에서는 다소 불리하지만, 한 번에 광범위한 영역의 진동을 측정할 수 있고 가격 면에서 유리하며 다자유도의 진동을 동시에 측정할 수 있다는 큰 장점을 갖고 있다. 본 연구에서는 저가의 머신 비전 카메라가 진동 측정 센서로서 어느 정도의 오차 범위 내에서 진동을 측정할 수 있는지 알아본 후, 실제 외팔보의 진동을 측정하였다. 카메라의 2차원 평면 이미지는 두 방향의 직선 운동과 한 방향의 회전 운동을 나타낼 수 있다. 먼저 단일 점의 진동을 카메라로 측정하고, LDV(Laser Doppler Vibrometer) 측정을 기준으로 한 카메라 측정의 오차를 실험적으로 교정하였다. 다음으로 다중점의 진동을 한 번에 측정하여 회전 진동과 외팔보 전체 형상의 진동을 측정하였다. 외팔보 전체 형상 진동은 주파수와 시간 영역 모두에 대하여 분석하였다.