• 제목/요약/키워드: Human Tracking

검색결과 652건 처리시간 0.027초

도메인 상태를 이용한 다중 도메인 대화 상태 추적 (Multi Domain Dialog State Tracking using Domain State)

  • 전현민;이근배
    • 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
    • /
    • 한국정보과학회언어공학연구회 2020년도 제32회 한글 및 한국어 정보처리 학술대회
    • /
    • pp.421-426
    • /
    • 2020
  • 다중 도메인 목적 지향 대화에서 기존 딥 러닝을 이용한 대화 상태 추적(Dialog state tracking)은 여러 턴 동안 누적된 사용자와 시스템 간 대화를 입력 받아 슬롯 밸류(Slot value)를 추출하는 모델들이 연구되었다. 하지만 이 모델들은 대화가 길어질수록 연산량이 증가한다. 이에 본 논문에서는 다중 도메인 대화에서 누적된 대화의 history 없이 슬롯 밸류를 추출하는 방법을 제안한다. 하지만, 단순하게 history를 제거하고 현재 턴의 발화만 입력 받는 방법은 문맥 정보의 손실로 이어진다. 따라서 본 논문에서는 도메인 상태(Domain state)를 도입하여 매 턴 마다 대화 상태와 함께 추적하는 모델을 제안한다. 도메인 상태를 같이 추적함으로써 현재 어떠한 도메인에 대하여 대화가 진행되고 있는지를 파악한다. 또한, 함축된 문맥 정보를 담고 있는 이전 턴의 대화 상태와 도메인 상태를 현재 턴의 발화와 같이 입력 받아 정보의 손실을 줄였다. 대표적인 데이터 셋인 MultiWOZ 2.0과 MultiWOZ 2.1에서 실험한 결과, 대화의 history를 사용하지 않고도 대화 상태 추적에 있어 좋은 성능을 보이는 것을 확인하였다. 또한, 시스템 응답과 과거 발화에 대한 의존성을 제거하여 end-to-end 대화 시스템으로의 확장이 좀 더 용이할 것으로 기대된다.

  • PDF

Indoor Environment Drone Detection through DBSCAN and Deep Learning

  • Ha Tran Thi;Hien Pham The;Yun-Seok Mun;Ic-Pyo Hong
    • 전기전자학회논문지
    • /
    • 제27권4호
    • /
    • pp.439-449
    • /
    • 2023
  • In an era marked by the increasing use of drones and the growing demand for indoor surveillance, the development of a robust application for detecting and tracking both drones and humans within indoor spaces becomes imperative. This study presents an innovative application that uses FMCW radar to detect human and drone motions from the cloud point. At the outset, the DBSCAN (Density-based Spatial Clustering of Applications with Noise) algorithm is utilized to categorize cloud points into distinct groups, each representing the objects present in the tracking area. Notably, this algorithm demonstrates remarkable efficiency, particularly in clustering drone point clouds, achieving an impressive accuracy of up to 92.8%. Subsequently, the clusters are discerned and classified into either humans or drones by employing a deep learning model. A trio of models, including Deep Neural Network (DNN), Residual Network (ResNet), and Long Short-Term Memory (LSTM), are applied, and the outcomes reveal that the ResNet model achieves the highest accuracy. It attains an impressive 98.62% accuracy for identifying drone clusters and a noteworthy 96.75% accuracy for human clusters.

감시카메라 영상기반 응급상황 탐지 및 이동로봇 추적 시스템 (Emergency Situation Detection using Images from Surveillance Camera and Mobile Robot Tracking System)

  • 한태우;서용호
    • 한국인터넷방송통신학회논문지
    • /
    • 제9권5호
    • /
    • pp.101-107
    • /
    • 2009
  • 본 논문은 감시카메라 영상으로부터 응급상황을 탐지하는 방법과 응급상황의 정밀 탐색 및 서비스를 위한 이동로봇 추적 시스템 개발에 대하여 기술한다. 건물 곳곳에 설치된 카메라로부터 얻어지는 일련의 영상들을 분석하여 처리함으로써 사람의 행동을 인식할 수 있으며, 이 중 응급상황이 탐지된 경우 준비된 이동로봇을 이용해 응급상황 발생지점의 정밀 탐색이 가능하다. 감시 카메라 영상을 통하여 사람의 행동들을 인식하기 위해서는 인간의 모습이라고 가정되는 영역들을 추적하고 관리해야 한다. 한 영상에서 가우시안 혼합 모델(MOG)을 이용하여 배경과 분리된 관심 영역들을 추출하고, 각 영역들을 외관 모델을 이용하여 지속적으로 추적한다. 그리고 각 영역의 실루엣 정보를 이용한 움직임 누적 영상(MHI)을 생성하여 행동을 모델링하고 신경망을 이용하여 응급 상황을 최종 인식한다. 또한 응급상황에 처한 사람과 이동로봇의 위치정보를 계산해 이동로봇이 사람에게 접근하는 기술을 구현한다.

  • PDF

장비활용 실습에서 피교육자의 학습과정에 관한 연구 (A Study on Students' Learning Process in Practical Education using an Equipment)

  • 정광태
    • 한국실천공학교육학회논문지
    • /
    • 제4권1호
    • /
    • pp.165-172
    • /
    • 2012
  • 실천공학 교육을 위하여 피교육자에 대한 많은 실습과정이 요구되고 이 과정에서 여러 종류의 실습장비가 활용될 수 있다. 다양한 실습장비에 대한 다양한 피교육자들의 장비활용에 관한 학습능력을 나타낼 수 있는 방법으로 학습곡선이론의 적용방안을 모색하였다. 학습곡선이론은 기본적으로 생산관리 분야에서 활용되었던 이론으로, 인간공학적 측면에서 인간의 수행능력에 기반한 이론이다. 본 연구에서는 디자인 분야에서 활용되고 있는 시선추적장비를 대상으로 피교육자의 학습과정에 대한 학습곡선이론의 적용방안을 연구하였다. 시선추적장비의 하드웨어 셋업과 주시영역 기록의 두가지 실습과제를 교육한 후, 반복수행에 따른 과제수행시간을 측정하여 학습곡선모델을 적용하였다. 예측된 수행시간과 실제 수행시간과의 비교분석을 통하여 학습곡선모델의 적용가능성을 분석하였다. 그 결과 학습곡선모델은 실습장비를 활용한 실습교육에서 피교육자의 학습과정을 적합하게 묘사하는 것으로 나타났다.

  • PDF

화학물질 저장시설의 사고대응 및 훈련을 위한 로봇기반 누출감지 및 추적시스템 (Mobile Robot-based Leak Detection and Tracking System for Advanced Response and Training to Hazardous Materials Incidents)

  • 박명남;김창완;김태옥;신동일
    • 한국가스학회지
    • /
    • 제23권2호
    • /
    • pp.17-27
    • /
    • 2019
  • 화학물질의 사용 증대와 더불어 위험물 및 독성가스 누출 사고가 빈번하게 일어나고 있다. 그 중에서도 위험물 저장설비 사고는 누출이 감지되었을 때 대응하기 위한 초동 조치가 가장 중요하지만, 전적으로 조업자에 의한 경험에 비중이 크기 때문에, 잘못된 판단으로 인한 더 큰 물적, 인적 피해가 발생할 가능성이 높다. 본 연구는 기존 고정식 감지기를 통한 알람 발생 후 수동적인 대응을 취하는 현 접근 방식에서 벗어나, 오픈소스기술을 적용하여 쉽게 제작이 가능한 로봇 플랫폼에서 작동하는 이동식 센서를 활용한 능동적인 누출원 추적 시스템을 설계하였다. 아울러 프로토타입 시스템의 검증을 통해 누출 초기의 정확한 현장 상황파악 및 조기대응을 바탕으로 사고의 확산 및 피해 최소화의 기틀을 마련하고자 하였다.

RGB 카메라 기반 실시간 21 DoF 손 추적 (RGB Camera-based Real-time 21 DoF Hand Pose Tracking)

  • 최준영;박종일
    • 방송공학회논문지
    • /
    • 제19권6호
    • /
    • pp.942-956
    • /
    • 2014
  • 본 논문은 단안의 RGB 카메라를 이용하는 실시간 손 추적 방법을 제안한다. 손은 높은 degrees of freedom을 가지고 있기 때문에 손 추적은 높은 모호성을 가지고 있다. 따라서 제안하는 방법에서는 손 추적의 모호성을 줄이기 위해서 단계별 손 추적 전략을 채택하였다. 제안하는 방법의 추적 과정은 손바닥 포즈 추적, 손가락 yaw 움직임 추적, 그리고 손가락 pitch 움직임 추적, 세 단계로 구성되어 있으며, 각 단계는 순서대로 수행된다. 제안하는 방법은 손은 평면으로 간주할 수 있다고 가정하고, 평면 손 모델을 이용한다. 평면 손 모델은 손 모델을 현재의 사용자 손 모양에 맞춰서 변경하는 손 모델 재생성을 가능하게 하는데, 이는 제안하는 방법의 강건성과 정확도를 증가시킨다. 그리고 제안하는 방법은 실시간 연산이 가능하고 GPU 기반 연산을 요구하지 않기 때문에, Google Glass와 같은 모바일 장비를 포함한 다양한 환경에 적용가능하다. 본 논문은 다양한 실험을 통해서 제안하는 방법의 성능과 효용성을 입증한다.

강화학습을 이용한 눈동자 추적 시스템의 성능향상 (Performance Improvement of Eye Tracking System using Reinforcement Learning)

  • 신학철;심연;김사랑;성원준;민하즈;홍요훈;이필규
    • 한국인터넷방송통신학회논문지
    • /
    • 제13권2호
    • /
    • pp.171-179
    • /
    • 2013
  • 영상처리에서 인식에 관련된 기술들은 환경에 아주 많은 영향을 받게 되는데 이러한 인식률을 결정짓는 요소 중인 파라미터는 환경에 적절한 값을 얼마나 잘 선택하느냐에 따라서 인식률의 큰 차이를 보인다. 본 논문은 눈동자 추적 알고리즘이 사람이나 실험 환경의 변화에 따라 인식률이 저하되는 현상을 보완하기 위한 성능 향상 및 환경에 적응하는 시스템의 구현에 대한 방법이다. 최적의 파라미터를 얻기 위해 전 처리에 사용되는 이진화 알고리즘의 문턱값을 학습이 필요한 시기를 적절히 판단해 강화학습을 이용하여 다시 학습시켜 인식률을 향상시키는 방법을 사용했다. 실험데이터를 수집하기 위해 입력 장치는 가격이 저렴하고 일반적인 웹 카메라를 사용 하였으며 얼굴 영역에 해당하는 많은 양의 이미지를 수집하여 강화학습의 적응력을 실험하였다. 이미지의 그룹을 다양하게 변화시켜 실험한 결과 강화학습을 사용한 경우 그렇지 않은 경우에 비해 작게는 3% 많게는 14%가량의 성능이 향상됨을 확인하였다. 이렇게 성능이 향상된 눈동자 추적 시스템은 휴먼 컴퓨터 인터랙션 분야에 효과적으로 활용될 수 있을 것이다.

화상 회의 인터페이스를 위한 눈 위치 검출에 관한 연구 (A study on the eye Location for Video-Conferencing Interface)

  • 정조남;강장묵;방기천
    • 디지털콘텐츠학회 논문지
    • /
    • 제7권1호
    • /
    • pp.67-74
    • /
    • 2006
  • 기존의 화상 회의 시스템에서는 카메라가 고정되어 있어서 사용자의 움직임에 제약을 주어 사용자를 부자연스럽게 한다. 이러한 부자연스러움을 해결하기 위해서는 얼굴의 움직임을 추적해야 하는데, 이때 얼굴 전체를 정보로 추적하는 것은 얼굴 전체를 하나의 특징으로 규정짓기도 힘들고 연산 시간이 많이 걸린다는 문제점을 가지고 있다. 따라서, 얼굴의 움직임을 효율적으로 추적하기 위해서는 얼굴상의 몇 개의 특징점을 이용하는 것이 바람직하다. 본 논문은 화상 회의에서 자연스러운 사용자 인터페이스를 위한 자동 얼굴 추적 시스템의 필수적인 요소인 눈 위치 검출의 효과적인 방법에 대하여 논한다. 눈은 얼굴 내에서 가장 뚜렷하며 단순한 특징을 가지고 있으므로 얼굴을 추적하기 위한 가장 중요한 정보가 된다. 본 논문에서 제안한 알고리즘은 얼굴 후보 영역 추출 단계를 거친 얼굴 후보 영역들에 대해 적용되며, 기존 방법들에 비해 조명에 특별한 제약을 받지 않으며 얼굴 크기와 안경에 대한 제약도 가지고 있지 않다. 또한, 화상 회의 환경에 대한 on-line 실험에서 좋은 결과를 나타냈다.

  • PDF

손동작 인식에 의한 컴퓨터 비전 인터페이스 설계 (Design of Computer Vision Interface by Recognizing Hand Motion)

  • 윤진현;이종호
    • 전자공학회논문지CI
    • /
    • 제47권3호
    • /
    • pp.1-10
    • /
    • 2010
  • 손동작을 통한 입력방법은 컴퓨터와 디지털 기기의 발전에 따라 요구되는 새로운 HCI(Human-Computer Interaction) 방법으로써 그 가능성을 가지고 있으며 이에 대한 다양한 시도가 있었다. 본 논문에서는 컴퓨터 비전을 기반으로 단일 카메라를 사용하는 손 영역 검출 및 추적방법을 제시하고 이에 의한 컴퓨터 인터페이스를 제안한다. 기존에 많이 쓰이는 피부색 매치 방법에 추가하여 형태 정보를 더함으로써 손 영역 검출능력을 향상 시켰다. 이러한 형태 정보를 추출하는 방법으로써 주요 방향 에지 기술자라는 방법을 제안하였고 이는 강력하여 학습 시간 없이 한 가지 손 모델만을 사용하여 손 영역 검출을 할 수 있다. 또한 손 영역 검출과 추적하는 방법을 나누어 추적할 때는 회전에 대한 자유도를 높이도록 설계 하였다. 위 방법을 이용하여 3차원 공간에 그려지는 필기체 숫자 인식에 적용해 보았으며 분류 방법으로 DNAC 알고리즘을 사용하였다. 결과적으로 손 영역 검출은 82%의 검출률을 보였고 필기체 숫자 인식은 90%의 인식률을 보였다.

눈동자 자동 추적 카메라 시스템 설계와 구현 (Development of Adaptive Eye Tracking System Using Auto-Focusing Technology of Camera)

  • ;;오영환;육주혜
    • 디지털콘텐츠학회 논문지
    • /
    • 제13권2호
    • /
    • pp.159-167
    • /
    • 2012
  • 눈동자 추적 기술은 사용자의 의도를 이해하기 위해 눈 움직임을 탐지한다. 이 기술은 최근 점차적으로 발전하였으며 현재에는 여러 경우에 사용될 수 있다. 예를 들어, 장애인이 눈으로 컴퓨터를 사용하게 할 수 있다. 이 논문은 장애인을 위한 눈 추적 시스템 설계 원리, 구체적 적용 사항, 일반적으로 어떻게 적용되고 있는지에 대해 설명한다. 그리고 이를 구현하기 위한 눈동자 자동 추적 알고리즘을 제시한다. 자동 적용 알고리즘은 자동 초점으로 명확한 눈의 이미지를 잡기 위해 렌즈의 움직임을 조정하는 신호 피드백에 기반을 둔다. 이 CCD 카메라 자동 초점 기법은 외부 환경 빛의 강도 변화에 자동 적응하는 기능을 가진다. 이것은 수동 조절의 문제점을 피하고 조절의 정확성에 향상을 가져온다.