• 제목/요약/키워드: Action recognition

검색결과 408건 처리시간 0.028초

A Distributed Real-time 3D Pose Estimation Framework based on Asynchronous Multiviews

  • Taemin, Hwang;Jieun, Kim;Minjoon, Kim
    • KSII Transactions on Internet and Information Systems (TIIS)
    • /
    • 제17권2호
    • /
    • pp.559-575
    • /
    • 2023
  • 3D human pose estimation is widely applied in various fields, including action recognition, sports analysis, and human-computer interaction. 3D human pose estimation has achieved significant progress with the introduction of convolutional neural network (CNN). Recently, several researches have proposed the use of multiview approaches to avoid occlusions in single-view approaches. However, as the number of cameras increases, a 3D pose estimation system relying on a CNN may lack in computational resources. In addition, when a single host system uses multiple cameras, the data transition speed becomes inadequate owing to bandwidth limitations. To address this problem, we propose a distributed real-time 3D pose estimation framework based on asynchronous multiple cameras. The proposed framework comprises a central server and multiple edge devices. Each multiple-edge device estimates a 2D human pose from its view and sendsit to the central server. Subsequently, the central server synchronizes the received 2D human pose data based on the timestamps. Finally, the central server reconstructs a 3D human pose using geometrical triangulation. We demonstrate that the proposed framework increases the percentage of detected joints and successfully estimates 3D human poses in real-time.

YOLOv5 based Anomaly Detection for Subway Safety Management Using Dilated Convolution

  • Nusrat Jahan Tahira;Ju-Ryong Park;Seung-Jin Lim;Jang-Sik Park
    • 한국산업융합학회 논문집
    • /
    • 제26권2_1호
    • /
    • pp.217-223
    • /
    • 2023
  • With the rapid advancement of technologies, need for different research fields where this technology can be used is also increasing. One of the most researched topic in computer vision is object detection, which has widely been implemented in various fields which include healthcare, video surveillance and education. The main goal of object detection is to identify and categorize all the objects in a target environment. Specifically, methods of object detection consist of a variety of significant techniq ues, such as image processing and patterns recognition. Anomaly detection is a part of object detection, anomalies can be found various scenarios for example crowded places such as subway stations. An abnormal event can be assumed as a variation from the conventional scene. Since the abnormal event does not occur frequently, the distribution of normal and abnormal events is thoroughly imbalanced. In terms of public safety, abnormal events should be avoided and therefore immediate action need to be taken. When abnormal events occur in certain places, real time detection is required to prevent and protect the safety of the people. To solve the above problems, we propose a modified YOLOv5 object detection algorithm by implementing dilated convolutional layers which achieved 97% mAP50 compared to other five different models of YOLOv5. In addition to this, we also created a simple mobile application to avail the abnormal event detection on mobile phones.

공학전공 대학생의 AI 로봇에 대한 윤리적 민감성 (Engineering Students' Ethical Sensitivity on Artificial Intelligence Robots)

  • 이현옥;고연주
    • 공학교육연구
    • /
    • 제25권6호
    • /
    • pp.23-37
    • /
    • 2022
  • This study evaluated the engineering students' ethical sensitivity to an AI emotion recognition robot scenario and explored its characteristics. For data collection, 54 students (27 majoring in Convergence Electronic Engineering and 27 majoring in Computer Software) were asked to list five factors regarding the AI robot scenario. For the analysis of ethical sensitivity, it was checked whether the students acknowledged the AI ethical principles in the AI robot scenario, such as safety, controllability, fairness, accountability, and transparency. We also categorized students' levels as either informed or naive based on whether or not they infer specific situations and diverse outcomes and feel a responsibility to take action as engineers. As a result, 40.0% of students' responses contained the AI ethical principles. These include safety 57.1%, controllability 10.7%, fairness 20.5%, accountability 11.6%, and transparency 0.0%. More students demonstrated ethical sensitivity at a naive level (76.8%) rather than at the informed level (23.2%). This study has implications for presenting an ethical sensitivity evaluation tool that can be utilized professionally in educational fields and applying it to engineering students to illustrate specific cases with varying levels of ethical sensitivity.

Jointly Learning of Heavy Rain Removal and Super-Resolution in Single Images

  • ;김문철
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2020년도 추계학술대회
    • /
    • pp.113-117
    • /
    • 2020
  • Images were taken under various weather such as rain, haze, snow often show low visibility, which can dramatically decrease accuracy of some tasks in computer vision: object detection, segmentation. Besides, previous work to enhance image usually downsample the image to receive consistency features but have not yet good upsample algorithm to recover original size. So, in this research, we jointly implement removal streak in heavy rain image and super resolution using a deep network. We put forth a 2-stage network: a multi-model network followed by a refinement network. The first stage using rain formula in the single image and two operation layers (addition, multiplication) removes rain streak and noise to get clean image in low resolution. The second stage uses refinement network to recover damaged background information as well as upsample, and receive high resolution image. Our method improves visual quality image, gains accuracy in human action recognition task in datasets. Extensive experiments show that our network outperforms the state of the art (SoTA) methods.

  • PDF

보행자의 검출 및 추적을 기반으로 한 실시간 이상행위 분석 시스템 (Real-time Abnormal Behavior Analysis System Based on Pedestrian Detection and Tracking)

  • 김도훈;박상현
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2021년도 춘계학술대회
    • /
    • pp.25-27
    • /
    • 2021
  • 최근 딥러닝 기술의 발전으로 CCTV 카메라를 통해 획득한 영상 정보에서 객체의 이상행동을 분석하기 위한 컴퓨터 비전 기반 AI 기술들이 연구되었다. 위험 지역이나 보안 지역에는 범죄 예방 및 경계 감시를 위해 감시카메라가 설치되어 있는 경우가 다수 존재한다. 이러한 이유로 기업들에서는 감시카메라 환경에서 침입, 배회, 낙상, 폭행 같은 주요한 상황을 판단하기 위한 연구들이 진행되고 있다. 본 논문에서는 객체 검출 및 추적 방법을 사용한 실시간 이상 행위 분석 알고리즘을 제안한다.

  • PDF

전염병 확산 방지를 위한 딥러닝 기반 얼굴 만지기 행동 인식 연구 (Implementation of Face-Touching Action Recognition System based on Deep Learning for Preventing Contagious Diseases)

  • 조성만;김민지;최준명;김태형;박주영;김남국
    • 한국방송∙미디어공학회:학술대회논문집
    • /
    • 한국방송∙미디어공학회 2020년도 하계학술대회
    • /
    • pp.630-633
    • /
    • 2020
  • 무의식적인 손-얼굴의 접촉으로 인한 감염의 문제점을 해결하기 위해, 얼굴 만지기 행동을 인식할 필요가 있다. 본 연구는 최근 각광을 받는 딥러닝 기술을 이용하여 비디오 영상에서 얼굴 만지기 행동 인식에 대한 연구이다. 우선, 비디오 영상에서 얼굴 만지기와 관련된 11 가지 행동에 대한 시, 공간적 특징을 컨볼루션 신경망을 통해 추출한다. 추출된 정보는 각 행동 레이블로 인코딩되어 비디오 영상에서 얼굴 만지기 행동을 분류한다. 또한, 3D, 2D 컨볼루션 신경망의 대표 네트워크인 I3D, MobileNet v3에 대해 비교 실험을 진행한다. 제안하는 시스템을 적용하여 인간의 행동을 분류하는 실험을 진행했을 때, 얼굴을 만지는 행동을 99%의 확률로 구분했다. 이 시스템을 이용하여 일반인이 무의식적인 얼굴 만지기 행동에 대해서 정량적으로 또는 적시적으로 인식을 하여, 안전한 위생 습관을 확립하여 감염의 확산방지에 도움을 줄수 있기를 바란다.

  • PDF

항만 안전을 위한 지능형 CCTV, "Smart Eye" (Intelligent CCTV for Port Safety, "Smart Eye")

  • 백승호;지영일;최한샘
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2022년도 추계학술발표대회
    • /
    • pp.1056-1058
    • /
    • 2022
  • 본 연구는 항만에서 안전 수칙을 위반하여 발생하는 사고 및 이상행동을 실시간 탐지를 수행한 후 위험 상황을 관리자가 신속하고 정확하게 대처할 수 있도록 지원하는 지능형 CCTV, Smart Eye를 제안한다. Smart Eye는 컴퓨터 비전(Computer Vision) 기반의 다양한 객체 탐지(Object Detection) 모델과 행동 인식(Action Recognition) 모델을 통해 낙하 및 전도사고, 안전 수칙 미준수 인원, 폭력적인 행동을 보이는 인원을 복합적으로 판단하며, 객체 추적(Object Tracking), 관심 영역(Region of Interest), 객체 간의 거리 측정 알고리즘을 구현하여, 제한구역 접근, 침입, 배회, 안전 보호구 미착용 인원 그리고 화재 및 충돌사고 위험도를 측정한다. 해당 연구를 통한 자동화된 24시간 감시체계는 실시간 영상 데이터 분석 및 판단 처리 과정을 거친 후 각 장소에서 수집된 데이터를 관리자에게 신속히 전달하고 항만 내 통합관제센터에 접목함으로써 효율적인 관리 및 운영할 수 있게 하는 '지능형 인프라'를 구축할 수 있다. 이러한 체계는 곧 스마트 항만 시스템 도입에 이바지할 수 있을 것으로 기대된다.

The role of 27-hydroxycholesterol in meta-inflammation

  • Yonghae Son;Eunbeen Choi;Yujin Hwang;Koanhoi Kim
    • The Korean Journal of Physiology and Pharmacology
    • /
    • 제28권2호
    • /
    • pp.107-112
    • /
    • 2024
  • 27-Hydroxycholesterol (27OHChol), a prominent cholesterol metabolite present in the bloodstream and peripheral tissues, is a kind of immune oxysterol that elicits immune response. Recent research indicates the involvement of 27OHChol in metabolic inflammation (meta-inflammation) characterized by chronic responses associated with metabolic irregularities. 27OHChol activates monocytic cells such that they secrete pro-inflammatory cytokines and chemokines, and increase the expression of cell surface molecules such as pattern-recognition receptors that play key roles in immune cell-cell communication and sensing metabolism-associated danger signals. Levels of 27OHChol increase when cholesterol metabolism is disrupted, and the resulting inflammatory responses can contribute to the development and complications of metabolic syndrome, including obesity, insulin resistance, and cardiovascular diseases. Since 27OHChol can induce chronic immune response by activating monocyte-macrophage lineage cells that play a crucial role in meta-inflammation, it is essential to understand the 27OHChol-induced inflammatory responses to unravel the roles and mechanisms of action of this cholesterol metabolite in chronic metabolic disorders.

군사 동작 인식을 위한 IMU 기반 발목형 웨어러블 디바이스 개발 (Development of an IMU-based Wearable Ankle Device for Military Motion Recognition)

  • 장병준;조정훈;김도현;박경원
    • 지능정보연구
    • /
    • 제29권2호
    • /
    • pp.23-34
    • /
    • 2023
  • 군용 웨어러블 어플리케이션은 기존에는 상상할 수 없었던 개인 상태 점검 및 모니터링을 가능케 함으로써 큰 주목을 받고 있다. 그 중에서도 인간의 동작 상태를 인식하기 위한 기술은 개별 병력의 운용 현황 및 이동 상태를 즉각적으로 수집하여 능동적인 병력 관장을 허용한다는 점에서 그 필요성이 매우 높다. 본 논문에서는 군용 웨어러블 어플리케이션 연구의 일환으로 전투 상황 중의 군인이 어떤 환경에서 어떤 동작을 수행하고 있는지에 대한 정보를 취득하는 발목형 웨어러블 디바이스를 제안한다. 실제상황을 가정했을 때, 군인의 상지는 상황에 대한 변동성에 쉽게 노출되므로 지면과 상시 상호작용하고 있는 발목 부근에 측정 모듈을 부착한다. 측정 데이터는 각 동작 중의 3축 가속도 및 3축 각속도로 이들은 인간이 설정한 알고리즘으로는 해석이 불가능하다는 특징이 있다. 본 논문에서는 이러한 동적 데이터를 활용해 인간의 행동양식을 파악하기 위해 데이터의 이동 양상을 모델링하는 과정을 소개한다. 데이터로부터 추출되는 특징은 총 네 가지로 (최댓값, 최솟값, 평균, 표준편차) 딥러닝 모델의 인풋으로 활용돼 총 여덟 종류의 주요 군사 동작(Sitting, Standing, Walking, Running, Ascending, Descending, Low Crawl, High Crawl)을 분류하는데 활용된다. 그 결과, 임의의 시험 상황에 대해 95.16%의 정확도로 군인의 이동 현황을 파악해낼 수 있었다. 본 연구는 웨어러블 기술 및 인공지능을 융합하여 군용 어플리케이션으로 확장될 동작 인식의 새로운 접근 방식을 제안했다는 점에서 의미가 크다.

이제마(李濟馬) 형상관(形象觀)의 구조적(構造的) 고찰(考察) (The study on the structure of the Lee Je-ma's viewpoint of Morpho-Image)

  • 이전희;고병희;송일병
    • 사상체질의학회지
    • /
    • 제11권1호
    • /
    • pp.41-61
    • /
    • 1999
  • 연구목적(硏究目的) : 고대철학가(古代哲學家)들은 우주(宇宙)의 본원(本元)을 연구하는 동시에 인류생명의 기원과 본질을 탐구하였는데 기존의 정기학설(精氣學說), 음양학설(陰陽學說), 오행학설(五行學說) 등등은 이러한 시도중의 하나라고 할 수 있다. 이 글에서는 형상관(形象觀)을 사물(事物)을 바로보는 기본적인 인식체계(認識體系), 인식론(認識論), 자연현상(自然現象) 인체현상(人體現象)을 설명하는 이론적(理論的)인 도구 등으로 정의(定意)하고 동무(東武)의 형상관(形象觀)을 고찰하여 보았다. 연구방법(硏究方法) : 동무(東武)는 자신의 형상관(形象觀)을 자신의 저서(著書)인 "격치고(格致藁)", "동의수세보원사상초본권(東醫壽世保元四象草本卷)", "동의수세보원(東醫壽世保元)" 등에서 서술하고 있는데 이러한 동무(東武)의 저서(著書)를 바탕으로 그가 어떤 방법론으로 형상(形象)을 서술하는지에 대해 고찰하고, 이를 인체(人體)에 어떻게 적용하고 있는지에 대해 논(論)하였다. 결론(結論) : 이상의 과정을 통하여 다음과 같은 결론을 얻을 수 있었다. 1. "격치고(格致藁) 태극잠(太極잠)", "격치고(格致藁) 유략(儒略) 사상(事物), "동의수세보원사상초본권(東醫壽世保元四象草本卷)"에 나타나고 있는 인식의 구조는 태극(太極), 양의(兩儀), 사상(四象)을 그 기본으로 하고 있는데 태극지심(太極之心)이 있고, 거기서 이분법적(二分法的)으로 분파된 양의지심(兩儀之心)이 있고, 거기서 분파(分派)된 사상지심(四象之心)이 있다. 태극지심(太極之心)은 중앙지심(中央之心)이고, 양의지심(兩歲之心)은 신심(心身) 또는 지행(知行)으로 표현이 되는데, 심적(心的) 지적(知的) 요소의 축과 신적(身的) 행적(行的) 요소의 축이 교차하여 사심신물(事心身物)의 사상(四象)을 형성한다. 사상(四象)으로부터는 기존의 주역(周易)에서와 같은 이분법적(二分法的)인 분파(分派)에 의해 입괘(八卦)가 형성이 되는 것이 아니라며 사분법적(四分法的)인 분파(分派)에 의해 사사단(四四端)을 형성한다. 이상이 동무의 기본인식체계의 구조라 할 수 있다. 2. 동무(東武)는 사심신물(事心身物)의 사상적(四象的) 시각에서 그 기본을 삼고, 이를 다시 심신양의적(心身兩儀的) 시각에서 요약하여 정리하고 이를 태극적(太極的) 관점에서 전체적으로 요약하여 보는 인식의 요약과정을 갖는다. 3. 이상의 인식과정은 "동의수세보원(東醫壽世保元)" 성명론(性命論) 사단론(四端論) 확충론(擴充論)에도 마찬가지로 정리되어 나타나니, 천품지이정(天稟之已定)의 요소이며, 인(人)의 요소인 사물(事物)의 상하(上下)의 축과 천품지이정지외(天稟之已定之外)의 요소이며 아(我)의 차원인 심신(心身)(지행(知行))의 축을 그 기본구도로 전개하며, 그 양축을 바탕으로 사심신물(事心身物)(천인지행(天人知行))의 사원적(四元的)구도와 그 상호관계를 논(論)하고 있다. 4. 동무(東武)의 태극(太極), 양의(兩儀), 사상(四象) 다시 말해서 심(心), 심신(心身), 사심신물(事心身物)의 인식구조는 인체에서의 용어로 바뀌어져 병증론(病證論)으로의 가교 역할을 하는 장부론(臟腑論)에 표현되고 있다.

  • PDF