• 제목/요약/키워드: 행동 모델

검색결과 1,440건 처리시간 0.027초

이미지-텍스트 자질을 이용한 행동 포착 비디오 기반 대화시스템 (Audio-Visual Scene Aware Dialogue System Utilizing Action From Vision and Language Features)

  • 임정우;장윤나;손준영;이승윤;박기남;임희석
    • 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
    • /
    • 한국정보과학회언어공학연구회 2023년도 제35회 한글 및 한국어 정보처리 학술대회
    • /
    • pp.253-257
    • /
    • 2023
  • 최근 다양한 대화 시스템이 스마트폰 어시스턴트, 자동 차 내비게이션, 음성 제어 스피커, 인간 중심 로봇 등의 실세계 인간-기계 인터페이스에 적용되고 있다. 하지만 대부분의 대화 시스템은 텍스트 기반으로 작동해 다중 모달리티 입력을 처리할 수 없다. 이 문제를 해결하기 위해서는 비디오와 같은 다중 모달리티 장면 인식을 통합한 대화 시스템이 필요하다. 기존의 비디오 기반 대화 시스템은 주로 시각, 이미지, 오디오 등의 다양한 자질을 합성하거나 사전 학습을 통해 이미지와 텍스트를 잘 정렬하는 데에만 집중하여 중요한 행동 단서와 소리 단서를 놓치고 있다는 한계가 존재한다. 본 논문은 이미지-텍스트 정렬의 사전학습 임베딩과 행동 단서, 소리 단서를 활용해 비디오 기반 대화 시스템을 개선한다. 제안한 모델은 텍스트와 이미지, 그리고 오디오 임베딩을 인코딩하고, 이를 바탕으로 관련 프레임과 행동 단서를 추출하여 발화를 생성하는 과정을 거친다. AVSD 데이터셋에서의 실험 결과, 제안한 모델이 기존의 모델보다 높은 성능을 보였으며, 대표적인 이미지-텍스트 자질들을 비디오 기반 대화시스템에서 비교 분석하였다.

  • PDF

지능형 영상 감시 시스템에서의 은닉 마르코프 모델을 이용한 특이 행동 인식 알고리즘 (A Recognition Algorithm of Suspicious Human Behaviors using Hidden Markov Models in an Intelligent Surveillance System)

  • 정창욱;강동중
    • 한국멀티미디어학회논문지
    • /
    • 제11권11호
    • /
    • pp.1491-1500
    • /
    • 2008
  • 본 논문은 은닉 마르코프 모델을 사용하여 사람의 특정한 행동을 인식하여 사용자에게 알려주는 지능형 영상 감시 시스템을 제안한다. 본 방법에는 카메라를 통해 입력된 영상에서 사람 영역을 찾은 후 발 영역만을 추출하여 특징이 되는 관측열을 생성한다 특징 영역은 입력 영상의 각 프레임을 16개의 영역으로 나누어 발바닥이 위치한 곳의 코드를 읽어 사용하고, 인식하고자 하는 패턴 행동들에 대해서는 각각의 관측열을 구하고 HMM의 Baum-Welch 알고리즘을 사용하여 학습한다. 인식에는 전향 알고리즘을 사용하여 입력된 행동과 학습된 행동을 확률적으로 비교하여 영상 내의 행동이 어떤 패턴 행동인지를 결정하여 출력한다. 제시된 방법은 복도에서 사람의 특정 행동을 인식하는데 성공적으로 적용될 수 있음을 실험을 통해 확인했다.

  • PDF

퍼지 추론 기반의 멀티에이전트 강화학습 모델 (Multi-Agent Reinforcement Learning Model based on Fuzzy Inference)

  • 이봉근;정재두;류근호
    • 한국콘텐츠학회논문지
    • /
    • 제9권10호
    • /
    • pp.51-58
    • /
    • 2009
  • 강화학습은 최적의 행동정책을 구하는 최적화 문제로 주어진 환경과의 상호작용을 통해 받는 보상 값을 최대화하는 것이 목표이다. 특히 단일 에이전트에 비해 상태공간과 행동공간이 매우 커지는 다중 에이전트 시스템인 경우 효과적인 강화학습을 위해서는 적절한 행동 선택 전략이 마련되어야 한다. 본 논문에서는 멀티에이전트의 효과적인 행동 선택과 학습의 수렴속도를 개선하기 위하여 퍼지 추론 기반의 멀티에이전트 강화학습 모델을 제안하였다. 멀티 에이전트 강화학습의 대표적인 환경인 로보컵 Keepaway를 테스트 베드로 삼아 다양한 비교 실험을 전개하여 에이전트의 효율적인 행동 선택 전략을 확인하였다. 제안된 퍼지 추론 기반의 멀티에이전트 강화학습모델은 다양한 지능형 멀티 에이전트의 학습에서 행동 선택의 효율성 평가와 로봇축구 시스템의 전략 및 전술에 적용이 가능하다.

Fish 군중행동 모델러 (Fish Schooling Behavior Modeler)

  • 김종찬;반경진;김응곤
    • 한국콘텐츠학회:학술대회논문집
    • /
    • 한국콘텐츠학회 2006년도 춘계 종합학술대회 논문집
    • /
    • pp.517-520
    • /
    • 2006
  • 가상 해저 환경 속에서 군중 행동 장면은 영화, 게임 등의 엔터테인멘트 산업 속에서 많은 장면으로 연출된다. 컴퓨터 그래픽스 기술의 발달로 인한 디지털 영화나 애니메이션이 점차 증가함에 따라 이러한 장면이 등장하는 가상캐릭터를 쉽게 접할 수 있다. 컴퓨터 애니메이션에서 등장하는 캐릭터는 가상공간의 생기를 불어넣는 역할을 한다. 이러한 가상캐릭터의 객체수가 증가함에 따라 가상세계에 대한 몰입감을 증대하여 표현해야한다. 국내에서는 가상 환경을 구축하여 실감 체험을 할 수 있는 VR 콘텐츠 기술 개발에 관련하여 군중 장면 처리 및 군중 행동 시스템의 설계 및 구현 등의 연구가 있었으나 군중 행동 모델러 기술 개발을 실용화 할 단계까지는 미치지 못하고 있다. 본 논문에서는 해저환경에서 사실적이고 효율적인 표현을 위해 3D 객체에 행동양식을 부여하고, 상호작용이 가능하도록 fish 군중행동 모델러를 제안한다.

  • PDF

군중의 경로 추적 행동 (Path Following Behavior of Crowd)

  • 이지현
    • 한국콘텐츠학회:학술대회논문집
    • /
    • 한국콘텐츠학회 2008년도 춘계 종합학술대회 논문집
    • /
    • pp.10-14
    • /
    • 2008
  • 컴퓨터 애니메이션을 이용한 군중 장면은 영화나 게임에서 자주 등장한다. 군중의 보행동작을 생성하기 위해 기존의 기술들은 주로 군중의 각 개체들의 행동을 모델링하여 접근하였다. 하지만, 군중의 규모가 커질수록 모든 개체를 개별적으로 제어하기는 어려워진다. 따라서 대규모 군중의 경우 개체별로 행동을 모델링하기보다 집단별로 모델링하여 보다 직관적으로 군중을 제어할 수 있다. 본 논문에서는 집단의 경로 추적 행동을 시뮬레이션하기 위한 집단 역장 모델을 제안한다. 집단은 같은 목적, 즉 같은 경로를 따라 무리지어 행동하는 개체들의 모임으로 정의된다. 또한 집단의 무리짓는 행동은 정렬, 응집, 분리의 세 가지 특징으로 규정지을 수 있다. 집단 역장 모델을 통해 이러한 집단의 특징들을 보존하면서 개체 간의 충돌을 자연스럽게 회피할 수 있다. 제안한 기술을 통하여, 사용자는 나란히 늘어선 집단에서 동그랗게 뭉쳐진 집단까지 원하는 형태의 경로 추적 애니메이션을 생성할 수 있다.

  • PDF

해상교통분석 시뮬레이션을 위한 항해사의 충돌회피 행동분석에 관한 연구 (A Study on the Analysis of Ship Officers' Collision-Avoidance Behavior During Maritime Traffic Simulation)

  • 김홍태;안영중;양영훈
    • 한국항해항만학회지
    • /
    • 제44권6호
    • /
    • pp.469-476
    • /
    • 2020
  • 해상교통 분야와 같이 선박, 항해사, 관제센터, 해운선사, 기상시스템, 지리정보시스템 등의 복잡하고 넓은 범위의 요구사항을 갖는 시스템의 모델링 및 시뮬레이션(Modeling and Simulation, M&S)을 위해서는 인간을 포함한 체계가 필요하다. 해상교통을 모의하기 위해서는 주요 요소인 항해사의 인적요인에 대한 모델링이 필요하다. 즉, 현실감 있는 해상교통 상황의 재현 및 예측을 위해 항해사의 행동양식, 항해전문성, 항해오류 등을 모델링하여 반영하는 것이 필요하다. 본 논문에서는 에이전트 기반의 해상교통 시뮬레이션을 위해서 항해사의 충돌회피를 위한 행동 분석을 수행하였으며, 기초 데이터의 확보를 위해 설문조사를 실시하였다. 설문조사를 통해 분석된 정보를 이용하여 선박 충돌상황에서 항해사의 행동과 유사한 에이전트 기반의 항해행동 모델을 개발하였으며, 해상교통분석 시뮬레이션 플랫폼의 개발을 위해 활용될 것이다.

Deep Learning-Based Companion Animal Abnormal Behavior Detection Service Using Image and Sensor Data

  • Lee, JI-Hoon;Shin, Min-Chan;Park, Jun-Hee;Moon, Nam-Mee
    • 한국컴퓨터정보학회논문지
    • /
    • 제27권10호
    • /
    • pp.1-9
    • /
    • 2022
  • 본 논문에서는 영상 데이터와 센서 데이터를 활용한 딥러닝 기반의 반려동물 이상행동 탐지 서비스를 제안한다. 최근 반려동물 보유 가구의 증가로 인해 기존 푸드 및 의료 중심의 반려동물 시장에서 인공지능을 더한 펫테크(Pet Tech) 산업이 성장하고 있다. 본 연구에서는 인공지능을 통한 반려동물의 건강관리를 위해 영상 및 센서 데이터를 활용한 딥러닝 모델을 기반으로 반려동물의 행동을 분류하고, 이상행동을 탐지하였다. 자택의 CCTV와 직접 제작한 펫 웨어러블 디바이스를 활용하여 반려동물의 영상 데이터 및 센서 데이터를 수집하고, 모델의 입력 데이터로 활용한다. 행동의 분류를 위해 본 연구에서는 반려동물의 객체를 검출하기 위한 YOLO(You Only Look Once) 모델과 관절 좌표를 추출하기 위한 DeepLabCut을 결합하여 영상 데이터를 처리하였고, 센서 데이터를 처리하기 위해 각 센서 별 연관관계 및 특징을 파악할 수 있는 GAT(Graph Attention Network)를 활용하였다.

에니어그램을 활용한 사용자 중심 스토리텔링에 관한 연구 (A Study of User-Oriented Storytelling Based on Enneagram)

  • 강정화;오규환;이윤진;석혜정
    • 한국콘텐츠학회논문지
    • /
    • 제17권12호
    • /
    • pp.34-48
    • /
    • 2017
  • 디지털 시대의 서사는 상호작용을 시도하여 왔고, 브랜치 서술로 대표되는 인터랙티브 스토리텔링은 다수의 선택지 구현에 따른 비싼 제작 비용, 선형적 스토리에 비해 빈약한 서사의 문제가 있다. 이에 대한 대안으로 본 연구에서는 사용자의 성격적 특성을 이용한 사용자 중심 스토리텔링을 제안한다. 성격분류지표인 에니어그램과 기호학자 그레마스의 행동자 모델을 사용하여, 스토리와 인물 등의 이야기 재료가 같을 때 사용자의 에니어그램 성격유형에 따라 같은 이야기에서 서로 다른 주제를 도출하여 이야기를 재구성한다. 사용자와 동일한 에니어그램 성격 유형을 가진 인물, 그 성격 유형의 핵심가치를 각각 행동자 모델의 주체, 대상으로 정하여 행동자 모델의 욕망의 축을 정의함으로써 주제가 결정된다. 에니어그램의 통합과 분열의 방향을 이용하여 행동자 모델의 능력의 축을 정의한다. 이렇게 에니어그램의 9가지 성격 유형별 주제와 그에 따른 행동자 모델을 도출하고 이야기를 만든다. 사용자는 개인의 성격에 따라 이 서로 다른 관점과 주제로 재구성된 이야기들 중 하나를 보게 된다. 본 연구에서는 판소리계 소설 "토끼전"의 이야기에 위의 구성방법을 적용해보았다. 사용자 중심 스토리텔링은 사용자의 성격과 관점에 따라 그들의 선택을 예측하고 이야기를 재구성하는 새로운 시도이다.

이동 컴퓨팅 환경에서의 시간 주기적인 행동 패턴에 따른 효율적인 캐쉬 일관성 기법 (An Efficient Cache Coherence Method based on timely periodic conduct pattern by Mobile Computing Environments)

  • 서동호;서효중
    • 한국정보처리학회:학술대회논문집
    • /
    • 한국정보처리학회 2007년도 춘계학술발표대회
    • /
    • pp.1447-1449
    • /
    • 2007
  • 본 논문은 이동 컴퓨팅 환경에서 시간 주기적인 인간의 행동 패턴에 따른 캐쉬 일관성 기법을 제안하고자 한다. 행동 유형 모델을 근거로 하여 시간 주기적인 행동의 패턴과 이동 기기의 사용 패턴이 동일 또는 흡사함을 가정한다. 이를 통해 패턴 예측 테이블을 구성하고, 시간대별로 구성된 테이블의 예측 데이터를 사용하여 서버와의 통신할 때 지연 현상을 방지 하는 기법을 제안한다.

  • PDF

혼돈행동이론에 의한 예망어업의 어획 시뮬레이션

  • 김용해;김봉익;정연수
    • 한국어업기술학회:학술대회논문집
    • /
    • 한국어업기술학회 2002년도 추계 수산관련학회 공동학술대회발표요지집
    • /
    • pp.55-56
    • /
    • 2002
  • 예망어구에 대한 어류의 반응행동은 혼돈행동이론(Kim, 1996)에 의한 어획과정의 재현으로 어획정도, 어획선택성(이 등, 1992, 1994) 등 현장조업을 대체하거나 예측해 볼 수 있는 수단이 될 것이다. 여기서는4가지 주요 예망어업에 대한해당어종의 반응 행동을 시뮬레이션하고 조업자료와의 비교ㆍ검토에 의하여 본 모델의 실용성을 확인하였다. (중략)

  • PDF