• 제목/요약/키워드: Multimodal environment

검색결과 75건 처리시간 0.026초

탑-뷰 변환과 빔-레이 모델을 이용한 영상기반 보행 안내 시스템 (Vision-based Walking Guidance System Using Top-view Transform and Beam-ray Model)

  • 림청;한영준;한헌수
    • 한국컴퓨터정보학회논문지
    • /
    • 제16권12호
    • /
    • pp.93-102
    • /
    • 2011
  • 본 논문은 야외 환경에서 하나의 카메라를 이용한 시각 장애인을 위한 보행 안내 시스템을 제안한다. 기존의 스테레오 비전을 이용한 보행 지원 시스템과는 다르게 제안된 시스템은 사용자의 허리에 고정된 하나의 카메라를 이용하여 꼭 필요한 정보만을 얻는 것을 목표로 하는 시스템이다. 제안하는 시스템은 먼저 탑-뷰 영상을 생성하고, 생성된 탑-뷰 영상 내 지역적인 코너 극점을 검출한다. 검출된 극점에서 방사형의 히스토그램을 분석하여 장애물을 검출한다. 그리고 사용자 움직임은 사용자에 가까운 지역 안에서 옵티컬 플로우를 사용하여 추정한다. 이렇게 영상으로부터 추출된 정보들을 기반으로 음성 메시지 생성 모듈은 보행 지시 정보를 합성된 음성을 통해 시각 장애인에게 전달한다. 다양한실험 영상들을 사용하여 제안한 보행 안내 시스템이 일반 인도에서 유용한 안내 지시를 제공하는 것이 가능함을 보인다.

에너지 효율적 이종망간 핸드오버를 지원하는 새로운 모바일 단말 소프트웨어 아키텍쳐 개발 (Development of a Novel Mobile Terminal Software Architecture supporting Energy Efficient Vertical Handover)

  • 박승민;김원태;김대영
    • 대한전자공학회논문지TC
    • /
    • 제46권1호
    • /
    • pp.10-23
    • /
    • 2009
  • 본 논문에서 에너지 효율적 이종망간 핸드오버를 지원하는 새로운 모바일 단말 소프트웨어 아키텍쳐를 제안한다. 기존 방식은 L3 핸드오버를 IETF Mobile IP에 의존하고 있어 Mobile IP가 가지는 이동성 검출 방식의 문제점을 그대로 가지며 동시에 이종의 네트워크 환경에 대한 어떠한 지원도 없으므로 중첩된 다중망 상황에서 불필요한 핸드오버를 자주 수행하게 되어 네트워크와 단말에 심각한 오버로드를 유발시킨다. 이에 반해 제안하는 방식은 단말기반의 망선택 및 전환을 수행하는 구조로서 단말에서 망상태를 주기적으로 모니터링하고 최적의 망을 선택하여 결정된 망으로의 L3 핸드오버 명령을 Mobile IP에 지시하는 형태로 불필요한 에너지 소모를 최소화한다. 망선택 방식은 단말의 속도 기반 망선택 및 전력소모 예측 등을 통해 핸드오버 대상이 될 망들을 선별한 후 단말이 요구하는 QoS, 네트워크 상태, 사용자의 선호도 및 단말의 배터리 상태 등을 종합적으로 고려하여 최종적으로 최적의 네트워크를 선택하는 방식을 취한다. 마지막으로 본 논문에서 제시하는 에너지 효율적 이종망간 핸드오버 아키텍쳐를 실제 단말에 적용하여 그 기능 및 성능을 검증한다.

교육용 로봇과 증강 현실 결합을 통한 인터랙티브 학습 경험 (The Interactive Learning Experience by Integrating Educational Robots into the Augmented Reality)

  • 유정수
    • 정보교육학회논문지
    • /
    • 제16권4호
    • /
    • pp.419-427
    • /
    • 2012
  • 본 논문에서는 학교 교실 수업에 교육용 로봇과 증강 현실 기술을 결합하여 적용하였을 때 증강 현실과 로봇이라는 기술적인 요소가 학습자의 학습 경험에 어떤 영향을 미치는지를 알아보는데 중점을 두었다. 이를 위해 증강현실과 로봇 기술을 결합한 인터랙티브 학습 환경과 수업 모형을 개발하고 교실 수업에 적용하였다. 개발된 학습모형은 기존의 문제중심학습 모형을 기반으로 하였다. 개발된 시스템은 초등학교 5,6학년 18명을 대상으로 정규수업 시간에 8주간 적용하였다. 본 연구를 통해 얻은 결과는 로봇과 증강 현실을 결합한 인터랙티브 학습 경험을 통해서 학생들의 창의성을 높일 수 있음을 알 수 있었다. 연구결과 특이점은 증강현실과 로봇이라는 새로운 기술테크놀로지를 통해 성적이 하위권 학생들이 상위권 학생들보다 창의성 점수가 크게 증가함을 알 수 있었다.

  • PDF

멀티 모달 인터페이스 기반 플레이어 얼굴 표정 분석 시스템 개발 (Expression Analysis System of Game Player based on Multi-modal Interface)

  • 정장영;김영빈;이상혁;강신진
    • 한국게임학회 논문지
    • /
    • 제16권2호
    • /
    • pp.7-16
    • /
    • 2016
  • 본 논문은 게임을 수행하는 개별 사용자의 특별한 행동 탐지를 효율적으로 수행하는 시스템을 제안한다. 제안하는 시스템은 일반적인 게임 플레이 환경에서 비 침투적 방법을 통해 포착 가능한 사용자 특징과 반복적인 패턴에 기반을 두어 특이 행동 탐지를 한다. 본 논문에서는 표정과 사용자 움직임과 같이 관찰되는 자료를 분석하기 위해 카메라를 사용했다. 게다가 반복 행동 탐지를 위해 게임 사용자로부터 멀티 모달 데이터를 사용하여 고차원의 행동 분석하기 위해 사용했다. 특이 행동 탐지에 효과적인 Support Vector Machine 을 사용했으며, 특이 행동 탐지 수행의 유용성을 평가하여 약 70% 확률로 탐지하는 이상 행동 탐지 재현율을 보였다. 또한 반복 행동 분석이 가능함을 보였다. 제안된 기법을 사용하였을 때 PC 환경에서 제공하는 모든 콘텐츠의 분석에 대한 피드백과 정량화하는데 도움이 될 수 있다.

햅틱 / 사운드 그리드를 이용한 3차원 가상 환경 내의 위치 정보 인식 향상 (Haptic and Sound Grid for Enhanced Positioning in 3-D Virtual Environment)

  • 김승찬;양태헌;권동수
    • 한국HCI학회:학술대회논문집
    • /
    • 한국HCI학회 2007년도 학술대회 1부
    • /
    • pp.447-454
    • /
    • 2007
  • 본 논문에서는 사용자의 가상환경 내의 위치 정보에 대한 감각을 향상시키는 방법론으로서 햅틱 피드백(haptic feedback)과 사운드 피드백(sound feedback)의 모달리티를 활용한 그리드(grid)를 제안한다. 제안된 그리드는 사용자의 3차원 공간 내의 움직임(explorative procedure)에 추가적인 비 시각적인(non-visual) 위치정보 피드백을 부여하는데 그 목적을 두고 있다. 햅틱 모달리티를 활용한 3차원 그리드는 SensAble사의 PHANTOM(R) Omni$^{TM}$ 를 활용하여 설계되었으며, 사운드 모달리티를 활용한 경우 저주파 배경음의 주파수 특성(frequency characteristics of sound source)을 사용자 손의 공간 좌표값에 근거하여 재생 시의 표본 추출 비율(sampling rate)를 연속적으로 바꾸는 방식으로 설계되었다. 이러한 공간 그리드는 두 모달리티 각각의 독립적인 제시 및 동시 제시/제거를 통해 평가되었으며, 동시 제시의 경우 두 모달리티간의 어긋남(cross-modal asynchrony)이 없도록 설계되어 사용자의 공간 작업 시 모달리티간의 조화 (manipulating congruency)를 확보할 수 있도록 하였다. 실험을 통해 얻어진 결과는 그것의 통계적 유의미성을 분석하기 위해 다원변량분석과 사후검증(Turkey. HSD)을 거쳐 해석이 되었다. 공간 내 특정 좌표 선택을 기준으로 하는 그리드의 사용자 평과 결과, 3차원 내의 움직임에 대해 햅틱 및 사운드 피드백의 비 시각적 피드백은 사용자의 공간 작업의 오차를 줄여 주고 있음이 확인되었다. 특히 시각적인 정보만으로 확인하기 어려운 Z축 상의 움직임은 그리드의 도움으로 그 오차정도가 50% 이상 줄어 드는 것으로 확인되었다(F=19.82, p<0.01). 이러한 시각적 정보를 보존하는 햅틱, 사운드 피드백 방식을 HCI의 중요한 요소인 사용성과 유용성과 연관시켜 MMHCI(multimodal human-computer interaction) 방법론으로의 적용 가능성을 검토해 본다.

  • PDF

전자무역결제시스템에 관한 연구 -Bolero System과 TradeCard를 중심으로- (A Comparative Study on the Settlement System of Electronic Trade)

  • 전순환
    • 정보학연구
    • /
    • 제5권3호
    • /
    • pp.197-214
    • /
    • 2002
  • 전자상거래의 도입으로 인하여 전신송금환(T/T)${\cdot}$우편송금환(M/T)${\cdot}$송금수표(D/D)와 같은 단순송금방식(Remittance), 현금결제방식(COD)과 서류결제방식(CAD), 지급인도조건(D/P)${\cdot}$인수인도조건(D/A)과 같은 추심 결제방식, 신용장(Letter of Credit)방식 등 기존의 무역결제수단이 신용카드(Credit Card), 전자화폐(Electronic Cash), 전자자금이체(EFT; Electronic Fund Transfer), 무역카드(TradeCard), SWIFT의 전자신용장(Electronic L/C), 볼레로 시스템 등의 전자결제시스템으로 전환되었다. 이에 본고는 대표적 전자무역결제시스템인 볼레로와 무역카드를 비교${\cdot}$분석함으로써 이들 시스템의 활용가능성을 모색하고자 하는 것이다.

  • PDF

Analytic Hierarchy Process Modelling of Location Competitiveness for a Regional Logistics Distribution Center Serving Northeast Asia

  • Kim, Si-Hyun;Lee, Kwang-Ho;Kang, Dal-Won
    • Journal of Korea Trade
    • /
    • 제24권3호
    • /
    • pp.20-36
    • /
    • 2020
  • Purpose - As the global product network expands through both internationalization and diversification of the multimodal transportation system, corporate strategies have shifted to emphasize the importance of a high value-added international logistics system. To guide policies and strategies to attract relevant industries, this study aims to analyze the location competitiveness of regional logistics distribution center to serve Northeast Asia. Design/methodology - Multi-criteria techniques are considered to offer a promising framework for evaluating decision-making factors. This paper employed an analytic hierarchy process to analyze the hierarchal structure of determinants for selecting the location of a regional logistics distribution center. Adopting both qualitative and quantitative evaluations, this study suggest political implications for a regional logistics distribution center development, such as the direction of political support, service differentiation and infrastructure development. Findings - This study developed a location competitiveness evaluation model, based on the case study of the major port-cities in Northeast Asia. Evaluation model incorporates five factors underpinning 17 components extracted using factor analysis. The results revealed that the logistics factor is the most significant factor for evaluating the competitiveness of a regional logistics distribution center. The remaining factors were market, costs, and services environment. Comparing qualitative and quantitative evaluations, results provide useful insights for a regional logistics distribution center development in Northeast Asia. Originality/value - This study revealed differences between qualitative and quantitative evaluations. The finding implies that prior works on evaluation models of competitiveness has not successfully measured the gap between quantitative data and expert' evaluations. To overcome this limitation, this paper considered both actual data such as actual distance, cost, the number of companies located, and expert opinions.

자동 적응 기반 메타버스 가상 휴먼 상호작용 기법 (Automatic Adaptation Based Metaverse Virtual Human Interaction)

  • 정진호;조동식
    • 정보처리학회논문지:소프트웨어 및 데이터공학
    • /
    • 제11권2호
    • /
    • pp.101-106
    • /
    • 2022
  • 최근 가상 휴먼은 국방, 의료, 산업, 유통, 문화, 엔터테인먼트 등 다양한 서비스 분야에서 교육, 훈련 정보 가이드, 홍보 전시 등 널리 활용되고 있다. 또한, 가상 휴먼을 통해 원격지에 접속한 사용자와 상호작용하기 위한 메타버스 서비스가 급속히 확대 적용될 것으로 전망하고 있다. 메타버스 환경 안에서 가상 휴먼(혹은 아바타)을 이용한 상호작용은 참여자가 현실 세계의 실제 친구와 대화하는 것처럼 자연스럽게 소통하는 방식으로 운용이 되고, 이를 위해서는 사용자의 음성, 동작, 감정 등 다양한 입력을 기반으로 반응하는 가상 휴먼 상호작용 매핑 관계를 제작하여야 한다. 또한, 현실 세계의 변화에 동작하는 가상 휴먼의 경우 현실의 환경에 기반한 상호작용 동작이 되도록 지원하여야 한다. 하지만, 기존 가상 휴먼 상호작용 방법은 미리 정해진 반응형 패턴을 제작하기 위해 수작업으로 동작 결과를 프로그래밍하여 구현되었다. 이러한 방법은 개발 기간이 상대적으로 많이 소요되고, 상호작용 수정이 쉽게 변경하지 못하는 단점이 있다. 또한, 실제 주변 환경의 영향에 의해 반응적으로 동작하는 상호작용을 지원하기가 어렵다고 할 수 있다. 본 논문에서는 가상 휴먼의 직관적인 상호작용을 위해 음성, 동작, 감정 등 사용자의 멀티모달 입력과 주변 환경에 대한 반응하는 가상 휴먼 제작 방법을 제시한다. 이를 위한 가상 휴먼 상호작용 저작도구를 통해 쉽고 빠르게 사용자와 반응하는 가상 휴먼의 표현을 생성하고, 가상 휴먼이 자동 적응 기반으로 사용자 입력 및 주변 환경에 변화에 동작할 수 있도록 하였다.

Enhancing Acute Kidney Injury Prediction through Integration of Drug Features in Intensive Care Units

  • Gabriel D. M. Manalu;Mulomba Mukendi Christian;Songhee You;Hyebong Choi
    • International journal of advanced smart convergence
    • /
    • 제12권4호
    • /
    • pp.434-442
    • /
    • 2023
  • The relationship between acute kidney injury (AKI) prediction and nephrotoxic drugs, or drugs that adversely affect kidney function, is one that has yet to be explored in the critical care setting. One contributing factor to this gap in research is the limited investigation of drug modalities in the intensive care unit (ICU) context, due to the challenges of processing prescription data into the corresponding drug representations and a lack in the comprehensive understanding of these drug representations. This study addresses this gap by proposing a novel approach that leverages patient prescription data as a modality to improve existing models for AKI prediction. We base our research on Electronic Health Record (EHR) data, extracting the relevant patient prescription information and converting it into the selected drug representation for our research, the extended-connectivity fingerprint (ECFP). Furthermore, we adopt a unique multimodal approach, developing machine learning models and 1D Convolutional Neural Networks (CNN) applied to clinical drug representations, establishing a procedure which has not been used by any previous studies predicting AKI. The findings showcase a notable improvement in AKI prediction through the integration of drug embeddings and other patient cohort features. By using drug features represented as ECFP molecular fingerprints along with common cohort features such as demographics and lab test values, we achieved a considerable improvement in model performance for the AKI prediction task over the baseline model which does not include the drug representations as features, indicating that our distinct approach enhances existing baseline techniques and highlights the relevance of drug data in predicting AKI in the ICU setting.

모바일 환경에서의 생성형 AI 서비스 성공 전략 연구: LDA 토픽모델링을 활용한 사용자 경험 분석 (A Study on Success Strategies for Generative AI Services in Mobile Environments: Analyzing User Experience Using LDA Topic Modeling Approach)

  • 김소연;조지연;박상열;이봉규
    • 인터넷정보학회논문지
    • /
    • 제25권4호
    • /
    • pp.109-119
    • /
    • 2024
  • 본 연구는 모바일 등 온디바이스(on-device)에 탑재된 생성형 AI 기반 서비스가 증가하는 환경 속에서 온디바이스 AI 관련 초기연구에 기여하고자 한다. 모바일 환경에서 생성형 AI 기반 챗봇 서비스의 성공 전략을 도출하기 위해 구글 플레이 스토어에서 수집한 20만 건 이상의 실제 사용자 경험 리뷰 데이터를 LDA 토픽모델링 기법을 사용하여 분석하였다. 정보시스템 성공 모델(ISSM)에 기반하여 도출된 주제를 해석한 결과 정보 품질에는 튜터링, 대답의 제한, 신뢰할 수 없는 정보와 같은 토픽이, 시스템 품질에는 멀티모달서비스, 대화의 품질, 디바이스 상호운용성의 토픽이, 서비스 품질에는 디바이스 간 호환성, 서비스의 사용 용이성, 유료 서비스의 품질, 계정 호환성의 토픽이, 마지막으로 순 효익에는 창의적 협업 토픽이 연결되었다. 생성형 AI의 의인화는 기존 모델로 설명되지 않는 새로운 경험 요인으로 나타났다. 본 연구는 사용자 측면에서의 구체적인 긍정 및 부정 경험 차원을 이론에 기반하여 설명함으로써 향후 관련 연구의 방향을 제시하고, 성공적인 비즈니스를 위한 개선점과 보완점을 찾아 기업에게 서비스의 성공적 운영을 위한 전략적 인사이트를 제공하고자 한다.