• Healthcare Informatics Research
• /
• 제24권4호
• /
• pp.309-316
• /
• 2018

Objectives: Both the valence and arousal components of affect are important considerations when managing mental healthcare because they are associated with affective and physiological responses. Research on arousal and valence analysis, which uses images, texts, and physiological signals that employ deep learning, is actively underway; research investigating how to improve the recognition rate is needed. The goal of this research was to design a deep learning framework and model to classify arousal and valence, indicating positive and negative degrees of emotion as high or low. Methods: The proposed arousal and valence classification model to analyze the affective state was tested using data from 40 channels provided by a dataset for emotion analysis using electrocardiography (EEG), physiological, and video signals (the DEAP dataset). Experiments were based on 10 selected featured central and peripheral nervous system data points, using long short-term memory (LSTM) as a deep learning method. Results: The arousal and valence were classified and visualized on a two-dimensional coordinate plane. Profiles were designed depending on the number of hidden layers, nodes, and hyperparameters according to the error rate. The experimental results show an arousal and valence classification model accuracy of 74.65 and 78%, respectively. The proposed model performed better than previous other models. Conclusions: The proposed model appears to be effective in analyzing arousal and valence; specifically, it is expected that affective analysis using physiological signals based on LSTM will be possible without manual feature extraction. In a future study, the classification model will be adopted in mental healthcare management systems.

• 감성과학
• /
• 제26권1호
• /
• pp.65-78
• /
• 2023

항공기는 대표적인 인간-기계시스템이다. 인간의 조작과 기계의 작동 완료 시점 사이에는 기계가 작동되기 시작하는 시간과 기계에 힘이 전달되기 시작하여 완료되는 시간 등의 지연이 발생하며 항공기 조종은 시스템의 지연을 예측한 타이밍 작업을 통해 이루어진다. 시간지각은 타이밍 작업의 중요한 요소이며, 높은 각성작용과 관련된 불안에 영향을 받는 것으로 알려져 있다. 본 연구는 가상현실 환경에서 현직 조종사를 대상으로 기상, 비행 및 시간 조건이 조종사에게 발생하는 불안과 시간지각에 미치는 영향을 검증하였다. 기상조건은 시계비행 기상 상황과 악기상 상황으로 구분하였고 비행 및 시간 조건을 달리하여 실험 1, 2를 실시하였다. 실험 1은 비교적 운동량의 변화가 적고 지연이 적은 제자리비행과 수평비행 상황에서 조종간에 추가된 버튼을 사용하여 시간지각을 측정하였다. 실험 2는 운동량의 변화가 많고 지연이 많이 발생하는 이륙상황에서 조종간만을 사용하게 하여 자연스럽게 헬리콥터를 이륙시키는 과정에서 시간지각을 측정하였다. 실험결과 악기상 상황에서 불안과 심박수가 증가하는 것으로 나타났으며, 특히 실험 1, 2의 모든 비행조건 중 불안이 증가한 상황에서 시간을 과대 추정하는 것으로 나타났다. 이 결과는 불안의 영향으로 시간을 과대 추정하여 타이밍 작업을 실패할 수 있으며, 이로 인해 조종에 어려움을 겪고 사고로 연결될 가능성이 있음을 시사한다.

• 감성과학
• /
• 제4권1호
• /
• pp.53-60
• /
• 2001

As a part of HMS(Human-Machine System), the car is very important thing in common life. It is also a significant part to study on the controllers of car that is intentively related with all sensibilities during driving. There are lots of controllers on seating buck of the car. However, there are few study on the sensibility analysis of them. Most of all, the foot controller could be easily overlooked because it could be invisible. This study was based on relationship that the controllers fitted to the driving posture in the drivers' sensibility difference of two transmission modes, automatic and manual transmission. The results show the driver's preference driving posture and sensibility in two kinds of transmission cars. Consequently, it should be designed the seating buck for two different types respectively to be taken comfort driving posture and improve the safety for drivers. Also, it could reduce the fatigue and discomfort in the task of driving. The design of the controllers strongly effects on the drivers' response time. hereby this study was accessed to the sensibility of Korean with analyzing the relationship, quantitative data, and sensibility difference between two kinds of transmission cars.

• 한국감성과학회:학술대회논문집
• /
• 한국감성과학회 2008년도 추계학술대회
• /
• pp.90-93
• /
• 2008

In natural language, it is common that repetitive constituents in an expression are to be left out and it is necessary to figure out the constituents omitted at analyzing the meaning of the sentence. This paper is on recognition of boundaries of parallel noun phrases by figuring out constituents omitted. Recognition of parallel noun phrases can greatly reduce complexity at the phase of sentence parsing. Moreover, in natural language information retrieval, recognition of noun with modifiers can play an important role in making indexes. We propose an unsupervised probabilistic model that identifies parallel cores as well as boundaries of parallel noun phrases conjoined by a conjunctive particle. It is based on the idea of swapping constituents, utilizing symmetry (two or more identical constituents are repeated) and reversibility (the order of constituents is changeable) in parallel structure. Semantic features of the modifiers around parallel noun phrase, are also used the probabilistic swapping model. The model is language-independent and in this paper presented on parallel noun phrases in Korean language. Experiment shows that our probabilistic model outperforms symmetry-based model and supervised machine learning based approaches.

• 한국콘텐츠학회논문지
• /
• 제10권12호
• /
• pp.51-58
• /
• 2010

인스턴트 메신저 기반 통신에서 사용자의 감정을 자동으로 인식하고 이를 개인화된 3D 캐릭터 애니메이션으로 표현한다면 기기를 통한 통신에 더 많은 감성을 부여할 수 있고 궁극적으로 의사소통의 효과를 제고할 수 있다. 본 논문은 IPTV (Internet Protocol Television) 환경에서 자동화된 감정 인식 및 표현을 위해 개발된 감성 메신저 시스템에 대해 기술한다. 효율적인 사용자 감정 전달을 위해 텍스트 기반 감정 추측, 3D 렌더링 및 동영상 재생 방식을 동시 지원하는 캐릭터 애니메이션, 스마트폰을 통한 메시지 입력 등을 제안한다. 개발된 감성 메신저의 효과와 성능은 시연 및 실험을 통해 검증하였다.

• 전자공학회논문지
• /
• 제50권5호
• /
• pp.137-143
• /
• 2013

최근들어 기계중심의 기술에서 점차 인간 중심의 기술로 변화되어가려는 시도가 많이 이루어지고 있다. 지능 시스템 연구에 있어서도 과거의 단순 학습과 추론 방식에서 지금은 보다 인간과 흡사한 처리, 즉 인간다움을 묘사하는 기능을 구현하려는 방향으로 나아가고 있다. 특히 뇌공학적인 연구가 활발해 짐에 따라 두뇌기능을 공학적으로 응용하려는 연구가 많아지고 있다. 본 논문에서는 이러한 '관점' 이라는 가치관적 상위 요소를 반영할 수 있는 Super Value라고 하는 개념을 정의하고 이에 따라 유연한 추론을 할 수 있는 KEB(Knowledge-Emotion Binding)시스템을 제안하였다. Main Level과 Super Level의 계층적 구조로 추론 과정의 유연성을 부여하였으며 추론 메커니즘에 의하여 KEB 스레드가 추출이 되도록 설계하였다.

• 제어로봇시스템학회:학술대회논문집
• /
• 제어로봇시스템학회 2004년도 ICCAS
• /
• pp.1121-1125
• /
• 2004

The RT(Robot Technology) has been developed as the next generation of a future technology. According to the 2002 technical report from Mitsubishi R&D center, IT(Information Technology) and RT(Robotic Technology) fusion system will grow five times larger than the current IT market at the year 2015. Moreover, a recent IEEE report predicts that most people will have a robot in the next ten years. RCP(Robotic Cellular Phone), CP(Cellular Phone) having personal robot services, will be an intermediate hi-tech personal machine between one CP a person and one robot a person generations. RCP infra consists of $RCP^{Mobility}$, $RCP^{Interaction}$, $RCP^{Integration}$ technologies. For $RCP^{Mobility}$, human-friendly motion automation and personal service with walking and arming ability are developed. $RCP^{Interaction}$ ability is achieved by modeling an emotion-generating engine and $RCP^{Integration}$ that recognizes environmental and self conditions is developed. By joining intelligent algorithms and CP communication network with the three base modules, a RCP system is constructed. Especially, the RCP interaction system is really focused in this paper. The $RCP^{interaction}$(Robotic Cellular Phone for Interaction) is to be developed as an emotional model CP as shown in figure 1. $RCP^{interaction}$ refers to the sensitivity expression and the link technology of communication of the CP. It is interface technology between human and CP through various emotional models. The interactive emotion functions are designed through differing patterns of vibrator beat frequencies and a feeling system created by a smell injection switching control. As the music influences a person, one can feel a variety of emotion from the vibrator's beats, by converting musical chord frequencies into vibrator beat frequencies. So, this paper presents the definition, the basic theory and experiment results of the RCP interaction system. We confirm a good performance of the RCP interaction system through the experiment results.

• 한국융합학회논문지
• /
• 제8권8호
• /
• pp.83-88
• /
• 2017

최근 웨어러블 디바이스를 통한 다양한 개인 정보를 수집하고 이를 활용하는 분야가 활성화되고 있다. 본 논문에서는 스마트폰과 함께 일상 생활에서 착용하여 사용이 용이한 웨어러블 디바이스인 스마트워치를 통하여 심박 정보를 수집하고, 이를 위치 정보와 결합한 분석을 토대로 해당 위치에서의 감정 맞춤형 장소 추천이 가능한 어플리케이션을 개발한다. 이는 감정 추론 결과에 위치 정보를 추가함으로써 개인화서비스 제공 분야의 활용도를 높일 수 있으며, 부가적인 장치가 필요 없이 단지 스마트폰의 어플리케이션과 스마트워치의 사용으로 정보 수집과 분석이 이루어지므로 다양한 맞춤형 서비스 제공에 용이하게 활용될 수 있다.

• 디자인학연구
• /
• 제18권2호
• /
• pp.211-218
• /
• 2005

디지털정보기기의 등장은 정보의 대량생성과 대량소비라는 사회 혁명적 요소와 더불어, '기능을 위한 종속관계의 형태소멸' '유기능 무형태(宥機能 無形態)' 라는, 디자인 분야의 새로운 패러다임 형성의 원인이 되고 있다. 이러한 관점에서의 디자인 행위는 그 관심이 시각적 대상(對象)에서 벗어나 인간과 기기(器機)사이의 '관계'에 집중되고 있으며, 그 결과 디자인의 감성적 요소가 접목된 감성인터페이스라는 새로운 분야가 형성되었다. 본 논문의 목적은 멀티미디어 데이터의 검색에 있어서, 이러한 감성인터페이스를 활용할 수 있는 방안을 제시하는 것이다. 효과음과 걸음걸이(step)이를 연구대상으로 하여, 실험에서 수집된 감성어 사이의 유사성을 수량적으로 계측-분석한 후 시각화하는 것을 주된 연구방법으로 취하였다. 감성연구에 있어서 개인적인 견해 및 청각정보와 걸음걸이의 특징, 사례연구 등을 이론적 배경으로 제시하였고, 음에 관한 실험내용은 본인의 선행연구내용을 인용하였다. 걸음걸이에 대해서는, 자극에 대한 감성반응치를 수량화이론 1류를 이용한 회귀식으로 추출함으로써 걸음걸이의 물리적 요소와 감성반응 사이의 관계를 정량적으로 정리하고자 했다. 연구결과를 응용한 프로토타입의 제안은 검색환경과 사용성 평가에 대한 구체적 연구를 진행 한 후, 이어지는 연구에서 제안 할 예정이다.

• 대한인간공학회지
• /
• 제31권4호
• /
• pp.601-607
• /
• 2012

Objective: The aim of this study is to classify between intentional and natural blinks in vision based eye tracking system. Through implementing the classification method, we expect that the great eye tracking method will be designed which will perform well both navigation and selection interactions. Background: Currently, eye tracking is widely used in order to increase immersion and interest of user by supporting natural user interface. Even though conventional eye tracking system is well focused on navigation interaction by tracking pupil movement, there is no breakthrough selection interaction method. Method: To determine classification threshold between intentional and natural blinks, we performed experiment by capturing eye images including intentional and natural blinks from 12 subjects. By analyzing successive eye images, two features such as eye closed duration and pupil size variation after eye open were collected. Then, the classification threshold was determined by performing SVM(Support Vector Machine) training. Results: Experimental results showed that the average detection accuracy of intentional blinks was 97.4% in wearable eye tracking system environments. Also, the detecting accuracy in non-wearable camera environment was 92.9% on the basis of the above used SVM classifier. Conclusion: By combining two features using SVM, we could implement the accurate selection interaction method in vision based eye tracking system. Application: The results of this research might help to improve efficiency and usability of vision based eye tracking method by supporting reliable selection interaction scheme.