• 제목/요약/키워드: eye tracking technology

검색결과 96건 처리시간 0.023초

HMD(Head Mounted Display)에서 시선 추적을 통한 3차원 게임 조작 방법 연구 (A Study on Manipulating Method of 3D Game in HMD Environment by using Eye Tracking)

  • 박강령;이의철
    • 대한전자공학회논문지SP
    • /
    • 제45권2호
    • /
    • pp.49-64
    • /
    • 2008
  • 최근에 휴먼 컴퓨터 인터페이스 분야에서 사용자의 시선 위치를 파악하여 더욱 편리한 입력장치를 구축하고자 하는 연구가 많이 진행되고 있다. 하지만 복잡한 하드웨어 구성으로 제품의 가격이 매우 비싸고, 까다로운 사용자 캘리브레이션 과정으로 인해 시스템의 사용에 어려움을 겪는다. 본 논문에서는 HMD(Head Mounted Display)에 USB 카메라와 적외선을 반사시키는 hot-mirror와 적외선 조명을 이용한 시선 추적 모듈을 부착하고, 이를 통해 획득한 눈 영상의 2차원적인 분석과 간단한 사용자 캘리브레이션 과정을 통해 시선 위치를 파악하는 방법을 제안한다. HMD는 사용자의 얼굴 움직임과 함께 움직이므로, 얼굴움직임에 영향을 받지 않는 시선 추적 시스템을 구현할 수 있다. 또한, 시선 추적 시스템을 3차원 1인칭 슈팅 게임에 적응하여, 캐릭터의 시선 방향을 조정하고, 적 캐릭터를 조준하여 사격이 가능하도록 하여, 게임의 몰입감과 흥미성을 높일 수 있게 하였다. 실험 결과, 한 대의 데스크톱 컴퓨터 환경에서 게임과 시선 추적 시스템이 실시간으로 동작 가능했으며, 약 $0.88^{\circ}$의 시선 위치 추출 오차를 보였다. 또한 3차원 1인칭 슈팅게임에서 일반 마우스의 역할을 시선 추적 시스템이 문제없이 대신할 수 있음을 확인하였다.

Object Detection Based on Deep Learning Model for Two Stage Tracking with Pest Behavior Patterns in Soybean (Glycine max (L.) Merr.)

  • Yu-Hyeon Park;Junyong Song;Sang-Gyu Kim ;Tae-Hwan Jun
    • 한국작물학회:학술대회논문집
    • /
    • 한국작물학회 2022년도 추계학술대회
    • /
    • pp.89-89
    • /
    • 2022
  • Soybean (Glycine max (L.) Merr.) is a representative food resource. To preserve the integrity of soybean, it is necessary to protect soybean yield and seed quality from threats of various pests and diseases. Riptortus pedestris is a well-known insect pest that causes the greatest loss of soybean yield in South Korea. This pest not only directly reduces yields but also causes disorders and diseases in plant growth. Unfortunately, no resistant soybean resources have been reported. Therefore, it is necessary to identify the distribution and movement of Riptortus pedestris at an early stage to reduce the damage caused by insect pests. Conventionally, the human eye has performed the diagnosis of agronomic traits related to pest outbreaks. However, due to human vision's subjectivity and impermanence, it is time-consuming, requires the assistance of specialists, and is labor-intensive. Therefore, the responses and behavior patterns of Riptortus pedestris to the scent of mixture R were visualized with a 3D model through the perspective of artificial intelligence. The movement patterns of Riptortus pedestris was analyzed by using time-series image data. In addition, classification was performed through visual analysis based on a deep learning model. In the object tracking, implemented using the YOLO series model, the path of the movement of pests shows a negative reaction to a mixture Rina video scene. As a result of 3D modeling using the x, y, and z-axis of the tracked objects, 80% of the subjects showed behavioral patterns consistent with the treatment of mixture R. In addition, these studies are being conducted in the soybean field and it will be possible to preserve the yield of soybeans through the application of a pest control platform to the early stage of soybeans.

  • PDF

온라인마켓의 UX설계를 위한 사용자의 주시빈도 분석 (Analysis of the User's Visual Attention Frequency for UX Design of Online Markets)

  • 하종수;반재훈
    • 한국정보통신학회논문지
    • /
    • 제20권11호
    • /
    • pp.2079-2084
    • /
    • 2016
  • 최근 디자인 트렌드는 사용자 인터페이스 디자인에서 사용자 경험 디자인으로 바뀌는 추세로서 웹사이트의 인터페이스 설계 시 사용자가 원하고 필요로 하는 것을 디자인에 반영해야 한다. 본 연구에서는 웹사이트의 메인 화면 구성 시 사용자경험 중심의 디자인을 적용시키는 방법을 제시한다. 먼저 대표적인 온라인마켓을 선정하여 메인화면을 구성하는 정보요소를 분석한다. 그리고 사용자의 주시빈도를 측정하는 시선추적방법을 이용하여 메인화면과 와이어프레임을 비교하며 시간에 따른 주시빈도의 변화를 확인하고 이를 분석한다. 실험의 결과 온라인 마켓의 메인 화면 설계 시 중요한 정보를 이미지나 움직이는 이미지로 가운데에 배치시켜 이용자의 주시를 집중시키는 것이 효율적이다.

동공과 글린트의 특징점 관계를 이용한 시선 추적 시스템 (Gaze Tracking System Using Feature Points of Pupil and Glints Center)

  • 박진우;권용무;손광훈
    • 방송공학회논문지
    • /
    • 제11권1호
    • /
    • pp.80-90
    • /
    • 2006
  • 본 논문에서는 한 대의 카메라와 푸르킨예 영상을 이용한 간편한 2차원 시선 추적 시스템을 제안한다. 이 시스템은 사용자의 한쪽 눈 영상을 얻기 위해 적외선 필터가 장착된 카메라와, 사용자가 모니터 상에 바라보고 있는 응시 점을 알아내기 위해 각 막의 표면에 반사점을 만들기 위한 두 개의 적외선 광원이 사용되었다. 카메라나 적외선 광원, 사용자의 머리는 자유롭게 움직일 수 있다. 따라서 본 시스템은 여타 불편한 고정된 장치나 사용자의 머리 고정이 필요 없는 간단하고 유연성 있는 시스템이다. 본 시스템은 또한 간편하고 정확한 사용자 캘리브레이션 과정을 포함하고 있다. 시스템을 사용하기에 앞서, 각 사용자는 각 사용자는 시스템이 시선 추적 알고리즘 상의 개인 요소들을 초기화할 수 있도록 두 개의 점을 잠시 바라보기만 하면 된다. 제안된 시스템은 XGA $(1024{\sim}768)$ 해상도에서 10 fps 이상 실시간으로 동작된다. 3명의 피 실험자와 9개의 실험 물체로 진행된 실험 결과는 시스템이 평균 l도의 시선 추적 오차를 보여 주고 있다.

The Experimental Investigations of the Big Size Holographic Screen in the Autostereoscopic Displays

  • Son, J. Y.;Choi, Y. J.;Bahn, J. E.;Bobrinev, V.-I.
    • Journal of the Optical Society of Korea
    • /
    • 제5권2호
    • /
    • pp.55-59
    • /
    • 2001
  • Results of an experimental study of possible ways to extend the capabilities of a big size transmission type holographic screen are presented. Different approaches to the problem of making a big size screen have been considered and tested experimentally. Up to 60$\times$80 $\textrm{cm}^2$ screens have been recorded on a single photographic plate VRP-M. By attaching a mirror behind the screen, the reflection mode of operation has been obtained. In this arrangement some additional peculiarities appear in the screen, which can be used to extend the screen capabilities. The first possibility is to increase the screen size by mosaicking the subscreens in the reflection mode of operation. Screens of 120$\times$80 $\textrm{cm}^2$ and 180$\times$40 $\textrm{cm}^2$ have been obtained by proper alignment of 60$\times$40 $\textrm{cm}^2$ subscreens. The second possibility is to move the viewing Bone by rotation of the screen together with the mirror and thereby realize by the eye-tracking capability. Methods of increasing vertical size of the viewing zone have been considered. Along with the multi-exposure method, which was considered in previous papers, addition of the vertical diffuser with the optimized scattering angle has been tested experimentally. The vertical size of the viewing zone has been increased by up to 10-15 cm. Another method consists of usage of a diffraction grating with vertical dispersion to solve the same problem.

응시점 추정 기반 관심 영역 내 객체 탐지 (Object detection within the region of interest based on gaze estimation)

  • 한석호;장훈석
    • 한국정보전자통신기술학회논문지
    • /
    • 제16권3호
    • /
    • pp.117-122
    • /
    • 2023
  • 사용자가 현재 응시하고 있는 위치를 자동으로 인식하는 응시점 추정과 추정된 응시점을 기반으로 객체를 탐지하는 기술을 활용한다면 사람의 시각적 행동을 파악하는데 더 정확하고 효율적인 방안이 될 수 있을 것이다. 본 논문에서는 응시점을 중심으로 관심 영역을 생성하고 해당 영역 내에서 객체를 탐지하는 방안을 제시한다. 자세하게는, 삼차원 응시점을 추정한 후에 추정된 응시점을 기반으로 관심 영역을 생성하여 관심 영역 내에서만 객체 탐지가 이루어지도록 설계한다. 실험을 통해 일반적인 객체 탐지와 제안된 관심 영역 내 객체 탐지 성능을 비교한 결과, 프레임당 처리 시간은 각각 1.4ms, 1.1ms로 관심 영역 내 객체 탐지가 처리 속도 면에서 더 우수한 것을 확인할 수 있었다.

컴퓨터 인터페이스를 위한 실시간 시선 식별 (Real Time Gaze Discrimination for Computer Interface)

  • 황선기;김문환
    • 한국정보전자통신기술학회논문지
    • /
    • 제3권1호
    • /
    • pp.38-46
    • /
    • 2010
  • 본 논문에서는 실시간 시선 식별을 위한 능동적 적외선 조명을 기반으로 한 컴퓨터 비전 시스템을 제안 하고자 한다. 현존하는 대다수의 시선 식별 방법은 고정된 얼굴에서만 원활하게 동작하고 개개인에 대한 교정 절차를 필요로 한다. 그러므로 본 논문에서는 교정 작업 없이 얼굴 움직임이 있는 경우에도 견실하고 정확하게 동작하는 시선 식별 시스템을 제안하고 있다. 제안된 시스템은 추출된 변수로부터 시선을 스크린 좌표로 매핑하기 위해 GRNN을 이용하였다. 동공을 추적하여 GRNN을 사용함으로서, 시선 매핑에 분석적 기능이나 얼굴 움직임에 대한 계산이 필요 없을 뿐 아니라 다른 개개인에 대하여 학습과정에서 매핑 기능을 일반화 할 수 있었다. 시선 예측 정확도를 개선하고자 계층적 식별을 제안함으로써 오분류를 줄일 수 있었고, 공간 시선 해상도는 스크린에서 1m 정도 떨어진 거리에서 수평으로 10cm, 수직으로 약 13cm, 즉 수평으로 8도 수직으로 5도 이었다. 실험 결과, 재식별 하였을 경우 1차 시선 식별시 84%보다 약 9% 정도 정확성이 향상되어 93%를 나타냄으로써 제안된 시스템의 유효성을 증명하였다.

  • PDF

플렉서블 디스플레이 기반의 융합형 디자인개발에 관한 연구 -Head-Up Display 가상시나리오 구현을 중심으로- (A Study on fusion design development direction of the Flexible display base)

  • 김회광
    • 디지털융복합연구
    • /
    • 제14권1호
    • /
    • pp.399-405
    • /
    • 2016
  • 헤드업 디스플레이(Head-Up Display)는 차량내 정보 제공 디스플레이로서 운전자에게 운행시 필요한 정보들을 차량 윈도우를 통해 제공하여 시야를 확보하는 동시에 주행에 필요한 정보를 습득할 수 있는 장치이다. 초기 헤드업 디스플레이는 수입차량 위주로 장착되었지만 점차 국산 중대형차량에도 장착되어 운전자에게 운행정보에 대한 편의성을 확보한 운전이 가능하도록 제공되어 지고 있다. 현재 출시되는 자동차들의 각 브랜드별 헤드업 디스플레이는 정보표시요소의 일관성 및 인터페이스가 한정적으로 표현되고 있으며 기술형식으로는 도트 반사형 방식으로 적용되어 GUI의 적용방식의 한계점을 드러내고 있다. 이에 본 연구에서는 사례조사 및 분석을 통해 주행 중에 필요한 실시간 정보표시요소들을 도출하고, POI(Point of Interest) 관심정보의 우선순위를 파악하여 분석된 결과를 바탕으로 최근 개발되어지는 투명디스플레이 기술을 통하여 사용자에게 새로운 GUI가이드라인을 제공을 연구 목적으로 둔다.

'문제해결과 무관한 정보처리 과정'(IRP)이 의사결정자의 개방성과 비즈니스 문제 해결 창의성 관계에 대해서 갖는 조절효과에 관한 실증연구 (Moderating Effects of 'Irrelevance Processing' (IRP) on the Relationship between Decision-maker's Openness and Business Problem Solving Creativity)

  • 원종윤;이건창
    • 디지털융복합연구
    • /
    • 제18권10호
    • /
    • pp.137-146
    • /
    • 2020
  • 미래의 불확실성이 높을수록 회사의 경영자의 고민은 커지는데, 이러한 불확실성을 해소할 수 있는 핵심 열쇠로 창의성을 꼽을 수 있다. 본 연구는 비즈니스 문제 해결 창의성(Business Problem Solving Creativity, BPSC)과 기업 의사결정자의 개방적 성향 간의 관계에 대해 확인하고, 주의력이 BPSC와 개방적 성향 간의 조절 효과를 갖는지 아이트래킹 기법으로 확인한다. 주의력 측정을 위해 '문제 해결과 무관한 정보처리 과정'(IRP)을 개발하였다. 연구결과, 의사결정자의 개방적 성향과 BPSC는 양의 상관관계가 있음을 입증하였으며, 기존의 창의성 연구와는 달리 주의력은 개방적 성향과 BPSC 간의 부의 조절 효과가 있음을 입증하였다. 본 연구는 BPSC는 빠르게 변화하는 경영 환경에서 문제를 해결하는 의사결정자의 창의적 능력이나 성과를 측정하는 행동과학 연구로 실무적 가치가 높다. 또한, 기업 의사결정자의 성향과 BPSC와의 상관성을 입증하여, BPSC 발현의 심리적 메커니즘을 규명함으로써 경영학 창의성 연구에 기여하였다.

Opportunities and prospects for personalizing the user interface of the educational platform in accordance with the personality psychotypes

  • Chemerys, Hanna Yu.;Ponomarenko, Olga V.
    • Advances in Computational Design
    • /
    • 제7권2호
    • /
    • pp.139-151
    • /
    • 2022
  • The article is devoted to the actual problem of studying the possibilities of implementing personalization of the user interface in accordance with the personality psychotypes. The psychological aspect of user interface design tools is studied and the correspondence of their application to the manifestations of personality psychotypes is established. The results of the distribu-tion of attention of users of these categories on the course page of the educational platform are presented and the distribution of attention in accordance with the focus on educational material is analyzed. Individual features and personal preferences regarding the used design tools are described, namely the use of accent colors in interface design, the application of the prin-ciples of typographic hierarchy, and so on. In accordance with this, the prospects for implementing personalization of the user interface of the educational platform are described. The results of the study allow us to state the relevance of developing and applying personalization of the user interface of an educational platform to improve learning outcomes in accordance with the psychological impact of individual design tools, and taking into account certain features of user categories. The research is devoted to the study of user attention concentration using heatmaps, in particular based on eyetreking technology, we will investigate the distribution of user attention on the course page of an educational platform Ta redistribution of atten-tion in accordance with certain categories of personality psychotypes. The results of the study can be used to rearrange the LMS Moodle interface according to the user's psychotype to achieve the best concentration on the training material. The obtained data are the basis for developing effective user interfaces for personalizing educational platforms to improve the quality of the education.