• 제목/요약/키워드: eye-position tracking

검색결과 52건 처리시간 0.022초

Detection of Face Direction by Using Inter-Frame Difference

  • Jang, Bongseog;Bae, Sang-Hyun
    • 통합자연과학논문집
    • /
    • 제9권2호
    • /
    • pp.155-160
    • /
    • 2016
  • Applying image processing techniques to education, the face of the learner is photographed, and expression and movement are detected from video, and the system which estimates degree of concentration of the learner is developed. For one learner, the measuring system is designed in terms of estimating a degree of concentration from direction of line of learner's sight and condition of the eye. In case of multiple learners, it must need to measure each concentration level of all learners in the classroom. But it is inefficient because one camera per each learner is required. In this paper, position in the face region is estimated from video which photographs the learner in the class by the difference between frames within the motion direction. And the system which detects the face direction by the face part detection by template matching is proposed. From the result of the difference between frames in the first image of the video, frontal face detection by Viola-Jones method is performed. Also the direction of the motion which arose in the face region is estimated with the migration length and the face region is tracked. Then the face parts are detected to tracking. Finally, the direction of the face is estimated from the result of face tracking and face parts detection.

안구이동추적을 통해 살펴본 관계절의 통사처리 과정 (Processing of syntactic dependency in Korean relative clauses: Evidence from an eye-tracking study)

  • 이미선;용남석
    • 인지과학
    • /
    • 제20권4호
    • /
    • pp.507-533
    • /
    • 2009
  • 관계절의 공백과 채움어의 의존관계(gap-filler dependencies)가 어떻게 해결되는지에 대한 가설은 '채움어촉발 처리전략(filler-driven parsing strategy)'과 '공백촉발 처리전략(gap-driven parsing strategy)'으로 요약할 수 있다. 두 가설의 언어보편적 타당성을 알아보기 위해, 본 연구는 안구이동추적법(eyetracking)을 이용하여, 한국어 화자들이 후핵언어(head-final language)인 한국어의 주격관계절과 여격관계절을 실시간으로 처리하는 과정을 살펴보았다. 그 결과, 피험자들이 관계절 내 공백의 위치에서 채움어에 상응하는 그림을 거의 응시하지 않았으나, 관계사와 결합한 관계절동사를 들은 시점부터는 채움어 그림을 응시하는 비율이 큰 폭으로 증가하기 시작하여 머리어를 들은 시점에서 가장 많이, 가장 오래 채움어 그림을 응시하였다. 이 결과는 공백이 관계절의 처리를 촉발하는 것이 아니라, 관계사와 결합한 관계절 동사에서 관계절의 통사처리가 시작되어 채움어가 인지된 시점에서 완성됨을 보여주는 것이다. 또한 주격관계절과 여격관계절 간의 상이한 안구이동 양상은 관계절 내의 논항과 결합한 격조사의 통사정보에 기인하는 것으로 보여서, 한국어의 관계절은 채움어촉발 처리전략을 따르기는 하지만 영어와 같은 선핵언어와는 다른 처리전략이 사용됨을 알 수 있다.

  • PDF

선박항법기기 화면의 배치에 관한 연구 (A Study of Contents Arrangement in Conning Display)

  • 윤훈용;김경훈
    • 산업경영시스템학회지
    • /
    • 제33권2호
    • /
    • pp.154-161
    • /
    • 2010
  • The conning display which is located in the ship bridge shows the various important information such as ship position, ship speed, track data, rate of turn, thruster rpm so on, and is one of the IBSs(Integrated Bridge Systems). In this study, the survey was conducted for ten officers to find the importance and using frequency of the information which were displayed in the conning display. The results showed that the information of drift speed, ship speed, wind direction and wind force, rate of turn, sea water depth, ship position, heading, thrust rpm, alarm, rudder command and angle got high scores and it meant that these information were very important and high frequency of use during the navigation. The optimized contents arrangement in conning display was suggested based on importance and using frequency of information. The experiment using eye-tracking system was conducted to compare the performance time and error rate of nine different scenarios for suggested arrangement display and three other existing displays. The results showed that the suggested arrangement was the best in performance time and error rate. The scenario concerning the direction and speed of wind showed faster performance time and lower error rate than other scenarios. The movement of subject's eye tended to search from the center and to avoid the comer, called 'the comer effect.' It is expected that the results of this study could help for the bridge staff to grasp the sailing information easily and to cope with the given situations promptly.

퍼지신경망을 이용한 로보트의 비쥬얼서보제어 (Visual servo control of robots using fuzzy-neural-network)

  • 서은택;정진현
    • 제어로봇시스템학회:학술대회논문집
    • /
    • 제어로봇시스템학회 1994년도 Proceedings of the Korea Automatic Control Conference, 9th (KACC) ; Taejeon, Korea; 17-20 Oct. 1994
    • /
    • pp.566-571
    • /
    • 1994
  • This paper presents in image-based visual servo control scheme for tracking a workpiece with a hand-eye coordinated robotic system using the fuzzy-neural-network. The goal is to control the relative position and orientation between the end-effector and a moving workpiece using a single camera mounted on the end-effector of robot manipulator. We developed a fuzzy-neural-network that consists of a network-model fuzzy system and supervised learning rules. Fuzzy-neural-network is applied to approximate the nonlinear mapping which transforms the features and theire change into the desired camera motion. In addition a control strategy for real-time relative motion control based on this approximation is presented. Computer simulation results are illustrated to show the effectiveness of the fuzzy-neural-network method for visual servoing of robot manipulator.

  • PDF

핸드-아이 보정과 능동 스테레오 비젼의 일반적 해석 (The General Analysis of an Active Stereo Vision with Hand-Eye Calibration)

  • 김진대;이재원;신찬배
    • 한국정밀공학회지
    • /
    • 제21권5호
    • /
    • pp.83-83
    • /
    • 2004
  • The analysis of relative pose(position and rotation) between stereo cameras is very important to determine the solution that provides three-dimensional information for an arbitrary moving target with respect to robot-end. In the space of free camera-model, the rotational parameters act on non-linear factors acquiring a kinematical solution. In this paper the general solution of active stereo that gives a three-dimensional pose of moving object is presented. The focus is to achieve a derivation of linear equation between a robot′s end and active stereo cameras. The equation is consistently derived from the vector of quaternion space. The calibration of cameras is also derived in this space. Computer simulation and the results of error-sensitivity demonstrate the successful operation of the solution. The suggested solution can also be applied to the more complex real time tracking and quite general and are applicable in various stereo fields.

핸드-아이 보정과 능동 스테레오 비젼의 일반적 해석 (The General Analysis of an Active Stereo Vision with Hand-Eye Calibration)

  • 김진대;이재원;신찬배
    • 한국정밀공학회지
    • /
    • 제21권5호
    • /
    • pp.89-90
    • /
    • 2004
  • The analysis of relative pose(position and rotation) between stereo cameras is very important to determine the solution that provides three-dimensional information for an arbitrary moving target with respect to robot-end. In the space of free camera-model, the rotational parameters act on non-linear factors acquiring a kinematical solution. In this paper the general solution of active stereo that gives a three-dimensional pose of moving object is presented. The focus is to achieve a derivation of linear equation between a robot's end and active stereo cameras. The equation is consistently derived from the vector of quaternion space. The calibration of cameras is also derived in this space. Computer simulation and the results of error-sensitivity demonstrate the successful operation of the solution. The suggested solution can also be applied to the more complex real time tracking and quite general and are applicable in various stereo fields.

Convolutional neural network를 이용한 눈동자 모션인식 시스템 구현 (Implementation to eye motion tracking system using convolutional neural network)

  • 이승준;허승원;이희빈;유윤섭
    • 한국정보통신학회:학술대회논문집
    • /
    • 한국정보통신학회 2018년도 춘계학술대회
    • /
    • pp.703-704
    • /
    • 2018
  • 본 논문은 몸을 움직이지 못하는 루게릭병 환자들을 위해 눈동자를 추적하여 의사소통 시스템에 필요한 눈동자의 위치를 파악해주는 인공신경망 설계에 대해 소개한다. Tensorflow를 이용해 신경망 생성 및 학습하고 학습된 신경망을 통하여 눈동자의 위치를 파악한다. 본 논문에서는 컨볼루션계층 2단계와 완전연결계층 2단계로 구성된 Convolution Neural Network(CNN)을 사용해서 구현했다.

  • PDF

아이트래커를 병행한 감각통합치료가 발달장애아동의 감각처리 및 시지각에 미치는 영향 (Effect of Sensory Integration Therapy Combined with Eye Tracker on Sensory Processing and Visual Perception of Children with Developmental Disabilities)

  • 권소현;안시내
    • 대한감각통합치료학회지
    • /
    • 제21권3호
    • /
    • pp.39-53
    • /
    • 2023
  • 목적 : 본 연구는 발달장애아동에게 아이트래커를 병행한 감각통합치료가 감각처리 및 시지각에 미치는 효과를 알아보고자 하였다. 연구방법 : 본 연구의 설계는 단일대상연구의 대상자간 중다기초선 설계이며, 중재는 아이트래커를 병행한 감각통합치료를 적용하였다. 기초선 기간과 중재 기간의 매 회기 평가로 시각-운동 속도와 단속적 눈의 움직임을 평가하였으며, 사전·사후 평가로 감각프로파일, 한국판시지각발달검사, 선잇기검사를 실시하였다. 매 회기 평가와 사전·사후 평가는 시각적 분석 및 경향선 분석을 통해 중재의 효과를 연구하였다. 결과 : 회기별 평가 결과, 시각-운동속도와 단속적 눈의 움직임에서 모든 아동의 경향선 기울기가 기초선기간보다 중재기간에 급격하게 증가하였다. 사전·사후 평가결과, 감각처리에서는 움직임, 몸위치, 시각의 감각처리가 또래보다 많음에서 또래와 유사 수준으로 변화하였으며, 시지각에서는 모든 아동의 시각통합능력이 증가하였다. 또한, 아동의 시각추적 및 시각-운동 능력의 향상을 확인하기 위해 실시한 선잇기검사 결과, 모든 아동이 사전보다 사후에 수행시간이 감소하였다. 결론 : 발달장애아동의 아이트래커를 병행한 감각통합치료는 감각처리 및 시지각에 긍정적인 영향을 미쳤으며, 최근 기술의 향상과 스마트기기의 보급과 맞추어 아동의 흥미와 동기를 부여할 수 있어 임상적으로 중요한 역할을 할 것으로 사료된다.

적응적 패럴랙스 베리어를 위한 사용자 위치 추적 방법 (Estimating Location in Real-world of a Observer for Adaptive Parallax Barrier)

  • 강석훈
    • 한국정보통신학회논문지
    • /
    • 제23권12호
    • /
    • pp.1492-1499
    • /
    • 2019
  • 이 논문에서는 적응적 패럴랙스 베리어 방식에서, 시청영역을 제어할 수 있도록 사용자의 위치를 추적하는 방법을 제안한다. 얼굴자세에 강건한 양안거리 측정을 위해, 형태모델과 랜드마크 기반인 CLM으로 자세를 추정한다. 카메라와의 상관관계로, 거리와 수평위치를 거리로 변환한다. 사용자의 눈의 위치에 따라 적응적 패럴랙스 베리어의 화소간격을 조정하고, 베리어를 이동해 시청영역을 조정한다. 이 논문에서는 60cm부터 490cm의 범위에서 사용자를 추적하는 방법을 제안하고, 카메라 영상의 해상도에 따른 에러, 측정 가능 범위, fps를 측정하였다. 그 결과, 사용자를 평균 3.1642cm의 절대오차 범위내로 측정 가능하였으며, 영상의 해상도에 따라 320×240에서 약 278cm, 640×480에서 약 488cm까지, 그리고 1280×960에서 약 493cm까지를 측정할 수 있었다.

Mega Irises: 프로젝터 기반의 영상 시스템상에서 이동하는 체험자를 위한 화소 단위의 스크린 투사 밝기 보정 (Mega Irises: Per-Pixel Projection Illumination Compensation for the moving participant in projector-based visual system)

  • 진종욱;원광연
    • 한국컴퓨터그래픽스학회논문지
    • /
    • 제17권4호
    • /
    • pp.31-40
    • /
    • 2011
  • 프로젝터 기반의 가시화 시스템은 가상현실 흑은 체험형 응용에서 널리 사용된다. 그러나 스크린 재질과 반사 성질에 따라 스크린 상의 투사 밝기의 불균일성이 때때로 체험자의 체험을 방해할 수 있다. 이러한 현상은 체험자의 위치를 추적하는 시스템인 CAVE 혹은 운동판 체험 시스템의 체험자가 시스템 안에서 계속적으로 움직일 경우에는 특별히 문제가 될 수 있다. 스크린 화상 상에 밝기의 불균일성을 만드는 이유 중에 하나는 참여자의 눈의 위치로의 프로젝터와 스크린의 스펙큘라 반사이며, 이에 대한 분석은 높은 계산 복잡도가 요구된다. 그래픽 프로세서의 프로그래머블 쉐이더를 이용하여 스펙큘라 라이팅 요소를 계산하는 것과 마찬가지로, 본 연구에서는 밝기의 불균일성을 줄이기 위하여 주어진 스크린 환경 3D 모델을 가지고 수행 시간에 모든 화소의 밝기를 조정하였다. 이러한 목적을 위하여 개개의 스크린 응용에 따른 각도 기반의 밝기 보정 함수를 고안하였으며, GPU 상에서 수행과 접근을 용이하도록 하였다. 두가지 기법이 구현되었는데, 각도 기반의 접근에서 프로덕트 기반의 접근으로 변환과 구간 선형 보간 근사 기법을 구현하였다.