• 제목/요약/키워드: gaze correction

검색결과 22건 처리시간 0.033초

시선 인식을 이용한 로봇 인터페이스 개발 (Robot Control Interface Using Gaze Recognition)

  • 박세현
    • 대한임베디드공학회논문지
    • /
    • 제7권1호
    • /
    • pp.33-39
    • /
    • 2012
  • In this paper, we propose robot control interface using gaze recognition which is not limited by head motion. Most of the existing gaze recognition methods are working well only if the head is fixed. Furthermore the methods require a correction process per each person. The interface in this paper uses a camera with built-in infrared filter and 2 LED light sources to see what direction the pupils turn to and can send command codes to control the system, thus it doesn't need any correction process per each person. The experimental results showed that the proposed interface can control the system exactly by recognizing user's gaze direction.

A Simple Eye Gaze Correction Scheme Using 3D Affine Transformation and Image In-painting Technique

  • Ko, Eunsang;Ho, Yo-Sung
    • Journal of Multimedia Information System
    • /
    • 제5권2호
    • /
    • pp.83-86
    • /
    • 2018
  • Owing to high speed internet technologies, video conferencing systems are exploited in our home as well as work places using a laptop or a webcam. Although eye contact in the video conferencing system is significant, most systems do not support good eye contact due to improper locations of cameras. Several ideas have been proposed to solve the eye contact problem; however, some of them require complicated hardware configurations and expensive customized hardwares. In this paper, we propose a simple eye gaze correction method using the three-dimensional (3D) affine transformation. We also apply an image in-painting method to fill empty holes that are caused by round-off errors from the coordinate transformation. From experiments, we obtained visually improved results.

원격 영상회의 시스템을 위한 깊이 영상 후처리 기술 (Depth Video Post-processing for Immersive Teleconference)

  • 이상범;양승준;호요성
    • 한국통신학회논문지
    • /
    • 제37권6A호
    • /
    • pp.497-502
    • /
    • 2012
  • 본 논문에서는 IPTV 환경의 원격 영상회의에서 화자 간의 자연스러운 시선 맞춤(eye contact)을 위한 깊이영상의 후처리 필터링 기술을 제안한다. 제안하는 방법은 깊이탐색 기술과 영상합성 기술을 사용해서 화자의 정면시점 영상을 합성한다. 하지만, 깊이영상을 탐색하는 과정에서 객체의 경계 불일치, 시간적 상관도 저하 등의 문제가 발생하기 때문에 이를 해결하기 위해 시간축으로 확장된 결합형 양방향 필터(joint bilateral filter)를 제안한다. 실험 결과를 통해, 제안하는 깊이영상의 후처리 필터링 기술이 정면시점 합성영상의 화질을 향상시켰고, 원격의 화자와 시선 맞춤이 기능한 것을 확인했다.

Eye-Gaze Interaction On Computer Screen Evaluation

  • Ponglangka, Wirot;Sutakcom, Udom
    • 제어로봇시스템학회:학술대회논문집
    • /
    • 제어로봇시스템학회 2005년도 ICCAS
    • /
    • pp.84-88
    • /
    • 2005
  • Eye gaze positions evaluation on computer screen uses the human eye as an input device for computer systems is that it gives low resolution. We proposes a method to determine the eye gaze positions on the screen by using two-eye displacements as the information for mapping, and the perspective projection is applied to map the displacements to a position on a computer screen. The experiments were performed on 20 persons and a 17-inch monitor is used with the screen resolution of 1024x768 pixels. Gaze detection error was 3.18 cm (RMS error), with screen is divided into 5x8 and 7x10 positions on a 17-inch monitor. The results showed 100% and 96% correction, respectively.

  • PDF

지능형 휠체어를 위한 시선 인식 인터페이스 개발 (Gaze Recognition Interface Development for Smart Wheelchair)

  • 박세현
    • 재활복지공학회논문지
    • /
    • 제5권1호
    • /
    • pp.103-110
    • /
    • 2011
  • 본 논문에서는 지능형 휠체어를 위한 시선 인식 인터페이스에 대해 제안한다. 시선 인식 인터페이스는 조이스틱을 움직이기 힘든 중증 장애인을 위해 시선 인식 및 추적을 이용하여 전동휠체어를 움직일 수 있게 하는 사용자 인터페이스이다. 지능형 휠체어는 시선인식 및 추적 모듈, 사용자 인터페이스, 장애물 회피 모듈, 모터 제어 모듈, 초음파 센서 모듈로 구성된다. 시선인식 및 추적 모듈은 적외선 카메라와 두개의 광원으로 사용자 눈의 각막 표면에 두 개의 반사점을 생성하고, 중심점을 구한 뒤, 동공의 중심점과 두 반사점의 중심을 이용하여 시선을 인식하고 추적 한다. 제안된 방법의 시선 인식 인터페이스는 실험을 통해 시선을 이용하여 지능형 휠체어에 명령을 하달하고 지능형 휠체어가 임의로 설치된 장애물을 감지하고 정확하게 장애물을 회피 할 수 있음을 보였다.

사용자 캘리브레이션이 필요 없는 시선 추적 모델 연구 (User-Calibration Free Gaze Tracking System Model)

  • 고은지;김명준
    • 한국정보통신학회논문지
    • /
    • 제18권5호
    • /
    • pp.1096-1102
    • /
    • 2014
  • 적외선 조명을 이용한 간접시선추적 시스템에서는 촬영된 이미지에서 동공에 반사된 조명의 위치에 대한 캘리브레이션이 필수적이다. 하지만 안구의 크기나 머리의 위치에 따라 달라질 수도 있는 변수가 캘리브레이션 과정에서 정의된 상수로 계산에 포함되어 있어 오차를 감소시키는데 한계가 있다. 본 논문은 적외선 조명을 사용하면서도, 사용자 캘리브레이션 과정을 생략할 수 있는 방법을 연구한다. 반사각에 의한 글린트(glint)위치 차이에 영향을 받지 않게 하면서, 시스템의 모델과 시선 계산은 단순하게 하여 실시간 연산이 가능하도록 하는 것이 목표이다.

실감형 화상 회의를 위해 깊이정보 혼합을 사용한 시선 맞춤 시스템 (Eye Contact System Using Depth Fusion for Immersive Videoconferencing)

  • 장우석;이미숙;호요성
    • 전자공학회논문지
    • /
    • 제52권7호
    • /
    • pp.93-99
    • /
    • 2015
  • 본 논문에서는 실감형 원격 영상회의를 위한 시스템을 제안한다. 원격 영상회의에서 카메라는 보통 디스플레이의 중앙이 아닌 측면에 설치가 된다. 이는 시선 불일치를 만들고, 사용자들의 몰입도를 떨어뜨린다. 따라서 실감형 영상회의에 있어서 시선 맞춤은 중요한 부분을 차지한다. 제안하는 방법은 스테레오 카메라와 깊이 카메라를 사용하여 시선 맞춤을 시도한다. 깊이 카메라는 비교적 적은 비용으로 효율적으로 깊이 정보를 생성할 수 있는 키넥트 카메라를 선택하였다. 하지만 키넥트 카메라는 비용적인 장점에도 불구하고 단독으로 사용하기에는 내제하는 단점이 많다. 따라서 스테레오 카메라를 더하여 각 깊이 센서 간의 단점을 보완하는 방법을 개발하였고, 이는 각 깊이 정보 간의 혼합 및 정제 과정을 통해서 실현된다. 시선 맞춤 영상 생성은 후처리를 통한 보완된 깊이 정보를 이용하여 3차원 워핑 기술을 이용하여 구현된다. 실험결과를 보면 제안한 시스템이 자연스러운 시선 맞춤 영상을 제공하는 것을 알 수 있다.

DNN을 이용한 응시 깊이 보정 (Correcting the gaze depth by using DNN)

  • 한석호;장훈석
    • 한국정보전자통신기술학회논문지
    • /
    • 제16권3호
    • /
    • pp.123-129
    • /
    • 2023
  • 응시점을 통해 어떤 것을 보고 있는지 알 수 있다면 많은 정보를 얻을 수 있다. 응시 추적 기술의 발달로 응시점에 대한 정보는 다양한 응시 추적 기기에서 제공해주는 소프트웨어를 통해 얻을 수 있다. 하지만 실제 응시 깊이와 같은 정확한 정보를 추정하기란 어렵다. 응시 추적 기기를 통해 만약 실제 응시 깊이로 보정할 수 있다면 시뮬레이션, 디지털 트윈, VR 등 다양한 분야에서 현실적이고 정확한 신뢰성 있는 결과를 도출하는 것이 가능해질 것이다. 따라서 본 논문에서는 응시 추적 기기와 소프트웨어를 통해 원시 응시 깊이를 획득하고 보정하는 실험을 진행한다. 실험은 Deep Neural Network(DNN) 모델을 설계한 후 소프트웨어에서 제공하는 응시 깊이 값을 300mm에서 10,000mm까지 지정한 거리별로 획득한다. 획득한 데이터는 설계한 DNN 모델을 통해 학습을 진행하여 실제 응시 깊이와 대응하도록 보정하였다. 보정한 모델을 통해 실험을 진행한 결과, 300mm에서 10,000mm까지 지정한 거리별 297mm, 904mm, 1,485mm, 2,005mm, 3,011mm, 4,021mm, 4,972mm, 6,027mm, 7,026mm, 8,043mm, 9,021mm, 10,076mm로 실제와 비슷한 응시 깊이 값을 획득할 수 있었다.

상안검성형술 후 발생한 후천성 유사 브라운증후군과 안검하수의 치험례 (Acquired Simulated Brown Syndrome Combined with Blepharoptosis after Upper Blepharoplasty)

  • 도언록;하원호;박대환
    • 대한두개안면성형외과학회지
    • /
    • 제13권2호
    • /
    • pp.130-134
    • /
    • 2012
  • Purpose: Brown syndrome is motility disorder of the eyeball which shows limited elevation in adduction and occurs very rarely after eye surgery. The authors have experienced a case of strabismus-like Brown syndrome combined with blepharoptosis and report this case with the review of literatures. Methods: A 28-year-old female suffered from hypotropia in the primary gaze and severe blepharoptosis with diplopia of the right eye after upper blepharoplasty. Rotation showed an inability to elevate the adducted right eye. She underwent extraocular muscle surgery about the 7 mm tucking of the right superior rectus muscle and 6 mm recession of right inferior rectus muscle. Intraoperatively, injury of the superior rectus muscle and foreign body were observed. Seven months after the extraocular surgery, the patient underwent frontalis muscle transfer on the right upper eyelid for the correction of blepharoptosis. Results: Postoperatively, the patient was orthophoric in the primary gaze, and she had improvements in the correction of blepharoptosis and eyeball movement. Conclusion: Repeated eyelid surgeries increase the risk of ocular motility disorder. Careful approach is essential for the proper treatment and successful outcome in secondary surgeries.

Systematic Review of Reciprocal Changes after Spinal Reconstruction Surgery : Do Not Miss the Forest for the Trees

  • Kim, Chang-Wook;Hyun, Seung-Jae;Kim, Ki-Jeong
    • Journal of Korean Neurosurgical Society
    • /
    • 제64권6호
    • /
    • pp.843-852
    • /
    • 2021
  • The purpose of this review was to synthesize the research on global spinal alignment and reciprocal changes following cervical or thoracolumbar reconstruction surgery. We carried out a search of PubMed, EMBASE, and Cochrane Library for studies through May 2020, and ultimately included 11 articles. The optimal goal of a truly balanced spine is to maintain the head over the femoral heads. When spinal imbalance occurs, the human body reacts through various compensatory mechanisms to maintain the head over the pelvis and to retain a horizontal gaze. Historically, deformity correction has focused on correcting scoliosis and preventing scoliotic curve progression. Following substantial correction of a spinal deformity, reciprocal changes take place in the flexible segments proximal and distal to the area of correction. Restoration of lumbar lordosis following surgery to correct a thoracolumbar deformity induces reciprocal changes in T1 slope, cervical lordosis, pelvic shift, and lower extremity parameters. Patients with cervical kyphosis exhibit different patterns of reciprocal changes depending on whether they have head-balanced or trunk-balanced kyphosis. These reciprocal changes should be considered to in order to prevent secondary spine disorders. We emphasize the importance of evaluating the global spinal alignment to assess postoperative changes.