• 한국멀티미디어학회논문지
• /
• 제24권7호
• /
• pp.890-902
• /
• 2021

Although the object detection accuracy with still images has been significantly improved with the advance of deep learning techniques, the object detection problem with video data remains as a challenging problem due to the real-time requirement and accuracy drop with occlusion. In this research, we propose a method in pig detection for video monitoring environment. First, we determine a motion, from a video data obtained from a tilted-down-view camera, based on the average size of each pig at each location with the training data, and extract key frames based on the motion information. For each key frame, we then apply YOLO, which is known to have a superior trade-off between accuracy and execution speed among many deep learning-based object detectors, in order to get pig's bounding boxes. Finally, we merge the bounding boxes between consecutive key frames in order to reduce false positive and negative cases. Based on the experiment results with a video data set obtained from a pig farm, we confirmed that the pigs could be detected with an accuracy of 97% at a processing speed of 37fps.

• Journal of Multimedia Information System
• /
• 제3권2호
• /
• pp.9-12
• /
• 2016

This paper is concerned with the effective and efficient identification of the gender and motion of humans. Tracking this nonverbal behavior is useful for providing clues about the interaction of different types of people and their exact motion. This system can also be useful for security in different places or for monitoring patients in hospital and many more applications. Here we describe a novel method of determining identity using machine learning with Microsoft Kinect. This method minimizes the fitting or overlapping error between an ellipsoid based skeleton.

• 한국통신학회논문지
• /
• 제24권8B호
• /
• pp.1577-1585
• /
• 1999

점진적인 장면전환 종류로는 비디오 편집 과정에서 삽입되는 디졸브(dissolve), 페이드인/아웃(fade-in/out), 와이프(wipe) 등과, 카메라 움직임에 의한 팬(pan), 줌(zoom), 스크롤(scroll) 등이 있다. 본 논문에서는 점진적 장면전환 종류 중 편집과정에서 사용되는 디졸브, 그리고 카메라 움직임에 의한 팬과 줌의 검출을 위한 효과적인 방법을 제안하였다. 디졸브 구간의 검출을 위하여 각 프레임에 대한 공간적 영역 분할을 하고, 영역별 화소값의 평균치를 제곱하여 전환 프레임의 특징 요소로 사용하였다. 팬과 줌의 검출을 위하여 배경화면을 대표할 수 있는 4개의 국부 영역으로 선정하여 각 국부 영역의 움직임 벡터로부터 대표 움직임 벡터를 결정하고, 이들의 방향 성분을 사용하였다. 제안된 방식들은 검출의 정확도를 향상시키기 위해 모든 프레임(I, P, B)을 사용하였으며 아울러 검출 속도를 높이기 위해 완전 복원된 영상을 사용하는 대신 DCT DC 계수와 움직임 벡터를 이용한 축소영상을 사용하였다. 실제 MPEG 비디오에 적용하여 기존의 방법들에 비해 우수한 검출 결과를 확인하였다.

• 정보처리학회논문지B
• /
• 제11B권3호
• /
• pp.317-326
• /
• 2004

본 논문에서는 이동 카메라에서 취득한 영상에서 컬러 정보를 이용하여 다수의 보행자를 검출하고 특정 보행자를 추적하는 방법을 제안한다. 먼저 연속한 동영상 입력에 대해 BMA(Block Matching Algorithm)을 이용하여 움직임 벡터를 추출하고 움직임 보상을 한 후 차 영상을 생성한다. 다음은 이진 영상으로 변환한 후 불필요한 잡음 능을 제거하친, 프로젝션을 수행하여 보행자를 검출한다. 만약 검출된 보행자가 서로 인접하거나 겹쳐졌을 경우 RGB 컬러 정보를 이용하여 분리시킨다. 검출된 다수의 보행자로부터 특정 보행자를 추적하기 위해 보행자 가운데 영역의 RGB 컬러 정보를 이용하여 추적한다. 제안된 방법에 대하여 비디오 카메라로 녹화한 영상을 컴퓨터에서 입력받아 검출과 추적 실험을 수행한 결과, 검출 성공률이 97％, 검출 실패율이 3％로 나타났고 추적 또한 우수함을 입증하였다.

• 대한기계학회논문집A
• /
• 제21권10호
• /
• pp.1551-1560
• /
• 1997

This study is devoted to the detection of the 3-dimensional point obstacles on the plane by using accumulated scan line images. The proposed accumulating only one scan line allow to process image at real time. And the change of motion of the feature in image is small because of the short time between image frames, so it does not take much time to track features. To obtain recursive optimal obstacles position and robot motion along to the motion of camera, Kalman filter algorithm is used. After using Kalman filter in case of the fixed environment, 3-dimensional obstacles point map is obtained. The position and motion of moving obstacles can also be obtained by pre-segmentation. Finally, to solve the stereo ambiguity problem from multiple matches, the camera motion is actively used to discard mis-matched features. To get relative distance of obstacles from camera, parallel stereo camera setup is used. In order to evaluate the proposed algorithm, experiments are carried out by a small test vehicle.

• 로봇학회논문지
• /
• 제18권4호
• /
• pp.496-504
• /
• 2023

This paper recognizes the motion intention of the wearer using a muscle stiffness sensor and proposes a control system for a wearable robot based on this. The proposed system recognizes the onset time of the motion using sensor data, determines the assistance mode, and provides assistive torque to the hip flexion/extension motion of the wearer through the generated reference trajectory according to the determined mode. The onset time of motion was detected using the CUSUM algorithm from the muscle stiffness sensor, and by comparing the detection results of the onset time with the EMG sensor and IMU, it verified its applicability as an input device for recognizing the intention of the wearer before motion. In addition, the stability of the proposed method was confirmed by comparing the results detected according to the walking speed of two subjects (1 male and 1 female). Based on these results, the assistance mode (gait assistance mode and muscle strengthening mode) was determined based on the detection results of onset time, and a reference trajectory was generated through cubic spline interpolation according to the determined assistance mode. And, the practicality of the proposed system was also confirmed by applying it to an actual wearable robot.

• 한국콘텐츠학회논문지
• /
• 제19권11호
• /
• pp.270-277
• /
• 2019

오늘날의 미디어는 디지털 방송이 본격적으로 발전하고 또 우리의 삶에 녹아들고 있다. 특히 인터랙티브 미디어는 컴퓨터를 기반으로, 기존처럼 시간에 맞춰 주어진 미디어를 눈으로만 시청하기보다, 미디어를 직접 따라 하거나 미디어의 선택지를 고르는 등 사용자와 미디어의 상호 작용을 통해 차별화된 콘텐츠를 체험할 수 있는 형태로 확장된 미디어이다. 최근에는 이를 활용해, 특정 센서 및 디바이스가 부착된 옥외 광고나 전시관 등에 사용자의 자연스러운 참여를 유도할 수 있는 콘텐츠 개발이 활발히 진행되고 있다. 그리고 저가의 모션 인식 디바이스가 개발되어, 신체에 접촉하지 않으면서 사용자의 모션 정보를 인식하여 다양한 인터랙션을 적용한 미디어를 체험할 수 있게 되었다. 본 논문은 특정 프로그램 설치가 없이 웹서비스 환경에서 사용자의 동작을 인식하고 영상을 제어할 수 있는 인터랙티브 미디어 플레이어를 개발하였다. 그리고 키오스크 형태에서 탑재된 립모션(Leap Motion) 장비에 맞는 다양한 사용자 동작 인식 범위를 설정하고 사용자 동작 인식 알고리즘을 개발하였다. 이러한 연구 결과는 인터랙티브 관광·교육·영화 콘텐츠등 다양한 인터랙티브 미디어를 공공의 장소에 설치 가능한 키오스크에 탑재하여 체험할 수 있다.

• 한국멀티미디어학회논문지
• /
• 제16권12호
• /
• pp.1439-1445
• /
• 2013

We present a Taekwondo training system using a hybrid sensing technique of a body sensor and a visual sensor. Using a body sensor (accelerometer), rotational and inertial motion data are captured which are important for Taekwondo motion detection and evaluation. A visual sensor (camera) captures and records the sequential images of the performance. Motion chunk is proposed to structuralize Taekwondo motions and design HMM (Hidden Markov Model) for motion recognition. Trainees can evaluates their trial motions numerically by computing the distance to the standard motion performed by a trainer. For motion training video, the real-time video images captured by a camera is overlayed with a visualized body sensor data so that users can see how the rotational and inertial motion data flow.

• KSII Transactions on Internet and Information Systems (TIIS)
• /
• 제8권10호
• /
• pp.3475-3489
• /
• 2014

Here we present a simple flame detection method for an infrared (IR) thermal camera based real-time fire surveillance digital signal processor (DSP) system. Infrared thermal cameras are especially advantageous for unattended fire surveillance. All-weather monitoring is possible, regardless of illumination and climate conditions, and the data quantity to be processed is one-third that of color videos. Conventional IR camera-based fire detection methods used mainly pixel-based temporal correlation functions. In the temporal correlation function-based methods, temporal changes in pixel intensity generated by the irregular motion and spreading of the flame pixels are measured using correlation functions. The correlation values of non-flame regions are uniform, but the flame regions have irregular temporal correlation values. To satisfy the requirement of early detection, all fire detection techniques should be practically applied within a very short period of time. The conventional pixel-based correlation function is computationally intensive. In this paper, we propose an IR camera-based simple flame detection algorithm optimized with a compact embedded DSP system to achieve early detection. To reduce the computational load, block-based calculations are used to select the candidate flame region and measure the temporal motion of flames. These functions are used together to obtain the early flame detection algorithm. The proposed simple algorithm was tested to verify the required function and performance in real-time using IR test videos and a real-time DSP system. The findings indicated that the system detected the flames within 5 to 20 seconds, and had a correct flame detection ratio of 100% with an acceptable false detection ratio in video sequence level.

• 한국항공우주학회지
• /
• 제37권5호
• /
• pp.502-510
• /
• 2009

레이저 관성항법장치는 링 레이저 자이로와 가속도계로 구성되어 있다. 링 레이저 자이로는 링 레이저 자이로 내부의 레이저 공진기에 장착된 반사경의 후방산란으로 인하여 0.1deg/sec 이하의 각속도가 측정되지 않는 lock-in 영역이 존재하기 때문에 이를 제거하기 위해서 Dither 운동이라는 정현파 각속도 운동을 몸체에 가한다. 이러한 Dither 운동은 레이저 관성항법장치가 정상동작하는 경우 항상 RLG/가속도계 측정치에 포함되어 나타난다. 이러한 레이저 관성항법장치의 특징을 이용하여 본 논문에서는 RLG/가속도계 측정치를 실시간으로 FFT를 수행하여 Dither 운동이 측정치에 포함되어 있는 가를 실시간으로 감시하여 레이저 관성항법장치의 고장을 검출하는 방법을 제안하였으며 정지상태 시험 및 차량탑재 시험을 통해 유용성을 검증하였다.