• 제목/요약/키워드: data preprocessing

검색결과 987건 처리시간 0.03초

지상파 DMB에서의 깊이 영상 기반 렌더링 기반의 3차원 서비스를 위한 깊이 영상 전처리 기술의 비교 연구 (A comparative study of Depth Preprocessing Method for 3D Data Service Based on Depth Image Based Rendering over T-DMB)

  • 오영진;정광희;김중규;이광순;이현;허남호;김진웅
    • 대한전자공학회:학술대회논문집
    • /
    • 대한전자공학회 2008년도 하계종합학술대회
    • /
    • pp.815-816
    • /
    • 2008
  • In this paper, we evaluate depth image preprocessing for 3D data service based on DIBR over T-DMB. We evaluate two preprocessing methods of depth images. These are gaussian smoothing and adaptive smoothing. The results show that adaptive smoothing is more suitable for images with sharp transition of depth.

  • PDF

기계학습 기반 근감소증 예측을 위한 데이터 전처리 기법 (Data Preprocessing for Predicting Sarcopenia Based on Machine Learning)

  • 최윤;윤유림
    • 문화기술의 융합
    • /
    • 제9권3호
    • /
    • pp.737-744
    • /
    • 2023
  • 근감소증은 노인들 사이에서 점점 더 흔하게 발생하고 있어, 최근 주목을 받고 있는 질병이다. 근감소증의 원인은 매우 다양하게 나타나지만, 노화, 식습관, 운동 부족등이 주요한 원인들 중 하나이다. 근감소증은 원인이 다양한 만큼 예방 및 치료에 전략을 개발하는 것이 중요하다. 하지만 요인이 다양한 만큼 사람이 근감소증을 정확하게 예측하기는 어렵다. 여기서 기계학습을 이용해 근감소증 예측의 정확도와 편의를 크게 높일 수 있다. 그러나 생활습관과 생체 데이터의 양은 방대한 만큼, 전처리 없이 데이터를 쓰기에는 시간복잡도와 정확성 측면에서 부적절할 수 있다. 본 논문에서는 근감소증과 그 원인에 대한 최신 문헌을 검토하고, 그에 맞게 기계학습 기만 근감소증 예측에 활용할 데이터를 전처리하는데 초점을 맞춘다.

PREPROCESSING EFFECTS ON ON-LINE SSC MEASUREMENT OF FUJI APPLE BY NIR SPECTROSCOPY

  • Ryu, D.S.;Noh, S.H.;Hwang, I.G.
    • 한국농업기계학회:학술대회논문집
    • /
    • 한국농업기계학회 2000년도 THE THIRD INTERNATIONAL CONFERENCE ON AGRICULTURAL MACHINERY ENGINEERING. V.III
    • /
    • pp.560-568
    • /
    • 2000
  • The aims of this research were to investigate the preprocessing effect of spectrum data on prediction performance and to develop a robust model to predict SSC in intact apple. Spectrum data of 320 Fuji apples were measured with the on-line transmittance measurement system at the wavelength range of 550∼1100nm. Preprocess methods adopted for the tests were Savitzky Golay, MSC, SNV, first derivative and OSC. Several combinations of those methods were applied to the raw spectrum data set to investigate the relative effect of each method on the performance of the calibration model. PLS method was used to regress the preprocessed data set and the SSCs of samples, and the cross-validation was to select the optimal number of PLS factors. Smoothing and scattering corection were essential in increasing the prediction performance of PLS regression model and the OSC contributed to reduction of the number of PLS factors. The first derivative resulted in unfavorable effect on the prediction performance. MSC and SNV showed similar effect. A robust calibration model could be developed by the preprocessing combination of Savitzky Golay smoothing, MSC and OSC, which resulted in SEP= 0.507, bias=0.032 and R$^2$=0.8823.

  • PDF

메타버스 환경에서 Data Preprocessing 기능을 개선한 Trust-based Decentralized User Authentication 시스템 설계 및 개발 연구 (Design and Development Study of a Trust-based Decentralized User Authentication System with Enhanced Data Preprocessing Functionality in a Metaverse Environment)

  • 박수완;이상민;김경진
    • 융합보안논문지
    • /
    • 제23권4호
    • /
    • pp.3-15
    • /
    • 2023
  • 비대면 서비스의 확산과 원격근무 등의 생활이 일상화되면서 메타버스의 이용자가 급증하였으며, 세컨드 라이프를 위한 금융, 부동산 등 자산 실거래로써 사람들의 생활반경이 자연스럽게 확대되고 있다. 하지만 실세계에서와 같이 경제 활동을 자유롭게 하기에는 전혀 다른 쟁점의 보안 이슈들이 발생할 수 있으며, 기존의 사이버 공간과 비교해도 완전히 새로운 유형의 문제들이 발생할 가능성이 크다. 본 논문에서는 이러한 문제를 해결하기 위해 인증 및 프라이버시를 중점으로 방안을 제안한다. 메타버스에서 수집되는 데이터의 특수성에 기반하여 데이터 전처리 기능을 개선하고, W3C의 DID의 표준 방식을 준수하는 가운데 NFT를 활용한 메타버스 내 새로운 인증 서비스를 정의하며, 이에 대한 시스템 설계 및 개발 방안을 제시한다. 제안한 시스템은 하이퍼레저 인디 블록체인을 활용하여 구현하고, 결과를 분석하여 본 연구의 적용 가능성 및 우수성을 검증한다.

Automated data interpretation for practical bridge identification

  • Zhang, J.;Moon, F.L.;Sato, T.
    • Structural Engineering and Mechanics
    • /
    • 제46권3호
    • /
    • pp.433-445
    • /
    • 2013
  • Vibration-based structural identification has become an important tool for structural health monitoring and safety evaluation. However, various kinds of uncertainties (e.g., observation noise) involved in the field test data obstruct automation system identification for accurate and fast structural safety evaluation. A practical way including a data preprocessing procedure and a vector backward auto-regressive (VBAR) method has been investigated for practical bridge identification. The data preprocessing procedure serves to improve the data quality, which consists of multi-level uncertainty mitigation techniques. The VBAR method provides a determinative way to automatically distinguish structural modes from extraneous modes arising from uncertainty. Ambient test data of a cantilever beam is investigated to demonstrate how the proposed method automatically interprets vibration data for structural modal estimation. Especially, structural identification of a truss bridge using field test data is also performed to study the effectiveness of the proposed method for real bridge identification.

지열지대 VSP 자료를 이용한 파쇄대 영상화 연구 (Imaging Fractures by using VSP Data on Geothermal Site)

  • 이상민;변중무;송호철;박권규;이태종
    • 지구물리와물리탐사
    • /
    • 제14권3호
    • /
    • pp.227-233
    • /
    • 2011
  • 지열은 외부 연료 공급요건에 영향을 받지 않고 연중 가동할 수 있는 장점을 가지기 때문에 최근 해외에서 주목받고 있는 대체 에너지원이다. 그리고 국내의 온천 및 지열이상대는 화강암 지역의 심부 파쇄대를 통한 지열수의 순환에 의한 것이 대부분으로 알려져 있다. 따라서 국내에서의 지열탐사는 지하유체의 주요 통로인 심부 파쇄대의 분포상황을 정확하게 파악하는 것이 매우 중요하다. 본 연구에서는 석모도에서 취득한 수직 탄성파탐사(Vertical Seismic Profiling, VSP) 자료의 전처리와 심부 파쇄대의 영상화를 수행하기 위하여 급경사 파쇄대 지역과 퇴적층 구조를 모사한 속도모델로부터 합성탄성파 자료를 생성하고, 이 자료에 일반적인 VSP 자료처리기법과 급경사 파쇄대를 고려한 VSP 자료처리기법을 각각 적용한 결과를 비교 분석하였다. 그 결과 파쇄대에 의한 반사 이벤트의 손실을 없애기 위해서는 단순히 모든 하향파를 제거하는 일반적인 전처리 과정이 아닌 파쇄대를 고려한 전처리 과정이 필요하다는 것을 확인하였다. 또한 파쇄대를 고려한 전처리 과정이 수행된 석모도 거꿀 수직 탄성파탐사(Reversed VSP, RVSP) 현장자료에 3차원 겹쌓기전 위상막 참 반사보정을 적용하여 석모도 탐사현장의 지하구조를 영상화하였다. 참 반사보정 결과 파쇄대로 추정되는 구조가 확인되었으며, 이는 시추공 자료에서 추정되는 균열대의 심도와 일치하였다.

전처리과정을 갖는 시계열데이터의 퍼지예측 (A Fuzzy Time-Series Prediction with Preprocessing)

  • 윤상훈;이철희
    • 대한전기학회:학술대회논문집
    • /
    • 대한전기학회 2000년도 추계학술대회 논문집 학회본부 D
    • /
    • pp.666-668
    • /
    • 2000
  • In this paper, a fuzzy prediction method is proposed for time series data having uncertainty and non-stationary characteristics. Conventional methods, which use past data directly in prediction procedure, cannot properly handle non-stationary data whose long-term mean is floating. To cope with this problem, a data preprocessing technique utilizing the differences of original time series data is suggested. The difference sets are established from data. And the optimal difference set is selected for input of fuzzy predictor. The proposed method based the Takigi-Sugeno-Kang(TSK or TS) fuzzy rule. Computer simulations show improved results for various time series.

  • PDF

음성 데이터 전처리 기법에 따른 뉴로모픽 아키텍처 기반 음성 인식 모델의 성능 분석 (Performance Analysis of Speech Recognition Model based on Neuromorphic Architecture of Speech Data Preprocessing Technique)

  • 조진성;김봉재
    • 한국인터넷방송통신학회논문지
    • /
    • 제22권3호
    • /
    • pp.69-74
    • /
    • 2022
  • 뉴로모픽 아키텍처에서 동작하는 SNN (Spiking Neural Network) 은 인간의 신경망을 모방하여 만들어졌다. 뉴로모픽 아키텍처 기반의 뉴로모픽 컴퓨팅은 GPU를 이용한 딥러닝 기법보다 상대적으로 낮은 전력을 요구한다. 이와 같은 이유로 뉴로모픽 아키텍처를 이용하여 다양한 인공지능 모델을 지원하고자 하는 연구가 활발히 일어나고 있다. 본 논문에서는 음성 데이터 전처리 기법에 따른 뉴로모픽 아키텍처 기반의 음성 인식 모델의 성능 분석을 진행하였다. 실험 결과 푸리에 변환 기반 음성 데이터 전처리시 최대 84% 정도의 인식 정확도 성능을 보임을 확인하였다. 따라서 뉴로모픽 아키텍처 기반의 음성 인식 서비스가 효과적으로 활용될 수 있음을 확인하였다.

교육종단연구 분석을 위한 빅데이터 플랫폼 개발 및 적용 (Development and Application of a Big Data Platform for Education Longitudinal Study Analysis)

  • 박정;조완섭
    • 한국빅데이터학회지
    • /
    • 제5권1호
    • /
    • pp.11-27
    • /
    • 2020
  • 본 논문에서는 교육종단연구 데이터를 효과적으로 저장·처리·분석하기 위한 데이터 플랫폼을 개발하고, 이를 서울교육종단연구(SELS)에 적용하여 유용성을 확인한다. 플랫폼은 데이터 전처리부와 데이터 분석부로 구성된다. 데이터 전처리부에서는 1) 마스킹 2) 요인화 3) 정규화·이산화 4) 데이터 유도 5) 데이터 웨어하우징 과정을 통해 교육종단연구 데이터 웨어하우스를 생성하게 된다. 데이터 분석부는 OLAP과 데이터 마이닝(DM)으로 구성된다. 먼저, OLAP에서는 측정값 선정, 스키마 설계를 거쳐 OLAP을 수행하게 된다. 이후 DM에서는 변수 선택, 연구모형 선택, 데이터 수정, 인수튜닝, 모형학습, 모형평가 및 해석단계를 거친다. 본 플랫폼에서 전처리 과정을 거쳐 생성된 데이터 웨어하우스는 다양한 연구자들에 의해 공유될 수 있고, 지속적인 연구결과 데이터 셋의 축적이 가능하므로 후속 연구자들은 추가적인 분석을 수월하게 수행할 수 있게 된다. 또한, 정책입안자들도 SELS 데이터 웨어하우스에 직접 접근하여 다차원 분석을 통해 온라인으로 분석할 수 있어 과학적인 의사결정이 가능하게 된다. 본 연구에서는 개발된 플랫폼의 유용성을 입증하기 위해 SELS 데이터를 플랫폼 상에서 구축하고 수학 학업성취도를 측정값으로 선정하여 OLAP 및 DM을 수행하였으며, 측정값에 영향을 주는 다양한 요인을 데이터 마이닝 기법을 사용하여 분석하였다. 이를 통해 데이터 기반 교육정책 시사점을 빠르고 효과적으로 도출할 수 있었다.

고차원 스펙트라 데이터 분석을 위한 Adjusted Direct Orthogonal Signal Correction 기법 (Adjusted Direct Orthogonal Signal Correction For High-Dimensional Spectral Data)

  • 김신영;김성범
    • 대한산업공학회지
    • /
    • 제37권4호
    • /
    • pp.400-407
    • /
    • 2011
  • Modeling and analysis of high-dimensional spectral data provide an opportunity to uncover inherent patterns in various information-rich data. Orthogonal signal correction (OSC) a preprocessing technique has been widely used to remove unwanted variations of spectral data that do not contribute to prediction or classification. In the present study we propose a novel OSC algorithm called adjusted direct OSC to improve visualization and the ability of classification. Experimental results with real mass spectral data from condom lubricants demonstrate the effectiveness of the proposed approach.