• Title/Summary/Keyword: 결측치

Search Result 100, Processing Time 0.027 seconds

Analysis of Rainfall Runoff Reduction Effects Based on Low Impact DevelopmentFacility Monitoring Data (저영향시설(LID) 모니터링 자료 보정을 통한 유출저감 효과 분석)

  • Lee, Inhwa;Ahn, Jeahwang;Yi, Jaeeung
    • Proceedings of the Korea Water Resources Association Conference
    • /
    • 2017.05a
    • /
    • pp.157-157
    • /
    • 2017
  • 우리나라에서는 급속도로 진행되고 있는 도시화의 영향으로 토지사용 방법이 변화함에 따라 도심지 내 불투수율이 증가하고 있으며, 불투수면적과 강우유출량 또한 증가하였다. 이러한 변화는 도심홍수, 수질오염 등의 피해를 더욱 심화시킬 뿐 아니라, 도시유역 물순환 체계 및 자연생태계 균형 파괴 등의 심각한 환경문제를 발생시키고 있다. 이에 국내 외에서 도시유역 물순환 체계 관련 다양한 대안이 검토되고 있으며 외국에서는 약 20년 전부터 저영향개발 (Low Impact Development; LID)을 통한 수자원의 활용과 환경 친화적인 개발에 관심을 기울이고 있다. 국내에서 주로 사용되는 LID 기법은 소규모 유출저감 시설과 녹지면을 이용하여 빗물을 분산시키는 분산형 유출저감 시설물이 있다. 분산형 유출저감 시설물은 빗물의 발생원에서 빗물을 침투 저류시켜 저류된 빗물은 조경용수, 청소용수, 하천 유지용수 등으로 이용하는 친환경 빗물관리 방식으로 침투도랑, 측구형 침투시설, 식생수로, 빗물 저류조, 투수성 블록 등의 다양한 시설물이 이에 포함된다. 현재 이와 같이 LID 시설물이 급속도로 증가하고 있으나 시설물의 저감효과 분석을 위한 모니터링관련 연구가 많지 않은 실정이다. 이에 본 연구에서는 LID 시설물의 유출 저감효과를 분석하기 위해 부산대학교 양산캠퍼스 실증실험단지에 설치되어 있는 LID 시설물의 모니터링 계측결과를 바탕으로 다양한 강우사상에 따른 LID 시설물의 유출저감 효과를 분석하였다. 대상지역의 정확한 유출저감 효과를 분석하기 위한 방안으로 자료의 이상치, 결측치 등을 보정하는 방안을 고려하였으며 실험실증단지에 내리는 강우의 지속시간, 총강우량, 선행강우에 따라 강우사상을 분류하여 이를 토대로 강우사상 별 LID 시설물의 유출 저감효과와 유출 지속시간에 미치는 영향을 분석하였다.

  • PDF

A Strategy on Integrated Data Base Construction and Management of Global Water Resource Information System (글로벌 수자원 정보 시스템 통합 DB 구축 및 관리방안 연구)

  • Gwon, Yong Hyeon;Lee, Kyoung Do;Lee, Byong Ju
    • Proceedings of the Korea Water Resources Association Conference
    • /
    • 2018.05a
    • /
    • pp.375-375
    • /
    • 2018
  • 세계 수자원 시장은 연평균 6.5%씩 증가하고 있으며, 2025년 기준 1,038조원까지 급성장할 것으로 전문가들은 예상하고 있으나, 기후변화의 가속화로 인해 가뭄 및 홍수피해가 증가하여 수자원 관리가 더욱 어려워져지고 있다. 급속도로 변화는 환경에 대비하기 위해 국내에서는 수자원 및 기후변화에 대한 다양한 연구가 진행되고 있으나, 해외사업 진출 시에는 수자원 기초자료 수집에 대한 어려움을 겪고 있다. 이를 해결하기 위해 글로벌 수문기상자료 제공과 함께 GIS정보, 댐 및 저수지 관련 자료, 인문사회 자료, 물관련 통계자료, 물관련 재해자료 등을 웹으로 제공하는 글로벌 수자원 정보 시스템(GWB, Global World Bank)을 개발하고자 한다. 본 연구에서는 시스템의 통합 DB를 구축하고 관리방안을 도출하기 위해 수집된 메타데이터 속성 및 데이터구조를 파악하고, 세부항목별 자료 포맷을 분석 후 GIS기반 관측소 정보와 자료를 매칭하여 최종적으로 시스템 컨텐츠별로 DB를 맵핑하였다. 강수량과 기상자료는 33개국의 관측소 6,531개소의 일/월/연단위 관측자료와 10,977격자의 격자분석자료를 구축하였다. 수문자료는 33개국의 수문관측소 2,242개의 월/연단위 유량관측자료와 10,977격자의 월/연단위 직접유출, 기저유출, 잠재증발산의 격자분석자료를 구축하였다. 그리고, 수집된 강우와 기상자료는 기계 오작동, 자료 전송 오류 등으로 인한 결측치 및 이상치에 대해 자료품질분석을 통해 오자료에 대한 보정을 진행하였다. 해당자료는 MySQL를 활용하여 DB를 구축하였으며, GIS정보는 GeoServer를 활용하여 운영서버에 구축된 정보를 최종적으로 사용자에게 Web Browser로 표출하였다. 해당 시스템은 추후 전지구 수자원관련 정보를 제공하여 해외사업지역의 댐이나 보 등의 구조물 설계, 수자원산업의 해외 진출시 데이터 수집의 한계점 및 시간단축을 해결할 수 있어 수자원 분야에 기여 할 수 있을 것으로 판단된다.

  • PDF

Store Sales Prediction Using Gradient Boosting Model (그래디언트 부스팅 모델을 활용한 상점 매출 예측)

  • Choi, Jaeyoung;Yang, Heeyoon;Oh, Hayoung
    • Journal of the Korea Institute of Information and Communication Engineering
    • /
    • v.25 no.2
    • /
    • pp.171-177
    • /
    • 2021
  • Through the rapid developments in machine learning, there have been diverse utilization approaches not only in industrial fields but also in daily life. Implementations of machine learning on financial data, also have been of interest. Herein, we employ machine learning algorithms to store sales data and present future applications for fintech enterprises. We utilize diverse missing data processing methods to handle missing data and apply gradient boosting machine learning algorithms; XGBoost, LightGBM, CatBoost to predict the future revenue of individual stores. As a result, we found that using median imputation onto missing data with the appliance of the xgboost algorithm has the best accuracy. By employing the proposed method, fintech enterprises and customers can attain benefits. Stores can benefit by receiving financial assistance beforehand from fintech companies, while these corporations can benefit by offering financial support to these stores with low risk.

A Study on the Index Estimation of Missing Real Estate Transaction Cases Using Machine Learning (머신러닝을 활용한 결측 부동산 매매 지수의 추정에 대한 연구)

  • Kim, Kyung-Min;Kim, Kyuseok;Nam, Daisik
    • Journal of the Economic Geographical Society of Korea
    • /
    • v.25 no.1
    • /
    • pp.171-181
    • /
    • 2022
  • The real estate price index plays key roles as quantitative data in real estate market analysis. International organizations including OECD publish the real estate price indexes by country, and the Korea Real Estate Board announces metropolitan-level and municipal-level indexes. However, when the index is set on the smaller spatial unit level than metropolitan and municipal-level, problems occur: missing values. As the spatial scope is narrowed down, there are cases where there are few or no transactions depending on the unit period, which lead index calculation difficult or even impossible. This study suggests a supervised learning-based machine learning model to compensate for missing values that may occur due to no transaction in a specific range and period. The models proposed in our research verify the accuracy of predicting the existing values and missing values.

The Effect of Decision-making Attitudes within the Family on the Human Rights Awareness of Adolescents: Mediating Effect of Self-Esteem (가족 내 의사결정 태도가 청소년의 인권의식에 미치는 영향: 자아존중감의 매개효과)

  • Kim, Jung-Hui;Choi, Yeon-Sun
    • Journal of Industrial Convergence
    • /
    • v.20 no.10
    • /
    • pp.131-136
    • /
    • 2022
  • This study examines the mediating effect of self-esteem in the influence of family decision-making attitudes on adolescents' human rights awareness. In order to achieve the purpose of this study, data from the Korea Youth Policy Research Institute surveyed in 2018 were used and analyzed. After extracting 693 adolescents with part-time work experience among all respondents in this data, missing values, outliers, and weights were removed, and a total of 511 people were selected as final research subjects. The SPSS WIN 25.0 program was used to verify the influence and mediating effect between measurement variables. As a result of the analysis, the partial mediating effect of self-esteem was confirmed in the influence of decision-making attitudes within the family on the human rights consciousness of adolescents. In addition, the Sobel Test was conducted to confirm the significance of the mediating effect of self-esteem. Based on the results of this study, the necessity of social welfare intervention was suggested for desirable communication between parents and children, raising awareness of human rights and enhancing self-esteem suggested.

Analysis of Factors Affecting Academic Ability of Preschool-age Children

  • Moon, Kyung-Im
    • Journal of the Korea Society of Computer and Information
    • /
    • v.27 no.5
    • /
    • pp.205-213
    • /
    • 2022
  • This study is to analyze the relationship among potential variables of self-development, social development, learning readiness, and academic ability using data from the Panel Study on Korean Children, which was surveyed in 2014, and to find factors affecting the academic ability of preschool children will be. The subjects of this study were 6-year-old children of 1113 households among 2150 households in the 7th Panel Study on Korean Children(2014) data, excluding non-responders and system-missing 1037 households. As a result of analyzing the path effect of the research model, it was found that, between self-development and academic skills, self-development had a direct effect on academic skills and also had a significant indirect effect through social development and learning readiness as a medium. In addition, it was found that learning readiness had the greatest influence among self-development, social development, and learning readiness on academic skills. As a result, the academic skills of preschool-age children should be treated with great importance in order to develop them into talents with creativity and problem-solving ability.

Data Quality Assessment and Improvement for Water Level Prediction of the Han River (한강 수위 예측을 위한 데이터 품질 진단 및 개선)

  • Ji-Hyun Choi;Jin-Yeop Kang;Hyun Ahn
    • Journal of Advanced Navigation Technology
    • /
    • v.27 no.1
    • /
    • pp.133-138
    • /
    • 2023
  • As a side effect of recent rapid climate change and global warming, the frequency and scale of flood disasters are increasing worldwide. In Korea, the water level of the Han River is a major management target for preventing flood disasters in Seoul, the capital of Korea. In this paper, to improve the water level prediction of the Han River based on machine learning, we perform a comprehensive assessment of the quality of related dataset and propose data preprocessing methods to improve it. Specifically, we improve the dataset in terms of completeness, validity, and accuracy through missing value processing and cross-correlation analysis. In addition, we conduct a performance evaluation using random forest and LightGBM to analyze the effect of the proposed data improvement method on the water level prediction performance of the Han River.

Smoothed RSSI-Based Distance Estimation Using Deep Neural Network (심층 인공신경망을 활용한 Smoothed RSSI 기반 거리 추정)

  • Hyeok-Don Kwon;Sol-Bee Lee;Jung-Hyok Kwon;Eui-Jik Kim
    • Journal of Internet of Things and Convergence
    • /
    • v.9 no.2
    • /
    • pp.71-76
    • /
    • 2023
  • In this paper, we propose a smoothed received signal strength indicator (RSSI)-based distance estimation using deep neural network (DNN) for accurate distance estimation in an environment where a single receiver is used. The proposed scheme performs a data preprocessing consisting of data splitting, missing value imputation, and smoothing steps to improve distance estimation accuracy, thereby deriving the smoothed RSSI values. The derived smoothed RSSI values are used as input data of the Multi-Input Single-Output (MISO) DNN model, and are finally returned as an estimated distance in the output layer through input layer and hidden layer. To verify the superiority of the proposed scheme, we compared the performance of the proposed scheme with that of the linear regression-based distance estimation scheme. As a result, the proposed scheme showed 29.09% higher distance estimation accuracy than the linear regression-based distance estimation scheme.

Comparison of Machine Learning Techniques in Urban Weather Prediction using Air Quality Sensor Data (실외공기측정기 자료를 이용한 도심 기상 예측 기계학습 모형 비교)

  • Jong-Chan Park;Heon Jin Park
    • The Journal of Bigdata
    • /
    • v.6 no.2
    • /
    • pp.39-49
    • /
    • 2021
  • Recently, large and diverse weather data are being collected by sensors from various sources. Efforts to predict the concentration of fine dust through machine learning are being made everywhere, and this study intends to compare PM10 and PM2.5 prediction models using data from 840 outdoor air meters installed throughout the city. Information can be provided in real time by predicting the concentration of fine dust after 5 minutes, and can be the basis for model development after 10 minutes, 30 minutes, and 1 hour. Data preprocessing was performed, such as noise removal and missing value replacement, and a derived variable that considers temporal and spatial variables was created. The parameters of the model were selected through the response surface method. XGBoost, Random Forest, and Deep Learning (Multilayer Perceptron) are used as predictive models to check the difference between fine dust concentration and predicted values, and to compare the performance between models.

Analysis of water demand characteristics using water consumption data measured by smart water meter from block 112 in YeongJong Island (영종도 112 블록 지능형 수도 계량기에서 계측된 물 사용 자료를 이용한 용도별 물 수요 특성 분석)

  • Koo, Kang Min;Han, Kuk Heon;Jun, Kyung Soo;Yum, Kyung Taek
    • Proceedings of the Korea Water Resources Association Conference
    • /
    • 2022.05a
    • /
    • pp.390-390
    • /
    • 2022
  • 도시 생활용수 수요는 생활 수준 향상, 도시화 등으로 지속적 증가 추세에 있으며, 최근 기후변화, 시설 노후화, 도시화, 그리고 수질 오염 등의 문제들에 직면해 있다. 이는 물 부족을 심화시켜 현행 상수도시스템에서 한정적인 수자원을 배분하는데 어려움을 가중시킨다. 이를 해결하기 위해 스마트워터그리드 기술이 상수도시스템에 도입이 되면서 지능형 상수도 계량기를 이용한 개별 소비자들의 물 소비량 자료를 보다 정밀하게 실시간으로 모니터링 할 수 있게 되었다. 실시간 실측을 바탕으로 한 물 소비량 자료는 미래 용수 수요 예측과 수운영 관리에 도움을 줄 수 있다. 한편 생활용수는 용도 또는 요금 부과 기준에 따라 가정용, 업무용, 영업용, 욕탕용, 그리고 공업용으로 분류할 수 있다. 미국과 호주 등에서는 용도 분류에 따른 모니터링 강화로 절수 방안을 개발하여 물 부족에 대비하고 있다. 우리나라도 비 가정용수(가정용수를 제외한 용수들)를 체계적으로 분류하기 위한 선행 연구들이 이뤄졌으나 분류체계가 표준화되지 않았는데, 이는 용도에 따른 개별 소비자들의 소비 특성 분석이 충분히 선행되지 않았기 때문이며, 아직까지 많은 지자체에서 물 소비량을 월 단위로 인력검침 하는데 의존하고 있어, 충분한 물 소비량 자료가 부족했기 때문이다. 본 연구에서는 영종도 112 블록에 구축된 스마트워터그리드 파일롯플랜트 527개 개별 소비자들로부터 2018년 1월 1일부터 2020년 1월 1일까지 1시간단위로 수집된 물 소비량 자료를 이용하여, 개별 소비자들의 일평균 첨두 소비량과 발생 시간, 관경, 요일, 계절에 따른 물 수요 특성 분석을 수행했다. 이 때 수집된 자료의 결측치 및 오측치를 보정하여 자료의 신뢰성을 높이고자 했다. 분석결과는 용도별 물 수요 특성을 보다 잘 이해할 수 있게 도와주며, 비가정용수의 용도별 분류에 기초자료로 사용될 수 있을 것이라 사료된다.

  • PDF