• Title/Summary/Keyword: 자동 평가

Search Result 2,563, Processing Time 0.03 seconds

Effective Water Pollution Management using Reservoir Tank Automatic Classification (저수조 자동 분류를 이용한 효과적인 수질 오염 관리)

  • Chung, Kyung-Yong;Jun, In-Ja
    • The Journal of the Korea Contents Association
    • /
    • v.9 no.8
    • /
    • pp.1-8
    • /
    • 2009
  • With the development of IT convergence technology and the construction of master plan for the four rivers restoration of the government, the importance of the eco-friendly water pollution management is being spotlighted. In this paper, we proposed the effective water pollution management using the reservoir tank automatic classification for improving the water quality and on-line managing efforts of ceo-friendly reservoir tanks. The proposed method defined the seven factors of water pollution evaluation and managed the water pollution according to hydrogen ion concentration(pH), chemical oxygen demand(COD), suspend solid(SS), dissolved oxygen(DO), count of coliform group(MPN), total phosphorus(T-P), and total nitrogen(T-N) using the sensors. We measured the values for the seven factors from the reservoir tank and normalized to ranging from 1 to 9. To evaluate the performance of the water pollution management using the reservoir tank automatic classification, we conducted F-measure so as to verify usefulness. This evaluation found that the difference of satisfaction by the traditional system was statistically meaningful.

Korean Automated Scoring System for Supply-Type Items using Semi-Supervised Learning (준지도학습 방법을 이용한 한국어 서답형 문항 자동채점 시스템)

  • Cheon, Min-Ah;Seo, Hyeong-Won;Kim, Jae-Hoon;Noh, Eun-Hee;Sung, Kyung-Hee;Lim, EunYoung
    • Annual Conference on Human and Language Technology
    • /
    • 2014.10a
    • /
    • pp.112-116
    • /
    • 2014
  • 서답형 문항은 학생들의 종합적인 사고능력을 판단하는데 매우 유용하지만 채점할 때, 시간과 비용이 매우 많이 소요되고 채점자의 공정성을 확보해야 하는 어려움이 있다. 이러한 문제를 개선하기 위해 본 논문에서는 서답형 문항에 대한 자동채점 시스템을 제안한다. 본 논문에서 제안하는 시스템은 크게 언어 처리 단계와 채점 단계로 나뉜다. 첫 번째로 언어 처리 단계에서는 형태소 분석과 같은 한국어 정보처리 시스템을 이용하여 학생들의 답안을 분석한다. 두 번째로 채점 단계를 진행하는데 이 단계는 아래와 같은 순서로 진행된다. 1) 첫 번째 단계에서 분석 결과가 완전히 일치하는 답안들을 하나의 유형으로 간주하여 각 유형에 속한 답안의 빈도수가 높은 순서대로 정렬하여 인간 채점자가 고빈도 학생 답안을 수동으로 채점한다. 2) 현재까지 채점된 결과와 모범답안을 학습말뭉치로 간주하여 자질 추출 및 자질 가중치 학습을 수행한다. 3) 2)의 학습 결과를 토대로 미채점 답안들을 군집화하여 분류한다. 4) 분류된 결과 중에서 신뢰성이 높은 채점 답안에 대해서 인간 채점자가 확인하고 학습말뭉치에 추가한다. 5) 이와 같은 방법으로 미채점 답안이 존재하지 않을 때까지 반복한다. 제안된 시스템을 평가하기 위해서 2013년 학업성취도 평가의 사회(중3) 및 국어(고2) 과목의 서답형 문항을 사용하였다. 각 과목에서 1000개의 학생 답안을 추출하여 채점시간과 정확률을 평가하였다. 채점시간을 전체적으로 약 80% 이상 줄일 수 있었고 채점 정확률은 사회 및 국어 과목에 대해 각각 98.7%와 97.2%로 나타났다. 앞으로 자동 채점 시스템의 성능을 개선하고 인간 채점자의 집중도를 높일 수 있도록 인터페이스를 개선한다면 국가수준의 대단위 평가에 충분히 활용할 수 있을 것으로 생각한다.

  • PDF

Automatic Classification of Academic Articles Using BERT Model Based on Deep Learning (딥러닝 기반의 BERT 모델을 활용한 학술 문헌 자동분류)

  • Kim, In hu;Kim, Seong hee
    • Journal of the Korean Society for information Management
    • /
    • v.39 no.3
    • /
    • pp.293-310
    • /
    • 2022
  • In this study, we analyzed the performance of the BERT-based document classification model by automatically classifying documents in the field of library and information science based on the KoBERT. For this purpose, abstract data of 5,357 papers in 7 journals in the field of library and information science were analyzed and evaluated for any difference in the performance of automatic classification according to the size of the learned data. As performance evaluation scales, precision, recall, and F scale were used. As a result of the evaluation, subject areas with large amounts of data and high quality showed a high level of performance with an F scale of 90% or more. On the other hand, if the data quality was low, the similarity with other subject areas was high, and there were few features that were clearly distinguished thematically, a meaningful high-level performance evaluation could not be derived. This study is expected to be used as basic data to suggest the possibility of using a pre-trained learning model to automatically classify the academic documents.

RTWQI(Real Time Water Quality Index) evaluation of domestic lakes using automatic measurement network data (자동측정망 데이터를 활용한 국내 호소 실시간 수질지수 평가)

  • Kim, Seon Ung;Hong, Eun Mi
    • Proceedings of the Korea Water Resources Association Conference
    • /
    • 2022.05a
    • /
    • pp.174-174
    • /
    • 2022
  • 수질지수는 여러 수질 데이터 값을 수학적으로 결합하고 다 변수 특성을 줄여 수치 및 등급으로 나타낸 지표이다. 수질지수를 통해 수질을 평가하고 서로 다른 위치와 시간의 수역을 종합적으로 비교할 수 있으며 수자원관리에 있어 정책입안자, 의사결정자, 국민이 수질에 대해 일반적이고 쉽게 이해할 수 있다. 현재 환경부에서는 국내수질자동측정망 최근 12시간 데이터 값을 근거로 실시간수질지수 RTWQI(Real-Time Water Quality)값을 제공한다. 국내 호소에 설치된 수질 자동측정망은 총 8개소이며 매 시간 공통 항목인 수온, pH, DO, 전기전도도, TOC 5개, 선택항목인 탁도, Chl-a, TN, TP, 중금속, 생물감시항목 등 27개를 측정한다. RTWQI는 캐나다에서 2001년에 개발된 CCME WQI(Canadian Council of Ministers of the Environment Water Quality Index) 산출식을 기초하였으며 F1(기준치를 위반하는 수질항목의 개수/ 총 수질항목 개수), F2(기준치를 위반한 샘플들의 총 횟수/총 샘플횟수) F3(기준치를 위반한 정도) 3가지의 요소로 계산된다. 그러나RTWQI 산출식의 기초인 CCME WQI는 개발 이후 여러 문제점들은 개선되었으나 F1이 다른 F2, F3 보다 CCME WQI 점수의 기여도가 2배 이상 높은 문제점은 개선하지 못하였다. 본 연구에서는 수질자동측정망이 설치된 2012년 7월부터 2021년 12월 동안 매 시간 별 수질 데이터를 이용하였다. 또한 CCME WQI 문제점을 개선한 MWQI(Modification of Canadian water qaulity index)를 기초하여 실시간 수질지수를 재 산정하였다. 추가적으로 Pearson 상관관계 분석 및 추가 통계분석을 통해 환경부에서 제공하는 기존의 RTWQI, 개선된 실시간수질지수, 한국형 호소수질평가지수 LQI(Lake Water Quality Index)를 비교 및 평가하였다. 이러한 연구를 통해 정확성 높은 수질지수를 찾고 수자원 관리 정책 수립에 적극 활용 될 수 있을 것으로 사료된다.

  • PDF

Automatic Generation of Code-clone Reference Corpus (코드클론 표본 집합체 자동 생성기)

  • Lee, Hyo-Sub;Doh, Kyung-Goo
    • Journal of Software Assessment and Valuation
    • /
    • v.7 no.1
    • /
    • pp.29-39
    • /
    • 2011
  • To evaluate the quality of clone detection tools, we should know how many clones the tool misses. Hence we need to have the standard code-clone reference corpus for a carefully chosen set of sample source codes. The reference corpus available so far has been built by manually collecting clones from the results of various existing tools. This paper presents a tree-pattern-based clone detection tool that can be used for automatic generation of reference corpus. Our tool is compared with CloneDR for precision and Bellon's reference corpus for recall. Our tool finds no false positives and 2 to 3 times more clones than CloneDR. Compared to Bellon's reference corpus, our tools shows the 93%-to-100% recall rate and detects far more clones.

Customization for English-Korean Spoken Language Machine Translation (영한 대화체 자동번역을 위한 특화 방안)

  • Lee, Ki-Young;Roh, Yoon-Hyung;Kwon, Oh-Woog;Choi, Sung-Kwon;Kim, Young-Gil
    • Annual Conference on Human and Language Technology
    • /
    • 2009.10a
    • /
    • pp.50-55
    • /
    • 2009
  • 현재, 자동번역의 도메인은 응용 프로그램의 요구에 따라, 점차 문어체에서 대화체(spoken language)로 옮겨가고 있는 추세이다. 본 논문은 대화체가 지니는 특성을 자동번역 시스템을 구성하는 각 모듈별 및 지식 관점에서 분석하였다. 특성 분석을 기반으로 하여, 본 논문에서는 여행 영역을 대상으로 하는 대화체 자동번역시스템의 특화를 수행하였다. 대화체 자동번역을 위한 새로운 지식으로 구조화 번역메모리(Translation Memory)가 도입되었으며, 시스템을 구성하는 각 모듈별로 대화체 특화가 이루어졌다. 또한 기존의 문어체용 기구축 패턴 등이 정비되었으며, 고빈도 대화체 표현에 대한 신규 패턴이 도입되었다. 제안하는 방법의 검증을 위해 수동평가를 수행하였으며, 그 결과, 영한 대화체 자동번역에 있어서 번역률 향상이 있었다.

  • PDF

Quantitative Evaluation of Image Quality using Automatic Exposure Control & Sensitivity in the Digital Chest Image (디지털 흉부영상에서 자동노출제어 및 감도변화를 이용한 영상품질의 정량적인 평가)

  • Lee, Jin-Soo;Ko, Seong-Jin;Kang, Se-Sik;Kim, Jung-Hoon;Kim, Dong-Hyun;Kim, Changsoo
    • The Journal of the Korea Contents Association
    • /
    • v.13 no.8
    • /
    • pp.275-283
    • /
    • 2013
  • The patient radiation dose is different depending on selection of Ion chamber when taking Chest PA which using AEC. In this paper, we studied acquiring the best diagnostic images according to selection of Ion chamber on AEC mode as well as minimizing patient radiation dose. Experimental methods were selection of Ion chamber and change of sensitivity under the same conditions as Chest PA projection. At AEC mode, two upper ion chambers sensors and one lower ion chamber sensor were divided into 7 cases according to selection of on/off. after measuring five times respectively, we obtained average value and calculated exposure dose. Image assessment was done with measured Modulation Transfer Function, Peak Signal to Noise Ratio, Root Mean Square, Signal to Noise Ratio, Contrast to Noise Ratio, Mean to Standard deviation Ratio respectively. In exposure assessment results, selection of two upper chambers was the lowest. In resolution assessment results, image of two upper chambers had the second high spatial frequency at sensitivity at 625(High) was 1.343 lp/mm. RMS value of image selecting two upper chambers was low secondly. SNR, CNR, MSR were the high value secondly. As the sensitivity was increased, radiation dose was decreased but better image could be obtained on image quality. In order to obtain the best medical images while minimizing the dose, usage of two upper ion chambers is considered to be clinically useful at sensitivity 625(High).

Automatic scoring of mathematics descriptive assessment using random forest algorithm (랜덤 포레스트 알고리즘을 활용한 수학 서술형 자동 채점)

  • Inyong Choi;Hwa Kyung Kim;In Woo Chung;Min Ho Song
    • The Mathematical Education
    • /
    • v.63 no.2
    • /
    • pp.165-186
    • /
    • 2024
  • Despite the growing attention on artificial intelligence-based automated scoring technology as a support method for the introduction of descriptive items in school environments and large-scale assessments, there is a noticeable lack of foundational research in mathematics compared to other subjects. This study developed an automated scoring model for two descriptive items in first-year middle school mathematics using the Random Forest algorithm, evaluated its performance, and explored ways to enhance this performance. The accuracy of the final models for the two items was found to be between 0.95 to 1.00 and 0.73 to 0.89, respectively, which is relatively high compared to automated scoring models in other subjects. We discovered that the strategic selection of the number of evaluation categories, taking into account the amount of data, is crucial for the effective development and performance of automated scoring models. Additionally, text preprocessing by mathematics education experts proved effective in improving both the performance and interpretability of the automated scoring model. Selecting a vectorization method that matches the characteristics of the items and data was identified as one way to enhance model performance. Furthermore, we confirmed that oversampling is a useful method to supplement performance in situations where practical limitations hinder balanced data collection. To enhance educational utility, further research is needed on how to utilize feature importance derived from the Random Forest-based automated scoring model to generate useful information for teaching and learning, such as feedback. This study is significant as foundational research in the field of mathematics descriptive automatic scoring, and there is a need for various subsequent studies through close collaboration between AI experts and math education experts.

Design and Implementation of Team Project Assessment System using auto generated web survey document (자동 생성 웹 설문지를 이용한 팀 프로젝트 평가 시스템의 설계 및 구현)

  • Lee, Mi-Young;Min, Su-Hong;Cho, Dong-Sub
    • The Journal of Korean Association of Computer Education
    • /
    • v.6 no.4
    • /
    • pp.195-207
    • /
    • 2003
  • The Seventh Curriculum uses not only individual assessment but also team assessment method that organizes and solves assignments by team unit. It also helps students to learn cooperation and responsibility and share the ideas and process of the team project with other students through class presentation. It is also cooperative learning which is performed by several students together. Therefore, the assessment of team project is required to synthetically assess the performance process not the itself. This thesis will examine the actual problems about team project assessment and analyze related literatures. Then, this study designs and implements a practical system which alleviates the burden of teachers in charge of a team project assessment and improves reliability and validity in assessing team projects through multilateral assessment aiming at process as well as result objectives.

  • PDF

Concept-based Automatic Scoring System for Korean Free-text or Constructed Answers (개념 기반 한국어 서답형 답안의 자동채점 시스템)

  • Park, Il-Nam;Noh, Eun-Hee;Sim, Jae-Ho;Kim, Myung-Hwa;Kang, Seung-Shik
    • Annual Conference on Human and Language Technology
    • /
    • 2012.10a
    • /
    • pp.69-72
    • /
    • 2012
  • 본 논문은 한국어 서답형(단어, 구 수준) 문항 유형을 분석하고 실제 채점자가 채점 기준표를 보고 채점하는 방법을 컴퓨터가 인식할 수 있도록 정답 템플릿을 설계 및 개념 정의를 하여 한국어 서답형에 특화된 자동채점 시스템 방법을 제시한다. 본 시스템을 사용하여 1000개의 학생 답안지에 대한 유형 가지수 500개 이하의 2011년도 학업성취도 평가 과학 6개 문항에 대하여 채점 기준표 내용을 정답 템플릿으로 작성한 뒤 250개 학생 답안을 학습데이터로, 정답 템플릿을 업데이트로 사용, 750개 학생 답안에 대하여 자동채점한 결과, 평균 카파계수 0.84라는 수치로서 실제 사람 채점 결과와 거의 완벽히 일치라는 결과를 얻었다.

  • PDF