• 제목/요약/키워드: receiver operating characteristics (ROC)

검색결과 99건 처리시간 0.022초

Fault Prediction Using Statistical and Machine Learning Methods for Improving Software Quality

  • Malhotra, Ruchika;Jain, Ankita
    • Journal of Information Processing Systems
    • /
    • 제8권2호
    • /
    • pp.241-262
    • /
    • 2012
  • An understanding of quality attributes is relevant for the software organization to deliver high software reliability. An empirical assessment of metrics to predict the quality attributes is essential in order to gain insight about the quality of software in the early phases of software development and to ensure corrective actions. In this paper, we predict a model to estimate fault proneness using Object Oriented CK metrics and QMOOD metrics. We apply one statistical method and six machine learning methods to predict the models. The proposed models are validated using dataset collected from Open Source software. The results are analyzed using Area Under the Curve (AUC) obtained from Receiver Operating Characteristics (ROC) analysis. The results show that the model predicted using the random forest and bagging methods outperformed all the other models. Hence, based on these results it is reasonable to claim that quality models have a significant relevance with Object Oriented metrics and that machine learning methods have a comparable performance with statistical methods.

고속도로 이용자의 승차감 평가특성 및 만족도 분석과 ROC 곡선을 이용한 평탄성 관리기준 적정성 검토 (Analysis of Riding Quality Acceptability and Characteristics of Expressway Users and Evaluation of MRI Thresholds using Receiver Operating Characteristic curves)

  • 이재훈;손덕수;류성우;김용원;박준영
    • 한국도로학회논문집
    • /
    • 제20권2호
    • /
    • pp.35-44
    • /
    • 2018
  • PURPOSES : The purpose of this research is to analyze the characteristics of panels that affect the evaluating results of riding quality and to evaluate the appropriateness of roughness management criteria based on ride comfort satisfaction. METHODS : In order to analyze the influence of panel characteristics of riding quality, 33 panels, consisting of civilians and experts, were selected. Also, considering the roughness distribution of the expressway, 35 sections with MRI ranging from 1.17 m/km to 4.65 m/km were selected. Each panel boarded a passenger car and evaluated the riding quality with grades from 0 to 10, and assessed whether it was satisfied or not. After removing outlier results using a box plot technique, 964 results were analyzed. An ANOVA was conducted to evaluate the effects of panel expertise, age, driving experience, vehicle ownership, and gender on the evaluation results. In addition, by using the receiver operating characteristics (ROC) curve, the MRI value, which can most accurately evaluate the satisfaction with riding quality, was derived. Then, the compatibility of MRI was evaluated using AUC as a criterion to assess whether the riding quality was satisfactory. RESULTS : Only the age of the panel participants were found to have an effect on the riding quality satisfaction. It was found that satisfaction with riding quality and MRI are strongly correlated. The satisfaction rate of roughness management criteria on new (MRI 1.6 m/km) and maintenance (MRI 3.0 m/km) expressways were 95% and 53%, respectively. As a result of evaluating the roughness management criteria by using the ROC curve, it was found that the accuracy of satisfaction was the highest at MRI 3.1-3.2 m/km. In addition, the AUC of the MRI was about 0.8, indicating that the MRI was an appropriate index for evaluating the riding quality satisfaction. CONCLUSIONS : Based on the results, the distribution of the panels' age should be considered when panel rating is conducted. From the results of the ROC curve, MRI of 3.0 m/km, which is a criterion of roughness management on maintenance expressways, is considered as appropriate.

다수의 송신 안테나가 있는 하향 링크에서 W-CDMA 단말기 다중 경로 검색기의 설계 및 성능분석 (Performance Analysis and Design of a WCDMA Mobile Station's Multi-path Searcher for Down-link with Multiple Transmit Antennas)

  • 김영주;원승환;김은기;이인성
    • 대한전자공학회논문지TC
    • /
    • 제43권1호
    • /
    • pp.95-102
    • /
    • 2006
  • W-CDMA 하향 링크에서 다수의 송신 안테나가 있을 때, 레일리 페이딩 채널에서 단말기 다중 경로 검색기의 설계 및 성능을 분석한다. 송신 안테나가 1개, 2개, 그리고 4개일 경우 송신기 및 수신기 구조를 제시하고, 이론적 분석을 확증하기 위해 컴퓨터 시뮬레이션으로 수신동작특성(ROC, receiver operating characteristics)을 구하여 이론값과 비교 및 분석을 한다. 또한 double-dwell 직렬 검색기의 파라미터들을 송신 안테나 수에 따라 최적화하는 절차를 제안한다. 이론적 성능 분석 및 시뮬레이션 결과는 송신 안테나가 4개 이상일 경우 post-detection 적분이 필요 없으며, 송신 다이버시티 차수가 증가한다고 항상 검출(detection) 성능이 향상되는 것은 아니고, 오히려 수신 파일럿의 수신 세기가 상대적으로 작을 때는 송신 안테나 수가 증가할 때 검출 성능이 저하되기도 함을 보인다. 본 논문의 성능 분석 결과는 송신 다이버시티 차수를 증가시키는데 매우 실제적인 기준을 제공한다.

W-CDMA 下向 링크에서 다수의 송신 안테나가 있는 경우 단말기 다중 경로 검색기의 설계 및 성능 분석 (Performance Analysis and Design of a Mobile Station′s Multi-path Searcher for W-CDMA Down-link with Multiple Transmit Antennas)

  • 원승환;김영주
    • 한국통신학회논문지
    • /
    • 제29권10C호
    • /
    • pp.1355-1362
    • /
    • 2004
  • W-CDMA 하향 링크에서 다수의 송신 안테나가 있을 때, 레일리 페이딩 채널에서 이동국 다중 경로 검색기의 설계 및 성능을 분석한다. 이론적 분석을 확증하기 위해, 송신 안테나가 1개, 2개, 그리고 4개일 경우 송신기 및 수신기 구조를 제시하고, 컴퓨터 시뮬레이션으로 수신동작특성(ROC, receiver operating characteristics)을 구하여 이론 값과 비교 및 분석을 한다. 또한 double-dwell 직렬 검색기의 파라미터들을 송신 안테나 수에 따라 최적화하는 절차를 제안한다. 이론적 성능 분석 및 시뮬레이션 결과는 송신 안테나가 4개 이상일 경우 post-detection 적분이 필요 없으며, 송신 다이버시티 차수가 증가한다고 항상 검출(detection) 성능이 향상되는 것은 아니고, 오히려 수신 파일럿의 수신 세기가 상대적으로 작을 때는 송신 안테나 수가 증가할 때 검출 성능이 저하되기도 함을 보인다. 본 논문의 성능 분석 결과는 송신 다이버시티 차수를 증가시키는데 매우 실제적인 기준을 제공한다.

적외선 영상 시퀀스에서 시간적 프로파일 기반의 외적을 사용한 소형 표적 검출 (Small Target Detection Using Cross Product Based on Temporal Profile in Infrared Image Sequences)

  • 김병익;배태욱;김영춘;안상호;김덕규
    • 한국통신학회논문지
    • /
    • 제35권1C호
    • /
    • pp.8-16
    • /
    • 2010
  • 본 논문은 적외선 영상 시퀀스 (infrared image sequences)에서 시간적 프로파일 (temporal profile)을 기반으로 한 시간적 화소 (temporal pixel)들의 외적 (cross product)을 사용한 새로운 소형 표적 검출 방법을 제안한다. 소형 표적 및 그 주변배경은 시간적 특성이 서로 다르므로, 시간적 프로파일에서 화소들의 외적을 사용한 가설검증을 통하여 표적 화소 및 배경화소를 구분하고, 그 결과를 기반으로 시간적 배경 (temporal background)을 예측한다. 소형 표적은 원 시간적 프로파일과 예측된 시간적 배경 프로파일의 차에 의해 검출한다. 기존 방법과 제안한 방법의 성능 비교를 위하여, ROC (receiver operating characteristics) 곡선을 실험에서 사용하였다. 실험결과에서 제안된 방법이 기존방법들보다 오경보율 (false alarm rate)이 낮고, 표적 및 배경에 대한 향상된 식별력을 가짐을 확인하였다.

최적화된 비선형 합성필터를 이용한 얼굴인증 시스템 (Face Verification System Using Optimum Nonlinear Composite Filter)

  • 이주민;염석원;홍승현
    • 대한전자공학회논문지SP
    • /
    • 제46권3호
    • /
    • pp.44-51
    • /
    • 2009
  • 본 논문에서는 상관에 기반 한 비선형 합성필터를 이용한 왜곡과 잡음에 강인한 얼굴인식 방법을 연구한다. 상관도 기반 방법은 얼굴 영역의 검출과 인증을 동시에 수행하여 보다 신속한 처리를 할 수 있다는 장점이 있다. 최적화된 비선형 합성필터는 학습영상의 출력 값을 일정하게 유지하면서 입력 영상과 잡음의 필터 출력에너지를 최소화함으로써 얻어진다. 입력 영상의 출력에너지를 최소화하여 허위표적과의 식별력을 부여하고 잡음의 출력에너지를 최소화하여 가산성 잡음에 대한 강인성을 증대한다. 본 논문에서는 비선형 합성필터를 두 개의 학습 영상으로 구성하여 표적의 왜곡과 저해상도 그리고 잡음 환경 하에서 얼굴 인증을 실험하였다. 실험결과는 비선형 합성필터가 SDF(synthetic discriminant function) 필터와 비교하여 ROC(receiver operating characteristics) 커브에서 우수한 성능을 보인다.

3차원 양방향 필터를 이용한 소형 표적 검출 (Small Target Detection Using 3-dimensional Bilateral Filter)

  • 배태욱
    • 한국멀티미디어학회논문지
    • /
    • 제16권6호
    • /
    • pp.746-755
    • /
    • 2013
  • 본 논문은 적외선 영상 시퀀스에서 2차원 양방향 필터 (bilateral filter)를 이용하여 표적의 공간적 정보를 추출하고, 시퀀스의 시간적 프로파일에서는 1차원 양방향 필터를 이용하여 표적의 시간적 정보를 추출하여 표적의 궤적을 검출하는 3차원 양방향 필터를 제안하였다. 평탄 배경 및 표적 영역, 에지 영역을 구별하기 위하여 2차원 영상에서는 공간적 분산값을 이용하며, 배경 프로파일 및 표적 프로파일, 에지 프로파일을 구별하기 위하여 화소의 시간적 프로파일에서는 시간적 분산값을 이용하였다. 이를 통하여 공간적으로는 표적이 없는 배경을 예측하고, 시간적으로는 표적이 없는 배경 프로파일을 생성한다. 최종적으로 공간적으로 예측된 배경 및 시간적으로 예측된 배경 프로파일을 이용하여 표적의 궤적을 추출한다. 기존 방법과 제안한 방법의 성능 비교를 위하여, ROC (receiver operating characteristics) 곡선을 실험에서 사용하였다. 실험결과에서 제안된 방법이 기존방법들보다 오경보율 (false alarm rate)이 낮고, 표적 및 배경에 대한 향상된 식별력을 가졌음을 확인하였다.

종이신문 열독자의 특성이 정기구독 여부에 미치는 영향에 대한 로지스틱 회귀분석 (Logistic regression analysis of newspaper readers characteristics affecting regular subscription)

  • 이세영;김재희
    • 응용통계연구
    • /
    • 제32권5호
    • /
    • pp.653-669
    • /
    • 2019
  • 뉴미디어의 등장과 발달로 인해, 과거 미디어의 대부분을 차지한 종이신문의 이용량이 점차 줄어들어 종이신문의 정기구독률이 2016년 14%로 매우 저조하게 나타났다. 따라서 본 연구는 종이신문 정기구독 여부에 영향을 미치는 열독자 요인을 파악하고자 수행되었다. 이를 위해 한국 언론 진흥재단의 2016년과 2017년의 언론수용자 의식조사의 자료를 분석에 사용하였다. 열독자의 성별, 연령, 학력, 가구소득, 열독일수, 열독시간, 열독분량을 열독자의 특성으로 지정하였으며, 정기구독 여부에 열독자의 어떠한 특성이 영향을 미치는지 알아보기 위해 다중 로지스틱 회귀를 적합하고 해석하였다.

소아중환자를 대상으로 한 PIM Ⅱ의 타당도 평가 (Evaluating the Validity of the Pediatric Index of Mortality Ⅱ in the Intensive Care Units)

  • 김정순;부선주
    • 대한간호학회지
    • /
    • 제35권1호
    • /
    • pp.47-55
    • /
    • 2005
  • Purpose: This study was to evaluate the validity of the Pediatric Index of Mortality Ⅱ(PIM Ⅱ). Method: The first values on PIM Ⅱ variables following ICU admission were collected from the patient's charts of 548 admissions retrospectively in three ICUs(medical, surgical, and neurosurgical) at P University Hospital and a cardiac ICU at D University Hospital in Busan from January 1, 2002 to December 31, 2003. Data was analyzed with the SPSSWIN 10.0 program for the descriptive statistics, correlation coefficient, standardized mortality ratio(SMR), validity index(sensitivity, specificity, positive predictive value, negative predictive value), and AUC of ROC curve. Result: The mortality rate was 10.9% (60 cases) and the predicted death rate was 9.5%. The correlation coefficient(r) between observed and expected death rates was .929(p<.01) and SMR was 1.15. Se, Sp, pPv, nPv, and the correct classification rate were .80, .96, .70, .98, and 94.0% respectively. In addition, areas under the curve (AUC) of the receiver operating characteristic(ROC) was 0.954 (95% CI=0.919~0.989). According to demographic characteristics, mortality was underestimated in the medical group and overestimated in the surgical group. In addition, the AUCs of ROC curve were generally high in all subgroups. Conclusion: The PIM Ⅱ showed a good, so it can be utilized for the subject hospital. better.

불면증 최소스크리닝척도의 심리측정적 특성과 적합성 검증 (Psychometric Properties of Korean Minimal Insomnia Screening Scale)

  • 김인자;김성재;김범종;최희정
    • 대한간호학회지
    • /
    • 제42권6호
    • /
    • pp.853-860
    • /
    • 2012
  • Purpose: The purposes of this study were to develop a Minimal Insomnia Screening Scale for Korean adults (KMISS) and to evaluate psychometric properties and discriminant ability of the developed scale. Methods: Data from a cross-sectional survey of 959 Korean adults were analyzed to develop the summated insomnia scale, which was evaluated in terms of reliability, validity, and discriminant ability by receiver operating characteristics (ROC) curve analysis. Results: Item-total correlations ranged between .71-.79 and Cronbach's ${\alpha}$ was .87. Adequate validity was also evident. ROC-curve analysis showed area under ROC was .87 (95% CI: .84-.90) and identified the optimal cut-off score as ${\leq}20$ (sensitivity, .83; specificity, .75; positive/negative predictive values, .40/.95). Using this cut-off score, the prevalence of insomnia in the study sample was 26.3% and most frequent among women and the oldest group. Conclusion: Data supports the psychometric properties of KMISS as a possible insomnia screening instrument. KMISS also shows promise as a convenient ultra-short screening measure of insomnia for adults and epidemiological studies in community health care settings.