The Use of Continuous Confidence Judgments in ROC of Digital Radiography

디지털 X선영상 평가에서 연속확신도법 ROC의 적용

  • Kim, Hark-Sung (Department of Radiologic Technology, Dongnam Health University) ;
  • Lee, In-Ja (Department of Radiologic Technology, Dongnam Health University) ;
  • Kim, Sung-Chul (Department of Radiological Science, Gachon University of Medicine and Science)
  • 김학성 (동남보건대학 방사선과) ;
  • 이인자 (동남보건대학 방사선과) ;
  • 김성철 (가천의과학대학교 방사선학과)
  • Published : 2009.06.30

Abstract

In general, the discrete confidence judgments that use five-step assessment method have been used to assess the medical images by ROC. TPF or FPF can be computed easily with this independent reading test. However, during experiments, it happens frequently that adequate distribution for observers is required to smoothly estimate the ROC curve. In addition, data becomes invalid for distribution of the created categories. To solve such problems or to apply the ROC interpretation to data that is not obtained from the experimental observation, the continuous confidence judgements (CCJ) has been proposed, which implements ROC interpretation using continuously-distributed experimental results without category classification has been used. As the use of CCJ to assess medical images was barely reported in Korea, we applied it to the assessment of chest digital images in this study. The results showed that a smooth ROC curve was obtained conveniently by the commercialized program and the characteristic value was measured easily. Therefore, it is recommended that this method can be applied to the assessment of digital medical images.

ROC에 의한 의료영상을 평가하는 방법으로 지금까지는 5단계로 평가하는 평정확신도법이 일반적으로 사용되었다. 이 평정확신도법에서는 TPF나 FPF의 산출을 쉽게 구하는 것이 가능하나, 실험에 있어서 부드럽게 ROC곡선의 추정을 하기 위해서 관찰자에 대해 적당한 카테고리 배분이 요구되거나 또 짜여진 카테고리 배분을 위해 그 데이터가 무효해지는 경우가 많다. 이러한 문제를 해결하기 위해 또는 관찰실험 이외의 데이터에도 ROC해석의 응용이 가능해지도록 카테고리 분류가 되어 있지 않은 연속적으로 분포된 실험결과를 이용 ROC 해석을 행하는 방법인 연속확신도법이 보고 되었다. 하지만 국내에서는 의료영상의 평가에 연속확신도법을 적용한 예가 거의 없어서 흉부 디지털영상의 평가에 적용해 보았다. 그 결과 상용화된 프로그램에 의하여 부드러운 ROC곡선을 그릴 수 있었으며, 특성값을 쉽게 측정할 수 있어 디지털 의료영상의 평가에 적절히 사용될 수 있으리라 사료된다.

Keywords

References

  1. 김정민, 김호경 : 의료용화상정보학, 대학서림, 124-143, 2008
  2. 김정민, 김성철, 최종학 외 : 방사선영상정보학, 신광 출판사, 346 -347, 2008
  3. 허준, 이선숙, 이인자, 김성수 : 증감지와 격자에 따른 화상의 ROC곡선의 평가, 대한방사선기술학회지, 17(2), 45-49, 1994
  4. 안진신, 장명미, 정경모 외 : 고관전압 흉부촬영의 가상결절을 이용한 ROC평가, 대한방사선기술학회지, 15(2), 25-30, 1992
  5. Soon-A Hwang, Joon Beom Seo, Byeong-kyoo Choi et al. : Liquid-crystal Display Monitor and Cathode-ray Tube Monitor : A Comparison of Observer Performance in the Detection of Small Solitary Pulmonary Nodules, Korea J Radiol., 4, 153-156, 2003 https://doi.org/10.3348/kjr.2003.4.3.153
  6. 신수인, 김종일, 김성철 : 디지털 흉부 촬영에서 구리필터사용에 따른 환자표면선량 감소효과에 관한 연구, 방사선기술과학, 223-228, 31(3), 2008
  7. KS A 4017, 의료용 X선관 통칙, 8-19, 1997
  8. 김정민, 정회원, 임은경 : 비정질평판형 측정기를 이용한 디지털 흉부 방사선영상에서의 효과적인 관전압 선택, 방사선기술과학, 28(4), 273-277, 2005
  9. Charles E. Metz : ROCKIT 1.1B2 beta version Windows Operating System, Kurt Rossmann Lab., 1-52, 2006
  10. http://xray.bsd.uchicago.edu/krl/KRL_ROC/common_troubles3.htm
  11. Charles E. Metz, Xiaochuan Pan : “Proper” binomal ROC Curves : Theory and Maximumlikehood Estimation, Journal of Mathematical Phychology, 43, 1-33, 1999 https://doi.org/10.1006/jmps.1998.1218
  12. AAPM report No. 31: Standardized Methods for Measuring Diagnostic X-ray Exposure, 6-7, 1990
  13. Host aichinger, Joachim dierker, Sigrid joitebarfu ${\beta}$, Manfred sabel : Radiation Exposure and Image Quality in X-ray Diagnostic Radiology, Springer, 78-79, 2004
  14. 권덕문, 김성수, 김영근 외 : Analog & digital.PACS 의료영상정보학, 대학서림, 188-189, 2002
  15. Howard E. Rockette, David Gur, Charles E. Metz : The use of Continuous and Discrete Confidence Judgments in Receiver Operating Characteristic Studies of Diagnostic Imaging Techniques, Investigative radiology, 27(2), 169-172, 1992 https://doi.org/10.1097/00004424-199202000-00016
  16. 藤田廣志 : ディヅタルヅオグラフィの畵像評價, 日本放射線技術學會 ディヅタル畵像の物理的評價検討班, 43-48