• Title/Summary/Keyword: Intraclass Correlation

Search Result 364, Processing Time 0.02 seconds

Unenhanced Breast MRI With Diffusion-Weighted Imaging for Breast Cancer Detection: Effects of Training on Performance and Agreement of Subspecialty Radiologists

  • Yeon Soo Kim;Su Hyun Lee;Soo-Yeon Kim;Eun Sil Kim;Ah Reum Park;Jung Min Chang;Vivian Youngjean Park;Jung Hyun Yoon;Bong Joo Kang;Bo La Yun;Tae Hee Kim;Eun Sook Ko;A Jung Chu;Jin You Kim;Inyoung Youn;Eun Young Chae;Woo Jung Choi;Hee Jeong Kim;Soo Hee Kang;Su Min Ha;Woo Kyung Moon
    • Korean Journal of Radiology
    • /
    • 제25권1호
    • /
    • pp.11-23
    • /
    • 2024
  • Objective: To investigate whether reader training improves the performance and agreement of radiologists in interpreting unenhanced breast magnetic resonance imaging (MRI) scans using diffusion-weighted imaging (DWI). Materials and Methods: A study of 96 breasts (35 cancers, 24 benign, and 37 negative) in 48 asymptomatic women was performed between June 2019 and October 2020. High-resolution DWI with b-values of 0, 800, and 1200 sec/mm2 was performed using a 3.0-T system. Sixteen breast radiologists independently reviewed the DWI, apparent diffusion coefficient maps, and T1-weighted MRI scans and recorded the Breast Imaging Reporting and Data System (BI-RADS) category for each breast. After a 2-h training session and a 5-month washout period, they re-evaluated the BI-RADS categories. A BI-RADS category of 4 (lesions with at least two suspicious criteria) or 5 (more than two suspicious criteria) was considered positive. The per-breast diagnostic performance of each reader was compared between the first and second reviews. Inter-reader agreement was evaluated using a multi-rater κ analysis and intraclass correlation coefficient (ICC). Results: Before training, the mean sensitivity, specificity, and accuracy of the 16 readers were 70.7% (95% confidence interval [CI]: 59.4-79.9), 90.8% (95% CI: 85.6-94.2), and 83.5% (95% CI: 78.6-87.4), respectively. After training, significant improvements in specificity (95.2%; 95% CI: 90.8-97.5; P = 0.001) and accuracy (85.9%; 95% CI: 80.9-89.8; P = 0.01) were observed, but no difference in sensitivity (69.8%; 95% CI: 58.1-79.4; P = 0.58) was observed. Regarding inter-reader agreement, the κ values were 0.57 (95% CI: 0.52-0.63) before training and 0.68 (95% CI: 0.62-0.74) after training, with a difference of 0.11 (95% CI: 0.02-0.18; P = 0.01). The ICC was 0.73 (95% CI: 0.69-0.74) before training and 0.79 (95% CI: 0.76-0.80) after training (P = 0.002). Conclusion: Brief reader training improved the performance and agreement of interpretations by breast radiologists using unenhanced MRI with DWI.

Semi-Quantitative Scoring of Late Gadolinium Enhancement of the Left Ventricle in Patients with Ischemic Cardiomyopathy: Improving Interobserver Reliability and Agreement Using Consensus Guidance from the Asian Society of Cardiovascular Imaging-Practical Tutorial (ASCI-PT) 2020

  • Cherry Kim;Chul Hwan Park;Do Yeon Kim;Jaehyung Cha;Bae Young Lee;Chan Ho Park;Eun-Ju Kang;Hyun Jung Koo;Kakuya Kitagawa;Min Jae Cha;Rungroj Krittayaphong;Sang Il Choi;Sanjaya Viswamitra;Sung Min Ko;Sung Mok Kim;Sung Ho Hwang;Nguyen Ngoc Trang;Whal Lee;Young Jin Kim;Jongmin Lee;Dong Hyun Yang
    • Korean Journal of Radiology
    • /
    • 제23권3호
    • /
    • pp.298-307
    • /
    • 2022
  • Objective: This study aimed to evaluate the effect of implementing the consensus statement from the Asian Society of Cardiovascular Imaging-Practical Tutorial 2020 (ASCI-PT 2020) on the reliability of cardiac MR with late gadolinium enhancement (CMR-LGE) myocardial viability scoring between observers in the context of ischemic cardiomyopathy. Materials and Methods: A total of 17 cardiovascular imaging experts from five different countries evaluated CMR obtained in 26 patients (male:female, 23:3; median age [interquartile range], 55.5 years [50-61.8]) with ischemic cardiomyopathy. For LGE scoring, based on the 17 segments, the extent of LGE in each segment was graded using a five-point scoring system ranging from 0 to 4 before and after exposure according to the consensus statement. All scoring was performed via web-based review. Scores for slices, vascular territories, and total scores were obtained as the sum of the relevant segmental scores. Interobserver reliability for segment scores was assessed using Fleiss' kappa, while the intraclass correlation coefficient (ICC) was used for slice score, vascular territory score, and total score. Inter-observer agreement was assessed using the limits of agreement from the mean (LoA). Results: Interobserver reliability (Fleiss' kappa) in each segment ranged 0.242-0.662 before the consensus and increased to 0.301-0.774 after the consensus. The interobserver reliability (ICC) for each slice, each vascular territory, and total score increased after the consensus (slice, 0.728-0.805 and 0.849-0.884; vascular territory, 0.756-0.902 and 0.852-0.941; total score, 0.847 and 0.913, before and after implementing the consensus statement, respectively. Interobserver agreement in scoring also improved with the implementation of the consensus for all slices, vascular territories, and total score. The LoA for the total score narrowed from ± 10.36 points to ± 7.12 points. Conclusion: The interobserver reliability and agreement for CMR-LGE scoring for ischemic cardiomyopathy improved when following guidance from the ASCI-PT 2020 consensus statement.

정상 성인에서 스마트폰 녹음을 위한 마이크 유형 간 음향학적 측정치 비교 (A comparison of acoustic measures among the microphone types for smartphone recordings in normal adults)

  • 박정인;이승진
    • 말소리와 음성과학
    • /
    • 제16권2호
    • /
    • pp.49-58
    • /
    • 2024
  • 본 연구에서는 정상음성사용자를 대상으로 음성검사를 위한 고가의 음성 녹음 장비인 Computerized Speech Lab(CSL) 대신 스마트폰에 적용 가능한 단일지향성 유선 핀마이크(WIRED), 스마트폰의 자체 내장 무지향성 마이크(SMART), 블루투스 무선 이어폰인 갤럭시 버즈2 프로(WIRELESS)로 녹음된 음성샘플의 음향학적 측정치를 비교하고자 하였다. 연구대상은 최근 3개월 이내 호흡기 질환으로 이비인후과에 내원한 적이 없는 정상성인 40명(남 12명, 여 28명)이었으며, 소음이 통제된 방음 부스에서 모음 /아/ 연장 발성(4초) 과제와 '산책' 문장, '가을' 문단 읽기 과제를 네 가지의 기기로 동시에 녹음하였다. 4종의 샘플들에 대하여 CSL 녹음을 기준으로 동기화 작업을 진행하였으며, MDVP와 ADSV, VOXplot 프로그램을 이용하여 분석하였다. 연구 결과, F0, shimmer, noise-to-harmonic ratio를 제외한 다른 변수들에서 유의미한 차이가 있었다. 특히 SRV, SRS, CSIDV, CSIDS, AVQI의 경우 CSL에 비해 WIRED의 CSIDV, CSIDS, AVQI 중증도가 낮았던 반면, SMART에서는 높게 나타났다. SRV, SRS의 경우 반대의 경향이 나타났으며, WIRELESS는 과제에 따라 다른 경향이 있었다. CSL과 다른 마이크 유형들은 동일한 변수 간에는 모두 양의 상관관계를 보였으며, F0와 CPPV가 모든 유형에서 공히 강한 양의 상관관계를 보였다. ICC 또한 F0와 CPPV가 모두 0.9 이상으로 가장 높았다. 본 연구에서 사용된 마이크를 음향학적 분석을 위한 녹음 도구로 사용할 때, F0와 CPPV의 경우 신뢰도 높은 분석 변수로 마이크 유형과 무관하게 포함할 수 있고, SR, CSID, AVQI의 경우 마이크 유형에 따라 분석 및 해석에 주의를 기울일 필요가 있을 것으로 판단된다.

게이트 심장 혈액풀 스캔에서 심실중격 각도에 따른 좌전사위상 변화에 대한 연구 (Effect of the Angle of Ventricular Septal Wall on Left Anterior Oblique View in Multi-Gated Cardiac Blood Pool Scan)

  • 유연욱;이충운;서영덕;최호용;김윤철;김용근;원우재;방지인;이수진;김태성
    • 핵의학기술
    • /
    • 제20권1호
    • /
    • pp.13-19
    • /
    • 2016
  • 목적: 게이트 심장 혈액풀 스캔(Multi-gated cardiac blood pool, GBP)은 좌심실의 기능을 비침습적으로 검사할 수 있는 간편한 방법이며 이를 통해 얻을 수 있는 좌심실 심박출 계수(Left ventricular ejection fraction, LVEF)는 허혈성심질환이나 판막질환 등의 심질환에 있어서 예후를 결정할 수 있는 중요한 지표로 간주되고 있다. 정확한 LVEF를 산출하기 위해서 최적중격상(best septal view)을 얻어야한다. 본 연구는 심실중격의 각도를 측정하여 최적중격 영상을 얻고자 하였고, LAO 45 영상과의 정량분석 값을 비교하고자 한다. 대상 및 방법: 2015년 3월부터 7월 사이에 국립암센터 핵의학과에서 GBP 스캔을 실시한 환자 중에서 혈관조영증강 흉부 CT를 시행한 265명을 기본 대상으로 하였다. 혈관조영증강흉부 CT의 횡단면 영상에서 좌심실의 크기가 가장 크고, 심실중격의 경계가 선명한 곳을 선택한다. 극상돌기와 흉골 또는 검상돌기의 중심을 잇는 선을 가상 중앙선이라 하고, 심실중격의 경계와 평행이 되는 선과 가상 중앙선의 예각(${\theta}$)을 측정한다. ${\theta}$와 45 각도와의 차이가 ${\pm}10^{\circ}$ 이상 차이나는 환자를 대상으로 LAO 45와 $LAO\;{\theta}$ 영상을 촬영하고 자동 관심영역 설정 모드(Automated Region Of Interest; Auto-ROI)와 수동 관심영역 설정모드(Manual Region Of Interest; Manual-ROI)에서 LVEF를 5번씩 구하여 서로 비교 평가하였다. 결과: 대상 환자 265명에서 ${\theta}$의 전체 평균은 $37.0{\pm}8.5^{\circ}$ 이었다. 그 중 ${\theta}$$45^{\circ}$ 각도의 차이가 ${\pm}10^{\circ}$ 이상 차이나는 환자는 총 88명이었고 평균은 $29.3{\pm}6.1^{\circ}$ 이었다. LAO 45와 ${\theta}$간 측정한 LVEF 차이는 Auto-ROI와 Manual-ROI 모두에서 통계적으로 유의한 차이를 보였다(P < 0.001, both). 이러한 차이는 ${\theta}$와의 유의한 상관관계는 보이지 않았다. 두 방법 모두 5번 반복 측정을 통해 구한 급내 상관계수에서도 모두 95% 이상으로 우수한 재현성을 보였다. Auto-ROI 와 manual-ROI에서 측정한 LVEF 차이에 대하여 LAO 45 및 LAO ${\theta}$ 에서의 대응표본 T검정으로 비교한 결과, 두 측정 각도에서의 유의한 차이는 보이지 않았다. 고찰 및 결론: 영상의학과에서 시행하고 있는 조영증강흉부 CT 영상을 통하여 심실중격 각도(${\theta}$)를 구하고 이를 GBP 스캔의 좌전사위상에 반영하였다. 이러한 방법은 기존의 LAO 45로 일괄적으로 촬영하던 방법과 유의한 차이를 보였다.

  • PDF