Objective: Precise identification of landmarks on posteroanterior (PA) cephalograms is necessary when evaluating lateral problems such as facial asymmetry. The aim of the present study was to investigate whether the use of lateral (LA) cephalograms can reduce errors in landmark identification on PA cephalograms. Methods: Five examiners identified 16 landmarks (Cg, N, ANS, GT, Me, RO, Lo, FM, Z, Or, Zyg, Cd, NC, Ms, M, and Ag) on 32 PA cephalograms with and without LA cephalograms at the same time. The positions of the landmarks were recorded and saved in the horizontal and vertical direction. The mean errors and standard deviation of landmarks location according to the use of LA cephalograms were compared for each landmark. Results: Relatively small errors were found for ANS, Me, Ms, and Ag, while relatively large errors were found for N, GT, Z, Or, and Cd. No significant difference was found between the horizontal and vertical errors for Z and Or, while large vertical errors were found for N, GT, and Cd. The value of identification error was lower when the landmarks were identified using LA cephalograms. Statistically significant error reductions were found at N and Cd with LA cephalograms, especially in the vertical direction. Conclusions: The use of LA cephalograms during identification of landmarks on PA cephalograms could help reduce identification errors.
Objective: This in-vivo study aimed to compare landmark identification errors in anteroposterior (AP) and posteroanterior (PA) cephalograms generated from cone-beam computed tomography (CBCT) scan data in order to examine the feasibility of using AP cephalograms in clinical settings. Methods: AP and PA cephalograms were generated from CBCT scans obtained from 25 adults. Four experienced and four inexperienced examiners were selected depending on their experience levels in analyzing frontal cephalograms. They identified six cephalometric landmarks on AP and PA cephalograms. The errors incurred in positioning the cephalometric landmarks on the AP and PA cephalograms were calculated by using the straight-line distance and the horizontal and vertical components as parameters. Results: Comparison of the landmark identification errors in CBCT-generated frontal cephalograms revealed that landmark-dependent differences were greater than experienceor projection-dependent differences. Comparisons of landmark identification errors in the horizontal and vertical directions revealed larger errors in identification of the crista galli and anterior nasal spine in the vertical direction and the menton in the horizontal direction, in comparison with the other landmarks. Comparison of landmark identification errors between the AP and PA projections in CBCT-generated images revealed a slightly higher error rate in the AP projections, with no inter-examiner differences. Statistical testing of the differences in landmark identification errors between AP and PA cephalograms showed no statistically significant differences for all landmarks. Conclusions: The reproducibility of CBCT-generated AP cephalograms is comparable to that of PA cephalograms; therefore, AP cephalograms can be generated reliably from CBCT scan data in clinical settings.
본 연구의 목적은 일반두부방사선계측사진과 디지털두부방사선계측사진의 계측점 식별의 오차를 구하여 각각의 영상에서 오차의 특징을 살펴보고 재현성을 비교 평가하는 것이다. 연구 대상은 서울대학교병원 치과진료부 교정과에 내원한 교정 환자 중 18세에서 29세 사이의 성인 환자 중에서 일반두부방사선계측사진군과 디지털두부방사선계측사진군 각각 15명씩 30명을 무작위로 선택하여 연구 대상으로 하였으며 남녀의 구별이나 두개 안면 구조의 형태는 고려하지 않았다. 계측점은 동일인이 시간차를 두고 식별 하였다. 식별 후 각 계측점은 좌표 (x, y)로 표시하였으며, 처음 계측점을 식별한 두부방사선계측사진군을 T1으로, 1 주 후 동일 계측점을 재식별한 두부방사선계측사진군을 T2로, 1 달 후 동일계측점을 재식별한 두부방사선계측사진군을 T3로 분류하였다. 오차의 평균과 표준편차는 x좌표, y좌표로 구분하여 계산하였다. 초기 식별 1주 후 재식별시 오차는 T2-T1(x), T2-T1(y)로, 초기 측정 1달 후 재시별시 오차는 T3-T1(x), T3-T1(y)로 표시하였으며 일반두부방사선계측사진과 디지털두부방사선계측사진으로 각각 나누었다. 재현성의 평가를 위한 오차간의 통계학적인 검정은 independent t-test를 사용하였으며 다음과 같은 결론을 얻었다. 1. 디지털두부방사선계측사진이 일반두부방사선계측사진보다 일반적으로 오차의 평균 및 표준편차가 작았다. 2. 일반두부방사선계측사진의 오차와 디지털두부방사선계측사진의 오차가 통계학적으로 유의성 있는 차이를 보인 항목은 드물었다. 3.상의 향상을 통한 오차의 개선은 한계가 있었으며 상이 향상되더라도 각 계측점의 오차 의 경향은 크게 변하지 않았다.
Kim, Min-Jung;Liu, Yi;Oh, Song Hee;Ahn, Hyo-Won;Kim, Seong-Hun;Nelson, Gerald
대한치과교정학회지
/
제51권2호
/
pp.77-85
/
2021
Objective: To evaluate the accuracy of a multi-stage convolutional neural network (CNN) model-based automated identification system for posteroanterior (PA) cephalometric landmarks. Methods: The multi-stage CNN model was implemented with a personal computer. A total of 430 PA-cephalograms synthesized from cone-beam computed tomography scans (CBCT-PA) were selected as samples. Twenty-three landmarks used for Tweemac analysis were manually identified on all CBCT-PA images by a single examiner. Intra-examiner reproducibility was confirmed by repeating the identification on 85 randomly selected images, which were subsequently set as test data, with a two-week interval before training. For initial learning stage of the multi-stage CNN model, the data from 345 of 430 CBCT-PA images were used, after which the multi-stage CNN model was tested with previous 85 images. The first manual identification on these 85 images was set as a truth ground. The mean radial error (MRE) and successful detection rate (SDR) were calculated to evaluate the errors in manual identification and artificial intelligence (AI) prediction. Results: The AI showed an average MRE of 2.23 ± 2.02 mm with an SDR of 60.88% for errors of 2 mm or lower. However, in a comparison of the repetitive task, the AI predicted landmarks at the same position, while the MRE for the repeated manual identification was 1.31 ± 0.94 mm. Conclusions: Automated identification for CBCT-synthesized PA cephalometric landmarks did not sufficiently achieve the clinically favorable error range of less than 2 mm. However, AI landmark identification on PA cephalograms showed better consistency than manual identification.
Introduction: Identifying menton (Me) on posteroanterior cephalograms and three-dimensional (3D) cone-beam computed tomography (CBCT) images is difficult, because the midpoint of the symphyseal area is not identifiable after the mandibular symphysis fuses at an early age. The aim of this study was to evaluate the reliability of the identification of the genial tubercle (GT) in patients with mandibular asymmetry and to compare it with that of the traditional landmark, Me. Methods: The samples comprised 20 CBCT images of adults with mandibular asymmetry. Two examiners performed the identifications and measurements. Me and GT were marked, and the anteroposterior, vertical, and transverse distances to the three reference planes were measured on 3D-reconstructed CBCT images. The intra- and inter-examiner reliability of landmark identification of Me and GT were assessed using the intraclass correlation coefficient (ICC) and Bland-Altman plots. Results: The Me and GT landmarks showed excellent reliability ($ICC{\geq}0.993$) three-dimensionally. In the transverse evaluation, the ICC values of the GT (range, 0.997-0.999) tended to be slightly higher than those of Me (range, 0.993-0.996). In the Bland-Altman plots for the two separate assessments, Me showed a maximum error of 1.76 mm in the transverse direction, whereas the GT showed a maximum error of 0.96 mm in the 95% limit. Conclusions: Our results suggest that both Me and GT are clinically reliable and equally useful landmarks for the evaluation of mandibular asymmetry on CBCT images.
Kim, Young Hyun;Lee, Chena;Ha, Eun-Gyu;Choi, Yoon Jeong;Han, Sang-Sun
Imaging Science in Dentistry
/
제51권3호
/
pp.299-306
/
2021
Purpose: This study aimed to propose a fully automatic landmark identification model based on a deep learning algorithm using real clinical data and to verify its accuracy considering inter-examiner variability. Materials and Methods: In total, 950 lateral cephalometric images from Yonsei Dental Hospital were used. Two calibrated examiners manually identified the 13 most important landmarks to set as references. The proposed deep learning model has a 2-step structure-a region of interest machine and a detection machine-each consisting of 8 convolution layers, 5 pooling layers, and 2 fully connected layers. The distance errors of detection between 2 examiners were used as a clinically acceptable range for performance evaluation. Results: The 13 landmarks were automatically detected using the proposed model. Inter-examiner agreement for all landmarks indicated excellent reliability based on the 95% confidence interval. The average clinically acceptable range for all 13 landmarks was 1.24 mm. The mean radial error between the reference values assigned by 1 expert and the proposed model was 1.84 mm, exhibiting a successful detection rate of 36.1%. The A-point, the incisal tip of the maxillary and mandibular incisors, and ANS showed lower mean radial error than the calibrated expert variability. Conclusion: This experiment demonstrated that the proposed deep learning model can perform fully automatic identification of cephalometric landmarks and achieve better results than examiners for some landmarks. It is meaningful to consider between-examiner variability for clinical applicability when evaluating the performance of deep learning methods in cephalometric landmark identification.
Objective: To investigate the pattern of accuracy change in artificial intelligence-assisted landmark identification (LI) using a convolutional neural network (CNN) algorithm in serial lateral cephalograms (Lat-cephs) of Class III (C-III) patients who underwent two-jaw orthognathic surgery. Methods: A total of 3,188 Lat-cephs of C-III patients were allocated into the training and validation sets (3,004 Lat-cephs of 751 patients) and test set (184 Lat-cephs of 46 patients; subdivided into the genioplasty and non-genioplasty groups, n = 23 per group) for LI. Each C-III patient in the test set had four Lat-cephs: initial (T0), pre-surgery (T1, presence of orthodontic brackets [OBs]), post-surgery (T2, presence of OBs and surgical plates and screws [S-PS]), and debonding (T3, presence of S-PS and fixed retainers [FR]). After mean errors of 20 landmarks between human gold standard and the CNN model were calculated, statistical analysis was performed. Results: The total mean error was 1.17 mm without significant difference among the four time-points (T0, 1.20 mm; T1, 1.14 mm; T2, 1.18 mm; T3, 1.15 mm). In comparison of two time-points ([T0, T1] vs. [T2, T3]), ANS, A point, and B point showed an increase in error (p < 0.01, 0.05, 0.01, respectively), while Mx6D and Md6D showeda decrease in error (all p < 0.01). No difference in errors existed at B point, Pogonion, Menton, Md1C, and Md1R between the genioplasty and non-genioplasty groups. Conclusions: The CNN model can be used for LI in serial Lat-cephs despite the presence of OB, S-PS, FR, genioplasty, and bone remodeling.
본 연구는 두부계측방사선사진에서 선정한 계측점과, 3차원 CT영상에서 계측점을 선정하고 이를 정중시상면으로 투영하였을때 두 계측점 사이의 위치적 연관성에 대해 알아보고자 시행하였다. III급 부정교합을 주소로 서울대학교 치과병원에 내원한 환자 20명을 대상으로 술 전에 CT와 두부방사선사진을 촬영하였다. CT자료에서 계측점을 선정하고, 정중시상면을 기준으로 투사영상을 얻은 후에 이것을 110%로 확대하였다. 전두면과 후두골의 외연을 기준으로 두부방사선사진 투사도와 CT자료의 정중시상면 투사영상을 중첩하고, FH평면을 기준으로 공통 좌표계를 설정하였다. 이 좌표계를 기준으로 얻은 계측점 좌표값 차이의 평균과 표준편차를 구하고 paired t test를 시행하였다. X축은 $-0.14{\pm}0.65$에서 $-2.12{\pm}2.89\;mm$, Y축은 $0.34{\pm}0.78$에서 $-2.36{\pm}2.55\;mm$ ($6.79{\pm}3.04\;mm$)의 범위를 보였으며, 20개의 계측점 중 X축은 9개에서, Y축은 7개에서 통계적으로 유의한 차이가 없는 것으로 나타났다. 이러한 오차는 촬영자세에 따라 악골의 위치가 변화한 경우, 골단부에 위치함으로써 주변구조물에 가려진 경우, 해부학적 구조물의 중첩에 따른 식별오차, 계측점의 정의가 다른 경우 발생할 수 있다.
Sung-Hoon Han;Jisup Lim;Jun-Sik Kim;Jin-Hyoung Cho;Mihee Hong;Minji Kim;Su-Jung Kim;Yoon-Ji Kim;Young Ho Kim;Sung-Hoon Lim;Sang Jin Sung;Kyung-Hwa Kang;Seung-Hak Baek;Sung-Kwon Choi;Namkug Kim
대한치과교정학회지
/
제54권1호
/
pp.48-58
/
2024
Objective: To quantify the effects of midline-related landmark identification on midline deviation measurements in posteroanterior (PA) cephalograms using a cascaded convolutional neural network (CNN). Methods: A total of 2,903 PA cephalogram images obtained from 9 university hospitals were divided into training, internal validation, and test sets (n = 2,150, 376, and 377). As the gold standard, 2 orthodontic professors marked the bilateral landmarks, including the frontozygomatic suture point and latero-orbitale (LO), and the midline landmarks, including the crista galli, anterior nasal spine (ANS), upper dental midpoint (UDM), lower dental midpoint (LDM), and menton (Me). For the test, Examiner-1 and Examiner-2 (3-year and 1-year orthodontic residents) and the Cascaded-CNN models marked the landmarks. After point-to-point errors of landmark identification, the successful detection rate (SDR) and distance and direction of the midline landmark deviation from the midsagittal line (ANS-mid, UDM-mid, LDM-mid, and Me-mid) were measured, and statistical analysis was performed. Results: The cascaded-CNN algorithm showed a clinically acceptable level of point-to-point error (1.26 mm vs. 1.57 mm in Examiner-1 and 1.75 mm in Examiner-2). The average SDR within the 2 mm range was 83.2%, with high accuracy at the LO (right, 96.9%; left, 97.1%), and UDM (96.9%). The absolute measurement errors were less than 1 mm for ANS-mid, UDM-mid, and LDM-mid compared with the gold standard. Conclusions: The cascaded-CNN model may be considered an effective tool for the auto-identification of midline landmarks and quantification of midline deviation in PA cephalograms of adult patients, regardless of variations in the image acquisition method.
Journal of the Korean Association of Oral and Maxillofacial Surgeons
/
제36권4호
/
pp.262-269
/
2010
Introduction: Accurate diagnosis and treatment planning are very important for orthognathic surgery. A small error in diagnosis can cause postoperative functional and esthetic problems. Pre-existing 2-dimensional (D) chephalogram analysis has a high likelihood of error due to its intrinsic and extrinsic problems. A cephalogram can also be inaccurate due to the limited anatomic points, superimposition of the image, and the considerable time and effort required. Recently, an improvement in technology and popularization of computed tomography (CT) provides patients with 3-D computer based cephalometric analysis, which complements traditional analysis in many ways. However, the results are affected by the experience and the subject of the investigator. Materials and Methods: The effects of the sources human error in 2-D cephalogram analysis and 3-D computerized tomography cephalometric analysis were compared using Simplant CMF program. From 2008 Jan to 2009 June, patients who had undergone CT, cephalo AP, lat were investigated. Results: 1. In the 3 D and 2 D images, 10 out of 93 variables (10.4%) and 11 out 44 variables (25%), respectively, showed a significant difference. 2. Landmarks that showed a significant difference in the 2 D image were the points frequently superimposed anatomically. 3. Go Po Orb landmarks, which showed a significant difference in the 3 D images, were found to be the artificial points for analysis in the 2 D image, and in the current definition, these points cannot be used for reproducibility in the 3 D image. Conclusion: Generally, 3-D CT images provide more precise identification of the traditional cephalometric landmark. Greater variability of certain landmarks in the mediolateral direction is probably related to the inadequate definition of the landmarks in the third dimension.
본 웹사이트에 게시된 이메일 주소가 전자우편 수집 프로그램이나
그 밖의 기술적 장치를 이용하여 무단으로 수집되는 것을 거부하며,
이를 위반시 정보통신망법에 의해 형사 처벌됨을 유념하시기 바랍니다.
[게시일 2004년 10월 1일]
이용약관
제 1 장 총칙
제 1 조 (목적)
이 이용약관은 KoreaScience 홈페이지(이하 “당 사이트”)에서 제공하는 인터넷 서비스(이하 '서비스')의 가입조건 및 이용에 관한 제반 사항과 기타 필요한 사항을 구체적으로 규정함을 목적으로 합니다.
제 2 조 (용어의 정의)
① "이용자"라 함은 당 사이트에 접속하여 이 약관에 따라 당 사이트가 제공하는 서비스를 받는 회원 및 비회원을
말합니다.
② "회원"이라 함은 서비스를 이용하기 위하여 당 사이트에 개인정보를 제공하여 아이디(ID)와 비밀번호를 부여
받은 자를 말합니다.
③ "회원 아이디(ID)"라 함은 회원의 식별 및 서비스 이용을 위하여 자신이 선정한 문자 및 숫자의 조합을
말합니다.
④ "비밀번호(패스워드)"라 함은 회원이 자신의 비밀보호를 위하여 선정한 문자 및 숫자의 조합을 말합니다.
제 3 조 (이용약관의 효력 및 변경)
① 이 약관은 당 사이트에 게시하거나 기타의 방법으로 회원에게 공지함으로써 효력이 발생합니다.
② 당 사이트는 이 약관을 개정할 경우에 적용일자 및 개정사유를 명시하여 현행 약관과 함께 당 사이트의
초기화면에 그 적용일자 7일 이전부터 적용일자 전일까지 공지합니다. 다만, 회원에게 불리하게 약관내용을
변경하는 경우에는 최소한 30일 이상의 사전 유예기간을 두고 공지합니다. 이 경우 당 사이트는 개정 전
내용과 개정 후 내용을 명확하게 비교하여 이용자가 알기 쉽도록 표시합니다.
제 4 조(약관 외 준칙)
① 이 약관은 당 사이트가 제공하는 서비스에 관한 이용안내와 함께 적용됩니다.
② 이 약관에 명시되지 아니한 사항은 관계법령의 규정이 적용됩니다.
제 2 장 이용계약의 체결
제 5 조 (이용계약의 성립 등)
① 이용계약은 이용고객이 당 사이트가 정한 약관에 「동의합니다」를 선택하고, 당 사이트가 정한
온라인신청양식을 작성하여 서비스 이용을 신청한 후, 당 사이트가 이를 승낙함으로써 성립합니다.
② 제1항의 승낙은 당 사이트가 제공하는 과학기술정보검색, 맞춤정보, 서지정보 등 다른 서비스의 이용승낙을
포함합니다.
제 6 조 (회원가입)
서비스를 이용하고자 하는 고객은 당 사이트에서 정한 회원가입양식에 개인정보를 기재하여 가입을 하여야 합니다.
제 7 조 (개인정보의 보호 및 사용)
당 사이트는 관계법령이 정하는 바에 따라 회원 등록정보를 포함한 회원의 개인정보를 보호하기 위해 노력합니다. 회원 개인정보의 보호 및 사용에 대해서는 관련법령 및 당 사이트의 개인정보 보호정책이 적용됩니다.
제 8 조 (이용 신청의 승낙과 제한)
① 당 사이트는 제6조의 규정에 의한 이용신청고객에 대하여 서비스 이용을 승낙합니다.
② 당 사이트는 아래사항에 해당하는 경우에 대해서 승낙하지 아니 합니다.
- 이용계약 신청서의 내용을 허위로 기재한 경우
- 기타 규정한 제반사항을 위반하며 신청하는 경우
제 9 조 (회원 ID 부여 및 변경 등)
① 당 사이트는 이용고객에 대하여 약관에 정하는 바에 따라 자신이 선정한 회원 ID를 부여합니다.
② 회원 ID는 원칙적으로 변경이 불가하며 부득이한 사유로 인하여 변경 하고자 하는 경우에는 해당 ID를
해지하고 재가입해야 합니다.
③ 기타 회원 개인정보 관리 및 변경 등에 관한 사항은 서비스별 안내에 정하는 바에 의합니다.
제 3 장 계약 당사자의 의무
제 10 조 (KISTI의 의무)
① 당 사이트는 이용고객이 희망한 서비스 제공 개시일에 특별한 사정이 없는 한 서비스를 이용할 수 있도록
하여야 합니다.
② 당 사이트는 개인정보 보호를 위해 보안시스템을 구축하며 개인정보 보호정책을 공시하고 준수합니다.
③ 당 사이트는 회원으로부터 제기되는 의견이나 불만이 정당하다고 객관적으로 인정될 경우에는 적절한 절차를
거쳐 즉시 처리하여야 합니다. 다만, 즉시 처리가 곤란한 경우는 회원에게 그 사유와 처리일정을 통보하여야
합니다.
제 11 조 (회원의 의무)
① 이용자는 회원가입 신청 또는 회원정보 변경 시 실명으로 모든 사항을 사실에 근거하여 작성하여야 하며,
허위 또는 타인의 정보를 등록할 경우 일체의 권리를 주장할 수 없습니다.
② 당 사이트가 관계법령 및 개인정보 보호정책에 의거하여 그 책임을 지는 경우를 제외하고 회원에게 부여된
ID의 비밀번호 관리소홀, 부정사용에 의하여 발생하는 모든 결과에 대한 책임은 회원에게 있습니다.
③ 회원은 당 사이트 및 제 3자의 지적 재산권을 침해해서는 안 됩니다.
제 4 장 서비스의 이용
제 12 조 (서비스 이용 시간)
① 서비스 이용은 당 사이트의 업무상 또는 기술상 특별한 지장이 없는 한 연중무휴, 1일 24시간 운영을
원칙으로 합니다. 단, 당 사이트는 시스템 정기점검, 증설 및 교체를 위해 당 사이트가 정한 날이나 시간에
서비스를 일시 중단할 수 있으며, 예정되어 있는 작업으로 인한 서비스 일시중단은 당 사이트 홈페이지를
통해 사전에 공지합니다.
② 당 사이트는 서비스를 특정범위로 분할하여 각 범위별로 이용가능시간을 별도로 지정할 수 있습니다. 다만
이 경우 그 내용을 공지합니다.
제 13 조 (홈페이지 저작권)
① NDSL에서 제공하는 모든 저작물의 저작권은 원저작자에게 있으며, KISTI는 복제/배포/전송권을 확보하고
있습니다.
② NDSL에서 제공하는 콘텐츠를 상업적 및 기타 영리목적으로 복제/배포/전송할 경우 사전에 KISTI의 허락을
받아야 합니다.
③ NDSL에서 제공하는 콘텐츠를 보도, 비평, 교육, 연구 등을 위하여 정당한 범위 안에서 공정한 관행에
합치되게 인용할 수 있습니다.
④ NDSL에서 제공하는 콘텐츠를 무단 복제, 전송, 배포 기타 저작권법에 위반되는 방법으로 이용할 경우
저작권법 제136조에 따라 5년 이하의 징역 또는 5천만 원 이하의 벌금에 처해질 수 있습니다.
제 14 조 (유료서비스)
① 당 사이트 및 협력기관이 정한 유료서비스(원문복사 등)는 별도로 정해진 바에 따르며, 변경사항은 시행 전에
당 사이트 홈페이지를 통하여 회원에게 공지합니다.
② 유료서비스를 이용하려는 회원은 정해진 요금체계에 따라 요금을 납부해야 합니다.
제 5 장 계약 해지 및 이용 제한
제 15 조 (계약 해지)
회원이 이용계약을 해지하고자 하는 때에는 [가입해지] 메뉴를 이용해 직접 해지해야 합니다.
제 16 조 (서비스 이용제한)
① 당 사이트는 회원이 서비스 이용내용에 있어서 본 약관 제 11조 내용을 위반하거나, 다음 각 호에 해당하는
경우 서비스 이용을 제한할 수 있습니다.
- 2년 이상 서비스를 이용한 적이 없는 경우
- 기타 정상적인 서비스 운영에 방해가 될 경우
② 상기 이용제한 규정에 따라 서비스를 이용하는 회원에게 서비스 이용에 대하여 별도 공지 없이 서비스 이용의
일시정지, 이용계약 해지 할 수 있습니다.
제 17 조 (전자우편주소 수집 금지)
회원은 전자우편주소 추출기 등을 이용하여 전자우편주소를 수집 또는 제3자에게 제공할 수 없습니다.
제 6 장 손해배상 및 기타사항
제 18 조 (손해배상)
당 사이트는 무료로 제공되는 서비스와 관련하여 회원에게 어떠한 손해가 발생하더라도 당 사이트가 고의 또는 과실로 인한 손해발생을 제외하고는 이에 대하여 책임을 부담하지 아니합니다.
제 19 조 (관할 법원)
서비스 이용으로 발생한 분쟁에 대해 소송이 제기되는 경우 민사 소송법상의 관할 법원에 제기합니다.
[부 칙]
1. (시행일) 이 약관은 2016년 9월 5일부터 적용되며, 종전 약관은 본 약관으로 대체되며, 개정된 약관의 적용일 이전 가입자도 개정된 약관의 적용을 받습니다.