• 한국수학교육학회지시리즈E:수학교육논문집
• /
• 제13권2호
• /
• pp.641-653
• /
• 2002

수학 교육평가에서 고사 타당도의 측정은 매우 중요하다. 그것은 평가자가 목적하는 바의 준거에 따라 수험자들의 문제해결력 변별을 위한 고사들 간의 타당도 크기 측정과 또는 고사 문항의 선정, 배치를 통하여 한 고사의 타당도를 높이기 위한 문항별 타당도 계수를 측정 계산하는 것이다. 이 연구에서는 이 두 가지 고사 타당도의 크기 측정법을 이용하여 수학교육 평가 현장에서 직접적으로 적용할 수 있는 고사 타당도의 제고에 유효한 연구 결과를 제시한다.

• 한국콘텐츠학회논문지
• /
• 제10권1호
• /
• pp.317-324
• /
• 2010

이 연구에서는 경직형 뇌성마비 아동을 대상으로 뇌성마비 아동의 손 기능 분류 체계인 MACS의 동시 타당도와 판별타당도를 검증하는데 그 목적이 있었다. 이를 위해 경직형 뇌성마비 아동 81명을 대상으로 MACS와 Jabsen-Talyor 손 기능 검사를 실시하였다. 이 연구에서는 동시 타당도를 알아보기 위해 MACS와 Jabsen-Talyor 손 기능 검사 결과와의 상관을 알아보았고, 판별 타당도를 알아보기 위해 MACS 수준에 따른 Jabsen-Talyor 손 기능 검사 결과의 차이를 알아보았다. 동시 타당도를 알아본 결과, MACS는 Jabsen-Talyor 손 기능 검사 결과와 높은 상관을 보였다(r = .870, p < .05). 또한 MACS와 Jabsen-Talyor 손 기능 검사 하위 영역 간의 상관도 모두 유의한 것으로 나타났다(p < .05). 그러나 뇌성 마비 유형 중 편마비 아동에서는 상관이 유의하지 않은 것으로 나타났다. MACS 수준에 따른 Jabsen-Talyor 손 기능 검사 결과는 유의한 차이가 있는 것으로 나타났다(p < .05). MACS는 경직형 뇌성마비 아동의 손 기능 분류체계로써 타당한 도구인 것으로 나타났으며, 임상적으로 유용하게 사용될 수 있음을 시사하였다.

• 한국과학교육학회지
• /
• 제40권3호
• /
• pp.253-269
• /
• 2020

본 연구는 2015 개정 과학과 교육과정에 제시된 성취기준에 기초하여 현대물리 개념지식에 대한 예비 물리교사의 이해를 진단할 수 있는 개념 진단지를 개발하고 타당도와 신뢰도를 확인하였다. Messick(1995)의 분류에 따른 5가지 타당도 중 검사내용에 기초한 타당도는 일련의 전문가 내용타당도 검사로 진행하여 확인한 후 24문항의 설문용 현대물리 개념 진단지를 구성하였다. 국내 15개 사범대학의 467명의 예비 물리교사에게 개발된 현대물리 개념 진단지를 적용하여 문항의 신뢰도와 Messick(1995)의 나머지 4가지 타당도를 확인하였다. 실제에 기초한 타당도는 Rasch 모형이 적용된 통계분석방법으로 문항적합도(MNSQ)를 확인한 결과, 23문항이 적합한 수준으로 나타났다. 이중 오타가 발생한 문항을 제외한 22문항에 대하여 내적구조에 기초한 타당도 분석을 하여 개발된 현대물리 개념 진단지의 일차원성을 확인하였다. 일반화에 기초한 타당도 확인 결과에 따르면 개발된 개념 진단지가 집단특성에 대해 독립적이라고 판단된다. 양자역학 수강 여부에 따른 검사점수의 t-검증 결과, 유의미한 차이가 나타났으며, 이를 외적준거에 기초한 타당도 확인으로 활용하였다. Cronbach alpha 및 Rasch 모형 분석에서의 피험자 신뢰도와 문항신뢰도 값은 검사자료가 적합한 수준의 신뢰도를 갖는다는 보여주었다. 또한 고전검사이론에 의한 문항분석 결과, 양호한 문항난이도를 보여주었으며 문항변별도는 두 문항이 준거값을 벗어났으나 다른 나머지 문항들은 양호한 값을 보여주었다. 양류상관계수는 한 문항을 제외한 나머지에 대해서 양호한 값을 나타내었다. KR-20과 Ferguson's delta 값 역시 검사지가 양호하다는 것을 보여주었다. 마지막으로 문항반응 이론에 의한 문항난이도(추정치)를 Rasch 모형 분석으로 추정하였으며, 이 값들은 피험자 집단 특성에 영향을 받지 않을 것으로 판단된다.

• 한국사회복지학
• /
• 제67권2호
• /
• pp.61-84
• /
• 2015

본 연구의 목적은 노년기 사별 후 성장을 측정하기 위한 척도를 개발하고 척도의 타당도를 검증하는 것이다. 선행연구 및 기존 척도들을 참고로 문항을 개발하고, 전문가에 의한 내용타당도 검증, 예비조사를 거쳐 척도의 타당화를 실시하였다. 설문조사는 배우자 사별노인 308명을 대상으로 이루어졌다. 결과는 다음과 같다. 첫째, 요인타당도 검증을 위해 탐색적 요인분석 및 확인적 요인분석 결과, 최종적으로 24개의 문항이 결정되었으며, 사별 후 성장척도의 5요인 구조가 도출되었다. 둘째, 공인타당도 검증을 위해 비탄반응척도(HGRC: Hogan and Schmidt, 2001) 가운데 '개인적 성장'척도와의 상관관계를 살펴본 결과, 사별 후 성장과 HGRC 개인적 성장은 높은 상관관계에 있는 것으로 나타나, 공인타당도가 입증되었다. 셋째, 대비집단 타당도 검증을 위해 심리적 안녕감척도(PWB: Ryff and Keyes, 1995)와 슬픔극복척도(GRI: Remondet and Hansson, 1987)의 상 하위 30% 집단 간에 사별 후 성장점수의 차이를 비교한 결과, 모두 유의미한 차이가 제시되었다. 넷째, 사별 후 성장척도의 내적일치도는 .907(하위요인 .649~.856)으로 높은 수준으로 나타나, 본 척도의 신뢰성을 입증하였다. 마지막으로 인구사회학적 변수와 사별 후 성장과의 관계를 살펴본 결과, 특히 학력이 가장 강력한 예측요인임이 밝혀졌다. 이러한 결과를 바탕으로 사별 후 성장척도의 타당도는 높은 것으로 결론지을 수 있다. 본 척도는 사회복지 및 임상분야 실천가들에게 사별자에 대한 성장지향적인 실천적 개입의 이론적 근거를 제시하고, 개입 시 활용가능한 객관적인 평가도구를 제공할 수 있다는 점에서 그 의의를 찾을 수 있다.

• 대한지역사회작업치료학회지
• /
• 제7권1호
• /
• pp.49-57
• /
• 2017

목적 : 본 연구의 목적은 노인의 지역사회 이동성을 측정하는 평가도구인 Life Space Assessment(LSA)를 한국어로 번역하여 이에 대한 적합성을 검증하기 위하여 내용 타당도와 이해도 검증을 실시하는 것이다. 연구방법 : 원문 LSA을 번역-역번역한 최종 한글 번역본을 6명의 전문가 위원에게 내용 타당도 검증을 실시하였고, 신입 작업치료사 13명에게 문항에 대한 이해도를 검증을 조사하였다. 내용 타당도와 이해도 검증은 내용 타당도 지수(Contents Validity Index; CVI)를 사용하였다. 결과 : 내용 타당도에 대한 각 문항에 대한 CVI .93~1.00이었으며, 도구 전체 CVI는 .99로 매우 높은 수준의 내용 타당도를 보였다. 또한 내용 이해도 결과는 각 문항 CVI .92~1.00로 분포하였고, 도구 전체 CVI는 .97로 매우 높은 수준으로 검증되었다. 결론 : LSA의 한국어 번역 검증 결과 내용 타당도 및 이해도가 매우 높은 수준으로 검증되어 국내에서 노인의 지역사회 이동성을 평가할 수 있는 도구로 적용가능성을 보여주었다. 앞으로의 연구에서는 LSA의 수렴타당도, 구성타당도, 신뢰도 검증 등의 다양한 연구들이 진행되어야할 것이다.

• 한국과학교육학회지
• /
• 제36권1호
• /
• pp.177-190
• /
• 2016

이 연구는 '지구의 운동과 태양계' 학습 발달과정의 타당성을 2가지 측면에서 검증하고자 하였다: 첫 번째는 구인 타당도로서 학생들이 학습하는 동안에 본 연구의 학습 발달과정에서 설정한 가설적인 발달 경로에 따라 실제로 학생들의 발달이 나타나는가를 조사하였다. 두 번째는 결과 타당도로서 학습 발달과정에 기반한 적응적 교수활동이 대부분의 학생들에게 향상된 학습효과를 산출하는가를 조사하였다. 이를 위해 서울, 강원, 광주 지역 소재 6개 초등학교에서 5학년 학생 373명과 교사 17명이 연구에 참여하였다. 초등학교 5학년의 태양계와 별 단원에서 지구의 운동과 태양계 관련 내용을 포함하는 적응적 교수활동을 개발하고, 교수활동 사전과 사후에 순위 선다형 문항(13개)으로 구성된 검사지를 투입하여 그 결과를 비교 분석하였다. 구인 타당도를 알아보기 위해 실험군 학생들을 대상으로 사전과 사후의 수준 변화를 분석한 결과, 약 64%에 해당하는 학생들이 적응적 교수활동에 의해 가설적으로 설정한 경로를 따라 발달하는 것으로 나타났으며, 사전/사후 검사 결과를 Rasch 모델로 적용한 분석 결과도 이를 뒷받침하였다. 결과 타당도를 알아보기 위해 실험군과 대조군의 사전검사를 공변량으로 한 공변량분석(ANCOVA)을 실시한 결과, 실험군 학생들의 수준 향상이 대조군 학생들의 경우에 비해 비해 통계적으로 유의미하게 높은 것으로 나타났으며(F=30.819, p=0.000), 실험군이 대조군보다 정적(+) 수준 변화 경향이 더 뚜렷하게 나타났다. 또한, Rasch 모델을 적용하여 결과 타당도를 검증한 결과, 실험군이 대조군보다 학생 능력치 상승이 더 높게 나타났으며, 이러한 차이는 통계적으로 유의미한 것으로 분석되었다(F=11.632, p=0.001).

• 한국사회복지학
• /
• 제66권3호
• /
• pp.253-276
• /
• 2014

본 연구의 목적은 국내에서 단축형 간이정신진단검사(Brief Symptom Inventory-18, BSI-18)가 정신장애인의 정신과적 증상을 평가하고 치료 개입의 성과를 측정하는 도구로 활용될 수 있도록 타당도와 신뢰도를 검정하는 것이었다. BSI-18은 BSI-53의 축소버전으로 임상 현장에서 효과적인 개입을 위해 정신과적 증상을 확인하고 진단하며, 치료프로그램의 성과로서 증상변화를 측정하기 위해 개발된 도구이다. 본 연구에서는 정신장애인 180명을 대상으로 하여 첫째, BSI-18 전체 문항과 하위요인에 대한 내적일치도 및 검사-재검사 반복측정을 통해 신뢰도를 파악하였으며, 둘째, 확인적 요인분석을 실시하여 해당구성개념의 요인구조를 확인하였으며, 셋째, BSI-18의 우울 점수와 대표적인 우울척도인 BDI, CES-D 20의 우울 점수 간에 상관관계를 검토하여 준거 타당도를 살펴보았다. 연구의 주된 결과는 다음과 같다. 첫째, BSI-18 전체 문항과 하위요인 등의 검사-재검사 반복측정 결과 선행연구들과 유사한 높은 수준의 반복측정 신뢰도 및 내적일관성을 보여주었다. 둘째, 확인적 요인분석 결과 정신장애인을 대상으로 BSI-18은 3요인 모형이 가장 자료에 부합하는 것으로 나타났다. 셋째, BSI-18의 우울증상은 BDI, CES-D 20과 유의한 정적상관관계가 나타나 준거 타당도가 확보되었다. 이러한 결과들에 대한 연구함의를 논의하여 제시하였다.

• Journal of the Korean Academy of Child and Adolescent Psychiatry
• /
• 제16권1호
• /
• pp.98-105
• /
• 2005

연구 목적 : 국내에서는 아스퍼거 장애를 평가하고 진단하는 구조화된 검사 도구의 개발이 거의 이루어지지 않은 상태로, 아스퍼거 장애에 대한 진단적 타당도의 검증 및 향후 연구의 활성화를 위해 본 연구에서는 한국판 아스퍼거 증후군 진단 척도(the Korean version of Asperger's Syndrome Diagnostic Scale)의 신뢰도와 타당도를 검증하는 연구를 수행하였다. 방법 : 소아정신과 외래를 방문한 아동들 중 DSM-IV 진단기준과 소아정신과 의사에 의해 아스퍼거 장애, 전반적 발달 장애(PDD)와 비전형 전반적 발달 장애(PDD NOS), 의사소통 장애로 진단된 아동을 대상으로 그들의 부모들에게 한국어로 번역한 ASDS를 실시하였다. 총 55명이 연구에 포함되었으며(아스퍼거 장애 15명, PDD와 PDD NOS 20명, 의사소통 장애 20명), 연령의 범위는 5세 1개월부터 15세 6개월까지였다. 공존 타당도 및 변별 타당도를 알아보기 위하여 또 다른 아스퍼거 장애 질문지와 자폐 증상을 평가하는 K-CARS를 함께 실시하였다. 결과 : 자료 분석 결과, K-ASDS의 내적 합치도는 Chronbach's $\alpha=0.88$로 높게 나타났으며, 각 하위척도별 내적 일치도 또한 높았다. K-ASDS와 아스퍼거 장애 질문지 간의 상관도 통계적으로 유의미하였고, 하위 척도 상에서 Asperger disorder, PDD, Communication disorder 집단 간의 차이도 유의미하였다. 판별 분석 결과, K-ASDS가 자폐 장애와 의사소통 장애로부터 아스퍼거 장애를 유의미하게 구분해주는 판별 함수를 얻었으며, 이들 장애를 구분해주는 전체 정확 판별율은 $71\%$였다. 결론 : 본 연구 결과, 한국판 ASDS의 신뢰도와 타당도가 입증되었으며, 아스퍼거 장애 아동들을 평가하고 진단하는데 유용하게 사용될 수 있을 것이다.

• 한국콘텐츠학회논문지
• /
• 제19권1호
• /
• pp.256-265
• /
• 2019

본 연구에서는 Grindler(1991)가 개발한 신체태도 척도(Grindler Body Attitude Sale)을 한국어로 번안하여 한국판 신체태도 척도를 구성하고 이 척도의 신뢰도 및 타당도를 검증하기 위한 연구를 진행하였다. 551명의 대학생을 대상으로 문항의 내용분석과 탐색적 요인분석, 확인적 요인분석, 공인 타당도 검증을 실시하였다. 문항 분석과 탐색적 요인분석의 결과 한국판 신체태도 척도는 총 3요인 모형과 35문항 구조가 가장 적합한 것으로 나타났으며, 각 요인은 신체에 대한 인식태도, 신체에 대한 평가태도 신체에 대한 관리 태도로 명명하였다. 확인적 요인분석 결과 3요인 모델의 적합도가 양호한 것으로 나타났으며 척도의 공인 타당도 및 변별 타당도를 검증하기 위해 관련 척도와의 상관관계를 분석한 결과 스트레스 반응과는 부적상관, 신체 존중감, 주관적 안녕감, 신체 만족도와는 정적인 상관을 보였다. 마지막으로 연구의 제한점과 향후 연구를 위한 제안을 하였다.

• 여성건강간호학회지
• /
• 제27권3호
• /
• pp.176-179
• /
• 2021

수렴, 판별 및 집합타당도를 검정하기 위해서는 연구자가 선행연구 결과를 바탕으로 검증하고자 하는 도구와 비교측정도구로 측정한 점수의 상관관계의 정도와 방향에 대한 가설을 세우고 시행해야 한다. 분석결과가 사전에 기획하였던 가설을 만족하였을 때, 그 타당도가 만족하였다고 할 수 있다. 준거타당도는 검정하고자 하는 도구가 측정하는 개념과 같은 개념을 측정하는 표준화된 도구가 있는 경우에 실시한다.