• 제목/요약/키워드: 타당도 평가

검색결과 851건 처리시간 0.032초

과학 영재 학생들의 과학적 문제발견 능력을 측정하기 위한 도구 개발 (Development of an Instrument to Measure Scientific Problem-Finding Ability for Scientifically-Gifted Student)

  • 류시경;박종석
    • 한국과학교육학회지
    • /
    • 제28권2호
    • /
    • pp.139-149
    • /
    • 2008
  • 본 연구에서는 과학 영재 학생들의 과학적 문제발견 능력을 측정하기 위해 타당도와 신뢰도가 높은 검사 도구를 개발하였다. 먼저, 과학적 문제발견 능력에 대한 조작적 정의를 바탕으로 5개의 하위 평가 요소(적절성, 융통성, 독창성, 정교성, 가치 판단)를 선정하였으며 평가 기준을 구안하였다. 개발된 검사 도구는 내용 및 평가 기준에 대해 과학교육 전문가의 타당도 검증을 거친 후 과학 고등학교 학생들에게 투입되었으며, 채점 결과를 바탕으로 구인 타당도를 검증받았다. 또한 채점자간 신뢰도는 대체로 높게 나타났으며, 문항 난이도 와 변별도 역시 적절한 것으로 나타났다. 앞으로 과학적 문제발견 능력에 대한 합의된 정의를 도출해내어야 하며 평가의 객관성을 확보하기 위한 더 나은 방안을 강구해야 한다.

정신건강의학과 외래환자 대상 한국판 외상 증상 체크리스트(Trauma Symptom Checklist-40)의 타당도 연구 (Validation of the Korean Version of the Trauma Symptom Checklist-40 among Psychiatric Outpatients)

  • 박진;김대호;김은경;김석현;윤미림
    • 정신신체의학
    • /
    • 제26권1호
    • /
    • pp.35-43
    • /
    • 2018
  • 연구목적 복합 외상을 겪는 경우에는 PTSD의 증상을 넘어선 증상들이 다양하게 나타난다. 그러나 그러한 다양한 증상을 평가하는 도구가 부족한 실정이다. 외상 증상 체크리스트-40은 자기보고식 검사로 아동기 혹은 성인기의 외상 경험과 관련된 이러한 다양한 증상들을 측정하기 위한 도구로 원척도 연구에서 높은 신뢰도와 타당도가 검증된 검사 도구이다. 이번 연구의 목적은 정신건강의학과 외래 환자를 대상으로 한국판 외상 증상 체크리스트-40 (KTSC-40)의 타당도를 검증하기 위해 설계 되었다. 방 법 한양대학교 구리병원 정신건강의학과 외래를 진료 목적으로 방문한 367명의 환자를 대상으로 하였다. 환자들의 자기보고식 평가 자료를 사용하였으며 외상 증상 체크리스트-40 (TSC-40), 사건 충격척도 개정판(IES-revised), 일생 사건 체크리스트(LEC), Zung 자가평가 우울척도(Zung's Self-Rating Depression Scale), Zung 자가평가 불안척도(Zung's Self-Rating Anxiety Scale)를 이용하였다. 신뢰도는 내적 일치도(Cronbach's ${\alpha}$)로 산출하였고, 요인타당도는 Varimax 직각 회전을 이용한 탐색적 주성분 분석, 각 척도와의 수렴 및 공존 타당도를 위해서는 Spearman 상관분석을 하였다. 결 과 KTSC-40은 Varimax 직각회전을 이용한 주성분 요인 분석을 통해 7개의 요인을 추출하였고, 총 분산의 59.55%를 설명하였다. 이는 원척도 연구에서의 6개의 요인, 5개의 요인과 요인 수는 다르지만 그 내용은 비슷하였다. KTSC-40은 Cronbach's ${\alpha}$ 값이 0.94로 높은 내적 일치도를 가졌다. 또한 다른 PTSD scale과 우울, 불안 척도와의 비교에서 높은 수렴 및 공존 타당도를 보였다. 결 론 KTSC-40의 정신측정학 성질을 조사하여 우수한 타당도를 보이는 것을 확인하였다. 다만, 요인 분석에서의 원척도와의 약간의 차이를 보였는데 이는 문화적인 요소와 외상 관련 질환이 아닌 정신건강의학과 환자군 등 이질적인 외래 구성 집단에 따른 것으로 보인다. 결과적으로 KTSC-40은 높은 타당도로 향 후 다양한 임상영역에서 외상과 관련된 증상들을 평가 하는데 유용할 것으로 예상된다.

테크놀로지 활용 과학 수업에서 분산인지 이론 기반 수업 전략의 개발 및 타당화 (Development and Validation of Distributed Cognition Theory Based Instructional Strategy in Science Class Using Technology)

  • 노자헌;손준호;김종희
    • 대한지구과학교육학회지
    • /
    • 제17권1호
    • /
    • pp.1-19
    • /
    • 2024
  • 이 연구는 테크놀로지 활용 과학 수업을 위한 분산 인지 이론 기반 수업 전략을 신뢰도와 타당도가 확보된 절차에 따라 개발한 설계·개발 연구이다. 수업 전략 개발을 위해 설계·개발 연구 방법론 절차에 따라 개발 연구와 타당화 연구를 진행하였다. 개발 연구에서는 선행 문헌 검토와 사전 전문가 검토 방법으로 초기 수업 전략을 개발하였다. 타당화 연구에서는 내적 타당화(전문가 타당화, 사용성 평가)와 외적 타당화(현장 적용 평가) 방법으로 수업 전략을 타당화하고 최종 수업 전략을 개발하였다. 최종 수업 전략은 3개의 수업 원리와 9개의 수업 전략, 38개의 세부 지침으로 구성하였다. 이 연구를 통해 연구자는 테크놀로지 활용 과학 수업을 위한 수업 전략의 적합성, 블록과 교수·학습 과정안의 유용성, 인지적 도구로서 테크놀로지의 활용 가능성, 테크놀로지 활용 교수 역량 함양을 위한 교사의 노력 필요, 수업 전략 적용에 영향을 미치는 조건을 고려한 수업 설계를 제안하였다.

모바일 영어말하기평가 융합 시스템 모형 타당도 검사 (The Development and Validation of a Mobile-based English Speaking Test Convergence Model)

  • 김정태
    • 한국융합학회논문지
    • /
    • 제7권2호
    • /
    • pp.25-31
    • /
    • 2016
  • 본 연구에서는 모바일기반 영어말하기평가 융합 모형을 개발하였다. 대학생들에게 요구분석을 실시한 결과를 바탕으로 아이폰과 안드로이드 모바일기기용 평가 앱을 개발하고, 그 시험타당도 검사를 실시하였다. 영어말하기 평가 개발을 위하여 시험문항, 채점요인, 척도를 개발하였다. 요구분석에서 대학생 총 89명 중 69명(79.3%)은 안드로이드폰을, 17명(19.5%)은 아이폰을 사용하고 있었다. 이 결과를 기반으로 iOS와 안드로이드 OS용 영어말하기평가 앱을 개발하였다. 이를 위해 HTML5, Javascript bridge 기술, Node와 Express, Mongo DB 등의 기술을 적용하였다. 실험에서는 5명의 수험자를 대상으로 평가를 시행하여 모든 기능이 정상적으로 작동함을 확인하고 수험자들의 피드백을 수집함으로써 시험타당도를 확보하였다.

정신과 환자를 위한 한국판 회복평가척도(Recovery Assessment Scale)의 신뢰도 및 타당도 연구 (Reliability and Validity of the Korean Version of the Recovery Assessment Scale(RAS) for Psychiatric Patients)

  • 임경민;신은식;심선화;정윤주
    • 한국콘텐츠학회논문지
    • /
    • 제14권10호
    • /
    • pp.628-638
    • /
    • 2014
  • 본 연구는 정신과 환자에게 한국판 회복평가척도(RAS-K)의 신뢰도와 타당도를 검사하기 위해 실시하였다. 회복평가척도의 원본을 가지고 번안, 역번안을 실시하여 한국판 회복평가척도를 만들었다. 이 연구는 만성적인 정신과적 문제를 가지고 있는 18세 이상의 142명의 대상자에게 실시하였다. 평가도구는 한국판 회복평가척도, 한국판 희망척도, 정신건강회복척도, 행동 및 증상 평가 척도를 사용하였다. 신뢰도 검사에서 내적일치도는 .92, 검사-재검사 신뢰도는 .79로 높은 내적일치도를 지니고 있음을 알 수 있었다. RAS-K와의 동시타당도는 한국판 희망평가척도(r=.675, p<0.01), 정신건강회복척도(r=.816, p<0.01)와는 유의미한 관계를 나타내었으나, 행동 및 증상 평가척도와는 관계는 낮았다. 요인분석 결과는 요인이 5개로 추출되었으며 전체 설명 비율이 62.476%였다. 이 연구는 RAS-K는 한국의 정신과적인 문제를 가진 사람들에게 회복을 평가하기에 적절한 도구라는 것을 보여준다.

도서관의 오픈 데이터 품질측정모델 개발 (Developing an Assessment Model of Library Open Data Quality)

  • 박진호
    • 정보관리학회지
    • /
    • 제35권1호
    • /
    • pp.33-59
    • /
    • 2018
  • 본 연구는 최근 열린 정부 데이터에 대한 다차원 척도, 모델 개발 연구가 시작되고 있으나, 도서관에서는 관련 연구가 부족하다는 점을 고려하여 도서관에 적용할 수 있는 오픈 데이터 품질측정 모델개발을 목적으로 하였다. 본 연구는 모델개발과 모델평가 두 단계로 수행하였다. 모델개발은 델파이 기법을 적용하였으며, 모델평가는 도서관 오픈 데이터 이용자를 대상으로 설문조사를 실시하여 모델의 타당도와 신뢰도를 측정하였다. 모델개발은 델파이 기법을 적용하여 총 4차례 수행하여 3개 차원, 18개 요인, 133개 측정요소로 구성된 모델을 도출하였다. 모델평가는 델파이 기법으로 완성한 모델을 도서관 오픈 데이터 이용자인 국내 외 사서, 개발자, 오픈 데이터 활동가를 대상으로 적합성 설문조사를 실시하여 모델의 타당도와 신뢰도를 검증하였다. 그 결과 당초 18개 요인, 133개 측정요소는 15개 요인, 54개 측정요소가 타당성을 확보한 것으로 나타났다. 신뢰도는 차원별, 측정요인별로 모두 기준치인 0.6 이상의 결과를 보여주고 있어 높은 신뢰도를 확보한 것으로 나타났다. 모델평가를 통한 이용자 타당도, 신뢰도 분석으로 전문가가 구성한 평가모델은 현장에서 즉시 활용될 수 있을 정도로 정제되었다.

서비스 질 척도(서브퍼프)의 타당화 연구: 종합사회복지관을 대상으로 (Reliability and Validity of the Korean Version of SERVPERF : A Validation Study)

  • 김용석;최종복;황성혜;김민석;서인자
    • 한국사회복지학
    • /
    • 제61권2호
    • /
    • pp.107-135
    • /
    • 2009
  • 본 연구는 서비스 질을 측정하기 위해 사용되고 있는 대표적인 척도인 서브퍼프(SERVPERF)를 종합사회복지관 이용자들을 대상으로 평가하는 것이 목적이다. 그 동안 서브퍼프가 일부 국내 연구들에서 사용되어 온 적은 있으나 한국어판 서브퍼프의 신뢰도 및 타당도에 대한 철저한 평가 없이 사용되어왔다. 특히 본 연구의 대상이자 대표적인 사회복지현장이라고 할 수 있는 종합사회복지관 이용자들을 대상으로 서브퍼프를 평가한 연구는 거의 전무하였다. 본 연구에는 서울과 경기도 소재 종합복지관 이용자 328명이 참여하였다. 확인적 요인분석을 실시한 결과 한국어판 서브퍼프는 국내외 선행연구들에서 보고된 바와 같이 5가지 차원(유형성, 신뢰성, 대응성, 보증성, 공감성)으로 구성된 척도로 확인되었다. 하위 요인별 내적 신뢰계수의 범위는 0.85~0.94로 각 요인이 동질적인 문항들로 구성되어 있음이 확인되었다. 수렴타당도 평가를 위해 만족도와의 상관관계를 분석하였는데, 한국어판 서브퍼프는 만족도 척도들과 모두 정적인 상관관계를 보였고, 판별타당도 평가에서는 서브퍼프와 인구사회학적 특성은 서로 상관관계가 없는 것으로 나타나 한국어판 서브퍼프의 개념구성타당도가 인정되었다. 마지막으로 한국어판 서브퍼프의 5가지 차원은 사회적 바람직성의 영향을 받지 않았다.

  • PDF

외상성 뇌손상 환자의 인지-화용언어 능력 평가도구 개발을 위한 신뢰도 및 타당도 연구 (Cognitive-pragmatic Language Ability Assessment Protocol for Traumatic Brain Injury(CAPTBI): Reliability and Validity)

  • 이미숙;김향희
    • 한국콘텐츠학회논문지
    • /
    • 제13권2호
    • /
    • pp.370-377
    • /
    • 2013
  • 외상성 뇌손상(TBI)은 외부적 충격에 의해 뇌가 손상되는 것을 의미한다. 이로 인해 주의력, 기억력, 추론력, 집행기능, 화용언어 등이 전반적으로 저하된다. 본 연구에서는 외상성 뇌손상 환자의 인지-화용언어 능력 평가도구(CAPTBI)를 개발한 후, 그 신뢰도 및 타당도를 구축하고, 정상군과 환자군 간 변별에 유용한 인지-화용언어의 하위 영역들이 무엇인지를 분석하였다. 연구 대상은 정상군 226명, TBI 환자군 62명으로 평균 연령은 각각 43.95(${\pm}11.92$), 46.37(${\pm}11.87$)세, 남녀 비율은 각각 110:116, 48:14였다. CAPTBI는 내적일관성 신뢰도와 검사-재검사 신뢰도가 높았고, 내적 구성타당도와 공인타당도가 입증되었다. 또한, 두 집단은 CAPTBI 총점 및 9개 하위 영역 모두에서 유의미한 차이를 보여 CAPTBI가 집단 간 변별에 유용한 것으로 입증되었다. 두 집단 간 변별에 기여하는 하위 영역은 조직화 능력, 기억력, 집행기능, 지남력, 문제해결력, 화용언어, 추론력, 주의력, 시지각력 순으로 높았다. CAPTBI의 판별기능 적중률은 95.5%로 전체 집단 사례 중 정상군의 97.3%, 환자군의 88.7%를 정확히 판별하였다. 이에 따라, CAPTBI는 TBI 환자의 인지-화용언어 능력 평가도구로서 신뢰도와 타당도가 높고, 정상군과 환자군 간 변별에 유용한 도구임을 확인하였다.

한글판 미의 광범위한 개념 척도(K-BCBS)의 신뢰도 및 타당도 (Reliability and Validity of the Korean Version of Broad Conceptualization of Beauty Scale)

  • 안분숙;이경수;김현진
    • 한국콘텐츠학회논문지
    • /
    • 제21권5호
    • /
    • pp.359-366
    • /
    • 2021
  • BCBS(Broad Conceptualization of Beauty Scale)는 내면적 미의 척도로 개인의 내면적 미의 기준을 평가하도록 고안된 측정도구이다. 본 연구에서 번안과정을 거쳐 구성된 최종 한글판 BCBS 9문항을 사용하여 여자대학생 100명을 대상으로 신뢰도 및 타당도를 검증하였다. 한글판 BCBS의 신뢰도를 검증하기 위해 내적 일치도를 확인한 결과 Cronbach's 𝜶는 0.878, 주관적 미 0.874, 신체적 미 0.808, 심리적 미 0.880로 높은 신뢰성을 보였다. 한글판 BCBS의 타당도를 검증하기 위해 탐색적 및 확인적 요인분석을 시행한 결과 모든 항목에서 유의미한 결과로 나타나 타당도를 확보하였다. 따라서 본 연구를 통해서 한글판 BCBS는 여성의 광범위한 미의 개념을 종합하여 평가하는 유용한 측정도구로 입증되었으며, 이를 기초자료로 하여 여자 대학생들을 대상으로 수행하는 내면화된 미의 전문적인 발전과 연구에 활용되어 도움을 줄 수 있을 것으로 사료된다.