• 한국콘텐츠학회논문지
• /
• 제15권3호
• /
• pp.290-302
• /
• 2015

본 연구의 목적은 대학생들을 대상으로 수정된 스트레스 평가 도구(Revised Stress Appraisal Measure, RSAM)를 우리나라 실정에 맞게 번역하고, 타당도와 신뢰도를 검증하는 것이다. IBM SPSS Statistics 21과 AMOS 21 program을 이용하여 내적 일관성 신뢰도, 구성타당도, 준거타당도 검사를 하였다. 자료 수집은 G시와 C 지역 소재의 5개 대학교에 재학 중인 296명의 대학교 4학년 학생을 임의로 표출하였다. 한국어판 RSAM은 5개 요인으로 분류되었으며, 전체 변량은 68.4%를 설명하였다. 5개의 하위요인은 확증적 요인분석에 의해 타당성이 입증되었다(p<.001, Goodness of Fit Index, Adjusted Goodness of Fit Index, Normed Fit Index, Comparative Fit Index >.08, Root Mean Square Error of Approximation=.056). 준거타당도에서, 척도의 점수는 한국어판 Perceived Stress Scale (PSS)와 유의한 상관관계가 있었다. 신뢰도 계수는 .73에서 .89까지였다. 한국어판 RSAM 은 구성타당도와 준거타당도, 그리고 내적 일관성 신뢰도에서 만족할 만한 것으로 나타났다. 따라서 본 도구는 한국 대학생들의 스트레스 평가를 측정하는데 적합한 도구가 될 수 있을 것이다.

• 한국IT서비스학회:학술대회논문집
• /
• 한국IT서비스학회 2003년도 추계학술대회
• /
• pp.323-333
• /
• 2003

본 연구에서는 정보화사업의 성과는 직접적으로 하나의 효과만을 발생시키지 않고 다양한 단계에서 다양한 형태의 성과로 발생된다는 점에서 정보화사업의 추진단계를 사업추진 전(前) 단계(사전평가), 사업추진 진행단계(진행평가), 사업추진 완료 후 운영단계(사후평가)로 구분하고 각 단계별로 정보화사업의 성과를 측정하기 위한 정보화사업 추진단계별 평가모형을 제시하였다. 각 추진단계별 평가영역 및 평가항목의 개발은 정보화사업 평가항목에 관한 선행연구들에 대한 이론적 고찰과 국내 외 공공부문에서 실제 적용하고 있는 사례를 중심으로 도출하였으며, 특히 본 연구에서의 중점연구대상 정보화사업인 문화정보화사업을 중심으로 제시하였다. 각 단계별 평가영역 및 평가항목으로는 사전평가에서는 사업추진 계획영역의 비용산정적정도, 사업적 타당도, 전략적 타당도, 위험도분석, 추진계획적정도의 5개의 평가항목으로, 진행평가에서는 사업추진 실행영역의 사업추진효율성, 자원관리적정도, 아웃소싱관리적정도 등 3개 평가항목을 제시하였다. 또한 사후평가에서는 정보시스템 구축성과 영역의 경우 시스템품질, 정본품질, IS 서비스 품질을, 정보시스템 운영성과 영역은 시스템의 활용도와 사용자 만족도를, 조직 및 경영성과 영역은 사업적 기여도와 전략적 기여도를 각각 제시하였으며, 아울러 각 평가항목별 세부 평가항목을 함께 제안하였다.

• Journal of the Korean Academy of Child and Adolescent Psychiatry
• /
• 제8권2호
• /
• pp.183-198
• /
• 1997

본 연구는 일반 청소년은 물론 문제 행동을 나타낼 가능성이 보다 높은 소위 비행청소년을 대상으로, 도덕발달수준을 평가할 수 있는, 신뢰도와 타당도가 갖추어진 평가도구를 개발함에 그 목적이 있다. 연구대상은 개발하고자 하는 평가도구이며, 중학교 1학년에서 고등학교 3학년까지 남녀 한 학급씩을 무작위 선정한 507명을 포함하여 품행장애군과 정신과 환자대조군 각 28명씩을 검사대상으로 하였다. 연구방법으로는 우선 평가도구의 골격이 되는 Rest의 원문에 관하여 그 검사도구의 제작 및 신뢰도와 타당도 검사 과정과 결과를 숙지하였다. 그 다음으로 우리의 문화와 정서에 맞는 이야기 구성을 하였는데, 이 과정에서는 정신과 전문의 두 명과 임상심리학 전문가 한 명과의 의견교환 및 자문으로 작성하였다. 일차적으로 만들어진 평가도구는 중학생 여섯 명을 대상으로 사전검사를 실시하였으며 사전검사에서 나타난 보다 실제적 측면에서 평가도구의 문제점을 검토하여 최종 평가도구를 구성하였다. 최종완성된 평가도구의 타당도 평가에는 세 가지 방법이 사용되었는데, 첫째로 구성타당도를 살펴본 결과, 발달에 따른 구성 요인의 변화를 보기 위하여 학년의 증가에 따른 도덕발달수준의 증가 여부를 살펴보았는데, 학년의 증가라는 발달에 따라 본 연구의 구성 요인이라고 할 수 있는 도덕적 판단능력의 분명한 증가를 확인할 수 있었다. 둘째로 기존의 간이형 설문도구와 비교하여 보는 공존타당도를 보았는데, 두 도구간의 상관계수는 0.87이었다. 세째로 변별타당도는 품행장애군, 정신과 환자대조군, 정상대조군 각 28명씩을 대상으로 시행한 성적을 비교분석으로 평가하였는바, 품행장애군과 다른 두 군간의 유의한 차이를 확인할 수 있었다. 신뢰도 평가를 위하여 정상 청소년 42명과 품행장애군 28명을 대상으로 3주 간격으로 검사-재검사를 시행하여 평가분석하였는데, 그 상관계수는 정상군에서는 0.88, 품행장애군에서는 0.63이었다. 각 이야기와 전체간의 상관 정도를 측정하여 내적일치도를 구한 결과 Cronbach’s alpha가 0.71이었다.

• 대한지역사회작업치료학회지
• /
• 제7권1호
• /
• pp.49-57
• /
• 2017

목적 : 본 연구의 목적은 노인의 지역사회 이동성을 측정하는 평가도구인 Life Space Assessment(LSA)를 한국어로 번역하여 이에 대한 적합성을 검증하기 위하여 내용 타당도와 이해도 검증을 실시하는 것이다. 연구방법 : 원문 LSA을 번역-역번역한 최종 한글 번역본을 6명의 전문가 위원에게 내용 타당도 검증을 실시하였고, 신입 작업치료사 13명에게 문항에 대한 이해도를 검증을 조사하였다. 내용 타당도와 이해도 검증은 내용 타당도 지수(Contents Validity Index; CVI)를 사용하였다. 결과 : 내용 타당도에 대한 각 문항에 대한 CVI .93~1.00이었으며, 도구 전체 CVI는 .99로 매우 높은 수준의 내용 타당도를 보였다. 또한 내용 이해도 결과는 각 문항 CVI .92~1.00로 분포하였고, 도구 전체 CVI는 .97로 매우 높은 수준으로 검증되었다. 결론 : LSA의 한국어 번역 검증 결과 내용 타당도 및 이해도가 매우 높은 수준으로 검증되어 국내에서 노인의 지역사회 이동성을 평가할 수 있는 도구로 적용가능성을 보여주었다. 앞으로의 연구에서는 LSA의 수렴타당도, 구성타당도, 신뢰도 검증 등의 다양한 연구들이 진행되어야할 것이다.

• 한국콘텐츠학회논문지
• /
• 제20권9호
• /
• pp.511-519
• /
• 2020

본 연구의 목적은 수정된 노팅엄 감각평가(rNSA)를 한국판으로 번역하고 검증하는 것이었다. 수정된 rNSA를 한국어로 번역하기 위해 번안/역번안 과정을 사용하여 단면 연구가 수행되었고, 한국판 rNSA의 유효성을 조사하기 위하여 평가자간 및 평가자내 신뢰도, 내적일관성 및 동시타당도를 조사하였다. 한국판 rNSA는 평가자간 신뢰도(r=0.92-1.00), 평가자내 신뢰도(r=0.93-1.00)로 높은 신뢰도를 확인하였고, 한국판 Fugl Meyer의 감각항목과의 유의한 상관관계(r=0.96)를 확인하였다. 한국판 rNSA의 내적일치도에 대한 Cronbach 값은 0.73-0.90의 범위이고, 한국판 Fugl Meyer의 감각항목의 Cronbach 값은 0.70-0.88의 범위였다. 이 결과로, 한국판 rNSA의 신뢰도 및 타당도를 확인하였으며, 임상환경에서 뇌졸중 이후 감각기능을 평가하는 것이 가능할 수 있다고 생각한다.

• 한국과학교육학회지
• /
• 제23권1호
• /
• pp.75-85
• /
• 2003

본 연구에서는 과학교육에서 수행평가의 올바를 사용과 정착을 위하여 과학 수행평가문항의 선정과 제작을 위한 평가준거를 개발하였다. 이를 위하여 과학과 평가목표 및 수행평가에 대한 이론적 논의를 통해 평가준거의 대범주로 평가 목표의 충실도(Fidelity), 수행평가의 특징과 구성 요소에 대한 만족도(Satisfaction), 문학의 내용 타당도 (Content Validity), 학습자에 대한 내용의 적합도 및 공정성(Suitability & Fairness), 문항의 신뢰도와 객관도(Reliability & Objectivity), 사용상의 편의성 및 실용성(Usability)의 6가지 범주를 개발하였고, 각 대범주별 하위항목을 선정하여, 총 25개의 하위 항목을 가진 평가준거표를 개발하였다. 그리고 개발된 평가준거표의 타당도는 과학교육 연구자 5명의 안면타당도로 보았고, 신뢰도 3가지 종류의 과학 수행평가문항을 과학교육 전문가 2명가 초등예비교사 6명이 평가하고, 그 결과를 Kendall계수를 통한 평가자간 합치도로 검증하였다. 그 결과 합치도는 통계적으로 유의한 수준으로 나타났다. 이상의 과정을 통하여 최종적인 평가준거표를 완성하여 제시하였다.

• 한국산학기술학회논문지
• /
• 제14권6호
• /
• pp.2767-2772
• /
• 2013

균형은 일상생활의 기본적인 요소이며 균형능력의 평가는 무게중심의 측정으로 한다. 본 연구에서는 뇌졸중 환자를 대상으로 균형 능력을 평가하기 위한 Balancia 프로그램의 신뢰도와 타당도를 측정하고자 하였다. COP의 측정을 위한 장비로는 Wii Balance Board를 이용하였다. 연구는 39명의 뇌졸중 환자들 대상으로 하였다. 신뢰도 검사는 동요거리, 동요속도, area95% 결과값의 검사자간 신뢰도와 검사자내 신뢰도를 실시하였다. 검사자내 신뢰도는 검사-재검사의 방법으로 급간내 상관계수를 측정하여 ICC .793-.939로 높은 신뢰도를 보였고, 검사자간 신뢰도에서도 ICC .791-.955로 높은 신뢰도를 보였다. 타당도는 Accusway와 비교하여 ICC .851-.955로 매우 높은 일치도를 보였다. 따라서 본 연구를 통해 Balancia 프로그램이 뇌졸중 환자의 균형 능력을 평가하는데 높은 신뢰도와 타당도를 가진 프로그램으로 입증되었다.

• 한국사회복지학
• /
• 제59권4호
• /
• pp.83-109
• /
• 2007

본 연구의 목적은 다양한 사회복지 실천현장에서 활용가능하고 신뢰도와 타당도가 검증된 Client Satisfaction Inventory(CSI)를 국내의 사회복지실천 현장에 적용할 수 있는지를 평가하는 것이다. 이를 위해 본 연구는 서울 경기지역의 종합사회복지관 6곳을 이용하는 259명의 사회복지서비스 이용자를 대상으로 한국어판 CSI(CSI-K)를 평가하였다. 문항분석을 통해 5개 문항이 부적절한 문항으로 나타나 이들 문항을 제외한 다음 탐색적 요인분석을 실시하였다. 분석한 결과 CSI-K는 2개 요인(서비스 공급자에 대한 만족과 서비스 결과에 대한 만족)으로 구성된 척도로 나타났으며 각 요인의 내적일관성 신뢰도는 .964와 .885로 매우 높았다. 타당도 평가에서도 CSI-K는 이론적으로 관련된 변인들과 통계적으로 유의미한 정적인 상관관계를 보였으며 인구사회학적 변인의 영향을 받지 않은 것으로 나타났다. 후속연구를 통해 CSI-K가 우리나라 실천상황에 더욱 적합한 도구로 개발되길 기대한다.

• 한국사회복지학
• /
• 제61권3호
• /
• pp.55-76
• /
• 2009

본 연구의 목적은 국내에서 노인복지연구 참여를 위한 고지된 동의과정에 동의능력평가가 활발하게 적용될 수 있도록 한국형 동의능력척도를 실증적으로 검증하는 것이다. 본 연구를 위해 재가복지서비스를 이용하거나 노인복지시설에서 보호를 받고 있는 404명의 노인을 조사하였다. 연구 1(n=202)에서는 동의능력검사척도의 신뢰도, 탐색적 요인분석, 수렴 및 기준 타당도 분석을 하였다. 연구 2(n=202)는 연구 1을 통해 수정된 척도의 신뢰도와 타당도는 내적 신뢰도, 확증적 요인분석, 수렴 및 기준 타당도 분석 등을 통해 검증하였다. 연구결과 본 척도의 내적신뢰도 계수가 .90로 높은 수준이었고, 모델 적합도 지수(RMSEA=.057, NNFI=.94, IFI=.96, CFI=.96)도 양호하게 나타났다. 또한 관련변수와의 높은 상관관계 계수를 통해 수렴 및 기준타당도가 검증되었다. 한국형 동의능력평가척도가 우리나라 노인을 대상으로 임상(clinical) 및 조사(survey)연구 참여를 위해 동의능력을 평가하는 척도로서 적합함을 통계적으로 확인하였다. 본 척도는 노인을 대상으로 수행될 연구와 프로그램에서 고지된 동의과정을 위해 활용될 것으로 기대된다.

• 한국콘텐츠학회논문지
• /
• 제14권3호
• /
• pp.269-276
• /
• 2014

본 연구에서는 라쉬분석을 통하여 한글판 학교기능평가(School Function Assessment)도구의 구성타당도, 척도 적합성을 검증함으로써 이 평가도구의 국내 사용을 위한 기초자료를 제시하고자 한다. 서울 및 경기, 충청 지역의 만 7세~12세(초등학교 1학년~6학년)인 98명 장애아동을 대상으로 아동의 보호자 및 담임 특수교사 또는 작업치료사와 직접 면담 또는 전화를 통하여 자료를 수집하였다. 자료분석은 라쉬분석을 통하여 단일차원모형(unidimensionality)에 대한 적합통계치(fit statistics)를 제시하였다. 또한, 라쉬분석의 평정척도모형(rating scale model)을 이용하여 평정척도의 적합성 분석을 실시하였다. 라쉬분석 결과 각 25개 하위척도 내 총 328개 항목 중 단일모형 적합통계치가 부적합한 항목은 Part II 과제지원 영역에서 총 4개였고, Part III 신체적 과제 영역에서 부적합 항목은 18개, 인지/행동적 과제 영역에서 부적합 항목은 14개 항목으로 나타났다. 한글판 학교기능평가 도구의 모든 평가 하위영역의 5점 평정척도는 적합한 것으로 나타났다 본 연구를 통하여 한글판 학교기능평가 도구의 구성타당도와 평정척도 적합성을 확인하였다. 그 결과 5점 평정척도는 적합한 것으로 나타났으나, 일부 부적합 항목이 발견되어 앞으로 국내 타당도 확립과 준거제시를 위한 연구가 추후 이루어져야 할 것으로 판단된다.