• 한국가정과교육학회지
• /
• 제23권3호
• /
• pp.69-90
• /
• 2011

본 연구는 중학교 기술 가정 교과 의생활 영역을 중심으로 타당도 신뢰도 높은 서술형 평가 문항을 개발하여, 이를 학생들에게 적용해보고, 평가 결과를 분석해보는 것에 목적을 두었다. 이를 위해 평가할 내용을 분석하고, 평가 문항을 설계 개발하여 평가를 실시한 후 그 결과를 분석하였다. 목표 이원분류표와 평가 영역 및 평가 목표 설정을 토대로 서술형 평가 문항 초안을 작성하였고, 채점 기준표와 예시답안을 함께 작성하였다. 전문가 검토와 예비 검사를 거쳐, 최종적으로 서술형 평가 문항 총 23개를 완성하였으며, 이를 중학교 2학년 2개 학급 총 65명을 대상으로 본 검사를 시행하고 분석하였다. 본 연구의 결과, 서술형 평가 문항의 타당도는 각 문항별로 비교적 높게 나타났다. 채점자간 신뢰도는 세 채점자간에 강한 상관관계가 있는 것으로 나타나 개발된 평가 문항은 타당하고 신뢰할 만한 문항이라고 할 수 있다. 반면, 개발된 서술형 평가 문항에 대한 학업 성취도는 전반적으로 낮았다. 즉, 알고 있는 지식을 자신의 언어로 표현해서 서술하는 것과 정확하고 구체적인 답안을 작성하는 것을 힘들어했다. 또한 서술형 평가에 대해 비교적 긍정적으로 인식하고 있었으나, 서술하는 것에 대한 어려움, 학습량의 증가 등이 학생들에게 서술형 평가를 부담스러워 하는 것으로 인식하였다. 따라서 서술형 평가 방식을 통한 학생들의 평가가 보다 효율적이고 변별력 있게 시행되기 위해서는 서술형 평가를 위한 별도의 학습이나 훈련이 반드시 필요하다고 볼 수 있다. 이를 위해 앞으로 학생들은 수업시간을 통해서 교과 내용과 관련된 교과서 이외의 다양한 자료를 접해보고, 주어진 문제의 해결 방법에 대해 자신의 생각을 정리해보며, 사고를 확장시키고, 이를 글로 서술하여 표현해보는 연습이 요구된다. 그러므로 서술형 평가가 학교 현장에서 공정하고 객관성 있게 시행되기 위해서는 타당도 신뢰도 높은 평가 문항의 개발이 더욱 활발히 이루어져야 하고, 평가 문항의 개발과 관련된 교사들의 자발적이고 적극적인 연수와 연찬을 제안해 본다.

• 한국심리학회지 : 문화 및 사회문제
• /
• 제29권4호
• /
• pp.595-616
• /
• 2023

비판적 의식 척도(CCS: Critical Consciousness Scale)는 Diemer와 동료들(2017)이 개발한 척도로서 억압받거나 소외된 사람들이 자신의 사회적 정치적 조건을 비판적으로 분석하고 사회적 평등을 지지하며 인지된 불평등을 변화시키는 행동의 정도를 확인한다. 본 연구에서는 한국어로 번안한 비판적 의식 척도를 현지화하여 대학생을 대상으로 타당화 하였다. 심리학 관련 석사 및 박사 5명에게 번안 문항의 적합성을 평정하도록 하여 내용타당도를 검증하였다. 이후 전국 대학생 314명을 대상으로 비판적 의식 척도, 기회불평등인식 척도, 환경 변화 필요인식 척도, 사회 참여 척도, 공정한 세상에 대한 신념 척도를 설문조사하여 신뢰도와 타당도를 검증하였다. 타당도 검증을 위해 탐색적 요인분석을 하여 3개의 하위 요인을 확정하였고 확인적 요인분석을 실시하여 원안의 22개 문항 중 14개 문항을 추출하였다. 이렇게 요인분석을 마친 14개 문항의 구인타당도와 신뢰도는 양호하였다. 또한 비판적 의식 척도와 유사척도의 상관관계 분석에서도 비판적 의식은 유사 척도와 상관관계가 명확히 나타났다. 비판적 의식은 기회불평등인식 척도, 환경 변화 필요 인식 척도, 사회참여 척도와는 정적인 상관관계를 보였고 공정한 세상에 대한 신념 척도와는 부적 상관관계를 보였다. 이러한 결과를 통해 비판적 의식 척도는 타당도가 유의한 것으로 판단하였다. 마지막으로 본 연구의 한계점과 의의를 논하였다.

• 한국컴퓨터교육학회 학술대회
• /
• 한국컴퓨터교육학회 2018년도 하계학술대회
• /
• pp.103-106
• /
• 2018

2015 개정 교육과정에서 컴퓨팅 사고력의 함양을 강조하고 있지만 컴퓨팅 사고력을 평가하기 위한 도구에 대한 개발이 미흡하다. 비버 챌린지 문항은 전 세계 60여개국의 정보 교육 전문가 집단이 약 1년 동안 공동 출제 및 검토를 통해 개발되는 문항이므로 문항의 타당도가 높다고 볼 수 있다. 다만 초기의 개발 목적이 평가도구로써 사용하기 위함이 아니었기 때문에 과연 컴퓨팅 사고력의 평가 도구로 사용할 수 있는 신뢰도를 가진 문항인가를 검증하기 위해 본 연구에서는 비버 챌린지 2017 그룹 III의 문항을 대상으로 문항내 적일관성신뢰도를 통계적으로 검증하였으며 그 결과 Cronbach ${\alpha}=.784$로 신뢰도가 높게 나타났다.

• 치위생과학회지
• /
• 제14권2호
• /
• pp.198-206
• /
• 2014

1. 커뮤니케이션 기술 측정도구 38문항을 번역한 후 번역 정확도, 내용분석, 내용타당도 분석을 통하여 14문항을 수정하고, 10문항을 삭제하였으며, 팀 구성원 커뮤니케이션 4문항은 연구목적에 맞지 않아 제외하여 최종 커뮤니케이션 기술 측정도구는 총 24문항으로 구성되었다. 2. 수정 보완된 커뮤니케이션 기술 측정도구의 요인분석 결과 치과위생사의 커뮤니케이션 기술은 배려와 존중, 정보 제공, 불안과 통증 감소를 위한 커뮤니케이션 등 3개의 항목으로 구분되었다. 3. 확인적 요인분석을 통한 모형의 적합도는 대체로 기준을 충족하였으며 ($X^2=899.170$ [df=227, p<0.001], RMR=0.025, RMSEA=0.078, IFI=0.886, TLI=0.872, CFI= 0.886, GFI=0.848, AGFI=0.815, NFI=0.853) 모든 요인의 개념신뢰도, 분산추출지수가 일반적 기준을 충족시켜 집중타당성이 입증되었다. 모든 요인의 평균분산추출값은 각 요인간상관 관계 제곱값보다 크게 나타나 판별타당성도 입증되었다. 4. 내적일관성을 알아보기 위한 Cronbach's ${\alpha}$는 0.8 이상으로 높은 신뢰수준으로 나타났다. 이상의 결과를 종합해 보았을 때, 치과위생사의 커뮤니케이션 측정도구는 타당도와 신뢰도가 높고 적합하다고 검증되었다. 향후 우리나라 치과위생사의 커뮤니케이션 기술의 전문적인 발전과 연구에 활용되어 궁극적으로 환자 구강건강 증진 및 병원 경영에 도움을 줄 수 있을 것으로 생각된다.

• 한국보육지원학회지
• /
• 제7권3호
• /
• pp.239-257
• /
• 2011

본 연구는 동기부여적 자아개념에 대한 선행연구를 바탕으로 보육교사의 동기 부여적 자아개념을 측정하기 위한 척도의 문항을 수정보완하고 이를 타당화 하는 것을 목적으로 하였다. 기존의 동기부여적 자아개념 척도 문항을 보완하여 보육교사를 대상으로 이들의 동기부여적 자아개념을 측정할 수 있는 문항을 구성하였다. 서울, 경기지역의 보육시설에 종사하는 보육교사 321명을 편의표집하여 동기부여적 자아개념, 전문성인식, 자아탄력성 및 배경변인을 설문지 조사방법으로 측정하였다. 동기부여적 자아개념척도의 예비문항에 대해 탐색적 요인분석을 실시하여 6요인 23개 문항을 선정하였으며 최종적으로 6개 요인은 전체 변량의 77.12%를 설명하는 것으로 나타났다. 보육교사의 동기부여적 자아개념 척도의 Cronbach의 ${\alpha}$는 .935로 양호한 수준이었으며, 보육교사의 동기부여적 자아개념은 이들의 전문성 인식 및 자아탄력성과 각각 유의한 정적 상관을 보여 척도의 준거타당도가 있는 것으로 확인되었다.

• 감성과학
• /
• 제20권1호
• /
• pp.95-104
• /
• 2017

분노반응검사(Evans & Stangelang, 1971)는 분노를 유발하는 자극의 관점에서 분노수준을 평가하는 도구이다. 그러나 이는 고령자를 대상으로 사용하기에는 문항수가 너무 많아 적은 수의 문항으로 구성된 분노반응검사가 필요하다. 본 연구의 목적은 신뢰성이 높고 타당한 단축형 분노반응검사를 제작하는 것이다. 연구 1에서는 60세 이상의 고령자들에게 76문항으로 구성된 분노반응검사를 실시하였으며, 검사이론에 기초하여 76개의 문항들 중에서 10개의 문항을 추출하여 단축형 분노반응검사를 제작하였다. 연구 2에서는 60세 이상의 고령자들로 구성된 또 다른 표본을 대상으로 단축형 분노반응검사와 타당도 확인을 위한 검사들을 함께 실시하여 신뢰도와 타당도를 평가하였다. 노인용 단축형 분노반응검사의 Cronbach 는 .79로 양호한 수준의 신되도를 보였다. 노인용 단축형 분노반응검사는 특성분노를 반영하는 검사이므로, 특성분노를 측정하는 검사점수와 상관이 높아야하고, 분노의 다른 측면을 반영하는 점수와는 낮은 상관을 보여야 타당하다. 노인용 단축형 분노반응검사 점수는 상태-특성 표현 척도의 특성분노 점수와 .60이상의 높은 상관을 보였으며, 분노표출 점수와 .39의 상관을 보였고, 적대감 점수와 .41의 상관을 보였다. 결론적으로, 본 연구에서 제작한 단축형 분노반응검사는 신뢰할 수 있고 타당한 검사인 것으로 나타났다.

• 한국가족복지학
• /
• 제56호
• /
• pp.169-196
• /
• 2017

우리나라에서 미혼모가족은 여러 영역의 일상생활에서 불리하거나 불평등한 대우를 받고 있다. 그러나 아직까지 미혼모의 차별실태를 경험적으로 보여줄 수 있는 자료가 부재한 상황으로 미혼모 당사자들이 경험하는 차별의 다양한 양상들을 파악하고 차별의 심각성을 진단할 수 있는 척도개발이 요구된다. 이에 본 연구는 미혼모들이 경험하는 차별의 양상과 정도를 평가하고 측정할수 있는 신뢰도와 타당도를 갖춘 척도를 개발하는 것을 목적으로 하였다. 미혼모 차별 경험 척도개발을 위하여 선행연구 검토와 당사자를 대상으로 한 포커스 집단 인터뷰를 통해 미혼모 차별경험의 개념과 하위요인들을 도출하고, 이를 반영하여 75문항의 초기 문항을 도출하였다. 초기문항은 현장 전문가와 학계 전문가를 통해 두 차례에 걸쳐 내용타당도를 검증하였다. 사전조사와본조사를 통해 조사된 207명의 미혼모를 대상으로 한 데이터를 토대로 탐색적 요인분석, 척도 문항의 양호도 조사, 상관관계 분석, 기준타당도 분석, 신뢰도 분석을 실시하여 미혼모 차별 경험척도의 타당도와 신뢰도를 검증하였다. 이러한 과정을 통해 미혼모 차별 경험을 측정하기 위한 3 가지 하위요인으로 구성된 총 21개의 측정문항을 도출하였다. 본 연구는 한국의 특수한 사회 문화적 상황에서 미혼모들이 경험하는 차별의 내용과 정도를 측정하고 검증할 수 있는 신뢰도와 타당도를 갖춘 척도를 개발하였다는 점에서 의의가 있다.

• 한국심리학회지 : 문화 및 사회문제
• /
• 제28권4호
• /
• pp.627-659
• /
• 2022

본 연구에서는 초기 성인기 사람들의 과거 연애 관계에 대한 사고 정서가를 살펴보기 위해 Brenner와 Vogel(2015)이 개발한 PANERT(the Positive and Negative Ex-Relationship Thoughts Scale)를 번안하고 타당화하였다. 이를 위해 한국어로 번역한 PANERT를 전국의 20대 미혼 성인 남녀 337명을 대상으로 설문을 실시한 후, 주요 변인 간의 성차를 분석해 보았다. 이후, 문항 분석 결과에 따라 원문 12문항을 그대로 사용하여 한국판 PANERT를 구성하였다. 확인적 요인분석을 통해 긍정적 사고 정서가-부정적 사고 정서가의 2요인 모형(12문항)이 적합함을 검증하였고, 하위요인별 내적 합치도가 모두 높게 나타나 문항의 신뢰성이 확인되었다. 준거 관련 타당도 확인을 위해, 한국판 PANERT와 침습적 반추, 우울, 자기지각의 변화, 정적 및 부적 정서 반응과의 상관분석을 실시한 결과, 두 하위요인 모두 자기지각 변화를 제외한 모든 관련 구인과 상관관계를 보이는 것으로 나타났다. 마지막으로 두 요인이 정적 및 부적 정서 반응을 통해 우울에 어떤 역할을 미치는지 연구모형을 설정하여 매개효과를 살펴보았다. 이 과정에서 한국판 PANERT의 수렴타 당도와 변별타당도를 최종적으로 확인하였고, 구조모형의 간접효과 유의성을 확인하였다. 본 연구를 통해 한국판 PANERT는 총 12문항, 2개 하위요인으로 구성된 척도이며 초기 성인들의 이별 경험에 있어서 사고 정서가의 역할을 측정하는 도구로써 신뢰롭고 타당함을 확인하였다.

• 한국노년학
• /
• 제32권4호
• /
• pp.1181-1197
• /
• 2012

본 연구의 목적은 최근 외국에서 개발된 노화태도척도(AAQ)가 한국 노인에게 타당하게 적용가능한지를 검증하는 것이다. 이를 위해 서울, 경기, 충청권 노인 320명을 대상으로 3요인 24문항으로 구성된 노화태도척도(AAQ)에 대해 문항분석, 탐색적 요인분석, 수렴타당도 검증을 실시하였다. 분석 결과, 정규분포 가정에 위배되거나 요인계수가 낮은 3개의 문항이 삭제되어 총 21문항의 노화태도척도(AAQ-21)가 제시되었으며, 심리사회적 상실(psychosocial loss), 신체적 변화(physical change), 심리적 성장(psychological growth)의 3요인이 심리적 상실(psychological loss), 사회적 상실(social loss), 심신의 변화와 성장(change and growth in body and mind)의 3요인으로 재구성되었다. 21문항 노화태도척도의 내적신뢰도, 수렴타당도는 만족할 만한 수준이었다. 본 연구에서 제시한 21문항 노화태도척도(AAQ-21)는 다차원적 측면에서 노화태도를 측정할 뿐만 아니라 노화의 긍정적 측면 및 부정적 측면에 대한 태도까지 측정함으로써 노년학 연구자와 실무자들에게 과학적이고 체계적인 노화태도 측정방법을 제시할 것이다. 또한 노인복지현장 실무자는 물론 노인복지정책 개발자가 성공적 노화를 위한 프로그램과 정책마련을 위한 기초자료로 활용할 수 있을 것이다.

• 한국콘텐츠학회논문지
• /
• 제20권1호
• /
• pp.127-141
• /
• 2020

본 연구는 개인의 서번트 리더십 지수(SLQ)를 측정할 수 있는 척도를 개발하고 그 타당성을 검증하는 것에 목적이 있다. 이를 위해 관련 문헌 및 선행연구를 중심으로 총 100문항을 구성하였다. 탐색적 요인 분석결과 5개 요인으로 구분되었으며, 최종 선정은 40문항에 해당한다. 1 요인은 경청(5문항), 공감(4문항), 치유(4문항), 2 요인은 미래보기(2문항), 청지기정신(3문항), 이웃성장에 헌신(4문항), 공동체 세우기(4문항), 3요인은 개념화(5문항), 4요인은 인식(5문항), 5요인은 설득(4문항)에 해당한다. 최종 선정된 전체 문항에 대한 신뢰도는 .97에 해당하였으며, 서번트 리더십 지수 전체와 하위요인 간에는 r=.788~.872범위 안에 해당하여 통계적으로 높은 상관이 있는 것으로 나타났다. 인구사회학적 변인간의 관계를 알아보기 위해 일원분산 분석을 실시한 결과 성별에 따라 서번트 리더십 전체 지수는 차이가 없었으나 초, 중, 고, 성인에 따라 유의하게 차이가 있는 것으로 나타났다. 사후 검증 결과 서번트 전체 지수에서는 학생집단(초,중고) 간에는 차이가 없었으나 성인초기, 성인중기 집단과는 차이가 있는 것으로 나타났다. 본 연구는 집단이나 조직의 범위에서 벗어나 개인의 서번트 리더십 지수(SLQ)를 측정할 수 있도록 문항이 구성되어 있어서 다양한 분야에서 활용할 수 있다는 것에 의의가 있다.