• 한국재난정보학회:학술대회논문집
• /
• 한국재난정보학회 2022년 정기학술대회 논문집
• /
• pp.73-74
• /
• 2022

본 논문은 재해경감을 위한 기업의 자율 활동 지원에 관한 법률의 기업재난관리표준에 따라 재해경감활동관리체계를 수립함에 있어 최초 단계인 재해경감활동 준비상태(성숙도) 조사의 효과성을 분석하고자 함이 목적이다. 일반적으로 기관의 준비상태(성숙도) 조사 결과를 바탕으로 재해경감활동의 도입 수준이 결정된다. 그러나 현재 수행되는 준비상태(성숙도) 조사 문항은 문항 간의 중요도를 고려하지 않아 결과에 대한 신뢰성 및 변별력 저하, 재해경감활동관리체계 수행 단계별 차별성이 고려되지 않은 문제점을 야기하고 있다. 이에 본 연구는 공기업 'K사'의 준비상태(성숙도) 조사의 사례에 대해 기존 결과와 조사 문항의 가중치를 반영한 결과의 차이점을 분석하였다. 그 결과 문항 간 변별력 부재로 인한 결과의 신뢰성 부족과 그로 인한 준비상태(성숙도) 조사 대상자의 동일 응답 가능성을 배재할 수 없음을 알 수 있었다.

• 영재교육연구
• /
• 제12권4호
• /
• pp.26-44
• /
• 2002

본 연구에서는 과학 창의성 수준을 측정하기 위한 검사지와 답지를 함께 개발하였다. 이 검사지에는 창의성을 이루고 있는 7 가지 창의성 요소를 반영하였다. 개발 과정에서 타당도와 문항의 명료성 등에 대한 검증을 받았다. 개발된 검사지는 332명의 중학생들에게 투입되어 타당도, 신뢰도 등 검사분석과 난이도, 변별도 등의 문항 분석을 실시하였다. 검사분석 결과 타당도: 92%, 신뢰도: 0.84으로 문항분석 결과 난이도:$42%{\sim}73%$, 변별도: $0.22{\sim}0.70$ 를 보여 과학 창의성 수준 검사 과정에서 활용 가능함이 확인되었다.

• Journal of the Korean Academy of Child and Adolescent Psychiatry
• /
• 제2권1호
• /
• pp.138-149
• /
• 1991

부모 설문을 통해 소아, 청소년의 정서 및 행동문제를 파악하기 위한 한국판 행동조사표(Child Behavior Checklist, CBCL)의 임상유용도를 검증하기 위해 정상군과 임상군을 변별하는 능력을 평가하였다. 양군의 전체점수와 척도별 점수를 비교하면 p<.001로 임상군 변별력이 매우 높으나 각 문항별로 점수를 비교할 경우, 사회능력척도에서 남자 1문항, 여자 5문항, 문제행동 척도에서 남자 10문항, 여자 14문항이 임상군 변별력이 다소 낮은 것으로 나타났다. 이에 대한 원인을 살펴보고 수정, 보완하기 위한 방법을 제시하였다.

• 한국아동복지학
• /
• 제36호
• /
• pp.231-259
• /
• 2011

본 연구는 어린이집을 이용하는 부모의 이용만족도를 측정하기 위한 척도 개발을 위한 것으로, 신뢰도와 타당도가 검증된 김용석(2009)의 사회복지서비스 이용자 만족도 척도(Client Satisfaction Scale: CSS)가 보육서비스에 적용 가능한지 평가하는 것을 목적으로 하였다. 이를 위해 CSS 문항을 보육서비스의 특성에 맞게 수정한 21개의 문항, 2개 차원으로 이루어진 어린이집 이용만족도 예비척도를 구성하고, 만 1세부터 만 5세까지의 자녀가 어린이집을 이용하는 학부모 652명을 대상으로 조사를 실시하였다. 구인타당도 검증을 위한 요인분석 결과 2개 요인이 수렴되었으나, 각 요인에 해당하는 문항들은 CSS와 차이가 있었다. 2차원으로 구성된 본 척도의 동시타당도와 내적타당도 검증 결과 적절한 수준이었으며, 문항변별도 검증 결과 또한 모든 문항의 변별력 높은 것으로 나타났다. 이상의 결과를 통해 볼 때 어린이집 이용만족도 척도는 보육서비스를 이용하는 부모들에게 적용될 수 있는 타당성 있는 도구로 판단되는바, 추후 어린이집 이용만족도를 측정하는데 활용될 수 있을 것이다.

• 한국산학기술학회논문지
• /
• 제13권9호
• /
• pp.4119-4125
• /
• 2012

이 연구는 뇌졸중 환자를 대상으로 한국판 수정바델지수(Korean Version of Modified Barthel Index: K-MBI)의 타당도, 신뢰도와 문항변별도를 알아보기 위해 실시되었다. 223명의 뇌졸중 환자를 대상으로 K-MBI를 사용하여 일상생활활동을 측정하였다. 타당도를 알아보기 위해 요인분석을 실시하였고, 문항내적 합치도, 문항변별도를 알아보았다. 요인분석 결과, K-MBI의 10개 항목의 공통성은 .50이상으로 나타났으며, 하나의 요인에 적재되는 것으로 나타났다. 설명량은 72.184%이었다. 요인적재량은 용변처리, 개인위생, 의자/침대 이동, 보행/의자차, 옷 입기, 식사하기, 대변조절, 목욕하기, 소변조절, 계단 오르기 순으로 나타났다. K-MBI의 Cronbach ${\alpha}$ 값은 .944로 나타났으며, 각 항목의 문항변별도는 .783~.909로 만족할 만한 수준이었다. 요인분석을 통해 K-MBI의 일상생활활동이라는 하나의 구성요인을 확인하였으며, 신뢰도와 문항변별도를 확인하였다. 뇌졸중 환자의 일상생활활동의 타당한 평가를 위해, 앞으로의 연구에서는 K-MBI의 다양한 심리측정학적 특성을 알아보는 연구가 필요할 것으로 생각된다.

• 과학교육연구지
• /
• 제37권2호
• /
• pp.278-293
• /
• 2013

이 연구에서는 2009 개정 교육과정에 따른 고등학교 융합형 '과학' 교과에서 사용된 선다형 평가 문항의 특성을 분석하였다. 문항의 출제 경향을 분석하기 위해 융합형 교과에 특이적인 분석틀을 구안하여 분석하였으며, 문항 반응 이론을 적용하여 문항의 특성을 양적으로 분석하였다. 문항의 출제 경향 분석 결과, 문항 출처, 융합 범위, 인지 수준 측면에서 융합형 '과학' 교과의 취지를 제대로 반영하고 있지 못하는 것으로 나타났으며, 기존 교육과정의 과학 교과와 같은 분과적 교수-학습 및 평가가 이루어지고 있음을 알 수 있었다. 문항 반응 이론을 적용한 분석 결과, 대체로 문항의 난이도는 적절하며, 변별도는 높은 수준인 것으로 나타났다. 하지만 분석틀을 구성하는 3개 범주와의 연관성은 나타나지 않았다. 이와 같은 연구 결과를 토대로 융합형 '과학' 교과의 취지를 반영한 교수-학습과 평가를 위한 개선점을 논의하였다.

• 한국수학교육학회:학술대회논문집
• /
• 한국수학교육학회 2006년도 제11회 국제수학영재교육세미나프로시딩
• /
• pp.211-226
• /
• 2006

이 연구는 수학 창의적 문제해결력을 바탕으로 수학 영재를 판별하기 위해서 수학 창의적 문제해결력 검사를 개발하고, 유창성만으로 수학 창의성을 평가한 이 검사 방법의 신뢰도와 타당도를 검증하는데 있다. 10개의 개방적인 수학 문제를 개발한 바, 수학적으로는 직관적 통찰력, 정보 조직력, 추론능력, 일반화 및 적용력, 반성적 사고력을 요구하는 문제들이다. 이 10문항을 영재교육기관에 입학하고자 지원한 초등학교 5학년 2,2029명에게 실시했다. 교사들은 각 문제에 대해 타당한 답을 제시한 빈도로 유창성을 측정했다. 학생들의 반응은 Rasch의 1모수 문항반응모형을 기반으로 한 BIGSTEPTS 로 분석했다. 문항반응 분석결과, 이 검사는 창의성을 유창성만으로 측정할 때도 영재판별 검사로서 신뢰도, 타당도, 난이도, 변별도가 모두 양호한 것으로 나타났다. 덜 정의되고, 덜 구조화되고, 신선한 문제가 영재교육 프로그램에 지원한 학생들의 수학 창의성을 측정하는데 좋은 문제임을 확인할 수 있었다. 또한 이 검사는 남학생이 여학생보다 수학 창의적 문제해결력이 우수하며, 영재교육원에 지원한 학생들이 수학영재학급에 지원한 학생들보다 더 우수함을 확인해 주었다.

• 한국과학교육학회지
• /
• 제24권6호
• /
• pp.1245-1255
• /
• 2004

본 연구에서는 평가도구의 구비조건을 갖춘 초등학교 고학년 학생의 과학탐구능력을 측정할 수 있는 과학탐구 능력 평가도구를 개발하고자 하였다. 평가도구를 구성하는 문항은 R&D 방법에 의해 개발되었으며, 2차례에 걸친 과학교육 전문가의 점검과 2번의 현장 검증을 통해 문항을 수정 보완하였다. 각 평가 문항은 교과 내용에 대한 지식이 없어도 해결할 수 있는 범교과적인 문항으로 제작하여 과학탐구능력의 하위 요소들을 측정하고자 하였다. SAPA 교육과정과 제7차 과학과 교육과정에서 제시한 과학탐구과정 요소를 근간으로 관찰, 분류, 측정, 예상, 추리,문제인식, 변인통제,자료해석,결론도출,실험설계의 10가지 하위 요소들을 선정하고 각 요소에 대한 조작적 정의와 평가 목표를 설정하였다. 물질과 에너지, 생명과 환경, 지구와 순환의 3가지 내용 영역의 소재를 중심으로 총 30문항을 개발하였다. 개발된 문항을 과학교육 전문가에게 2회 의뢰하여 타당도, 객관도, 문항의 명료성을 점검 받았으며 2번의 현장 검증을 통해 신뢰도, 변별도, 난이도를 검증하였다. 그 결과 타당도 91.6%, 신뢰도 지수 Cronbach ${\alpha}$-값 0.79, 객관도 93.3%, 변별도 지수 0.30, 난이도 지수 66.1%로 나타났다. 위와 같은 값들은 평가도구가 갖추어야 할 구비조건의 허용 범위내에 있는 것으로 보아 본 연구에서 개발한 과학탐구능력 평가도구는 양호한 것으로 볼 수 있다. 따라서 본 연구에서 개발한 과학탐구능력 평가도구는 초등학생들의 과학탐구능력 성취 수준의 진단, 과학과 교육과정과 교수 학습 자료 및 과학과 교수 학습 방법의 과학탐구능력 반영 수준을 평가하는 도구로도 이용될 수도 있을 것이다.

• 컴퓨터교육학회논문지
• /
• 제6권2호
• /
• pp.1-8
• /
• 2003

기존의 학습자 평가 시스템은 교수자의 주관적인 관점과 견해에 의해 각 문항의 난이도가 결정되는 단점을 가지고 있다. 본 논문에서는 학습자의 개별 능력 평가가 가능하고 개인별 학습 수준에 적합한 문항을 난이도, 변별도 및 추측도를 이용하여 학습자에게 제공함으로써 개인별 문항 평가가 가능한 학습자 평가 시스템을 개발하고자 한다. 본 연구의 학습자 평가 시스템은 CAT 기법의 문항 반응 이론 중 3-모수 로지스틱 모델을 이용하여 개발한다.

• 한국과학교육학회지
• /
• 제18권4호
• /
• pp.617-626
• /
• 1998

본 연구의 목적은 국가적 수준에서 우리나라 초 중 고등학교 학생의 과학탐구 능력을 점검해볼 수 있는 평가체제를 개발하는 것이다. 이를 위하여 많은 전문인력이 연구에 참여하였고, 과학탐구 평가틀과 평가 문항을 개발하였다. 개발된 평가 문항을 여러 차례 수정보완한 후, 325개의 문항을 958명의 학생에게 예비 검사를 실시하여 현장 적용 가능성을 검토하였다. 예비 검사 결과 문항 특성이 만족스럽지 못한 문항은 삭제하여 240개의 문항을 본 검사 문항으로 확정하였다. 본 검사는 총 8,906명의 학생을 대상으로 실시하였으며, 검사결과를 고전검사이론과 문항반응이론에 의하여 분석한 결과 난이도, 변별도, 신뢰도 등이 매우 우수하다는 것이 판명되었다. 앞으로 본 연구에서 개발된 과학탐구 평가틀을 이용하여 더 많은 문항이 개발될 수 있으며, 이러한 문항을 이용하여 우리나라 학생들의 과학탐구능력을 주기적으로 점검할 수 있을 것이다.