• 대한지역사회작업치료학회지
• /
• 제9권2호
• /
• pp.43-58
• /
• 2019

목적 : 본 연구는 한국형 작업균형을 측정할 수 있는 평가도구를 개발하고자 실시되었다. 연구방법 : 2017년 3월부터 2019년 7월까지 선행연구 분석, 전문가 포커스 회의를 통해 예비문항을 작성하였고, 2차의 델파이조사를 통해 예비문항을 선정하였다. 문항의 타당성 검증을 위해 라쉬분석을 실시하여 대상자 및 문항적합도, 문항난이도, 평정척도, 분리신뢰도를 분석하여 최종문항을 도출하였다. 결과 : 조사대상자 141명 중 시간사용에서 9명(6.38%), 작업영역에서 11명(7.80%)이 부적합 대상자로 나타났다. 시간사용 적합대상자 132명, 작업영역 적합대상자 130명을 대상으로 문항의 적합도를 분석한 결과 3개 문항이 부적합 문항으로 판정되었으나, 이론 및 임상적 근거에 기초하여 최종적으로 작업특성 영역의 1개 문항을 삭제하였다. 문항의 난이도 분석에서 당신은 가정 내에서 다른 사람을 위한 활동에 사용하는 시간의 양은 어떠합니까?, 당신은 정규교육이나 관심분야를 위한 교육을 받고 있습니까? 문항이 높은 난이도를 보였다. 평정척도 분석결과에서는 5점 척도보다 4점 척도가 적합한 것으로 나타났고, 분리신뢰도는 .86~.94이었다. 최종적으로 3개 범주(시간사용, 작업영역, 작업특성), 18개 문항이 최종 선정되었다. 결론 : 작업균형 평가도구는 3개 범주 영역, 18개 문항을 최종 선정하였고, 4점 리커트 척도로 개발되었다. 추후 연구에서는 작업균형을 측정하는 다른 평가도구와의 상관관계를 통해 공인타당도를 입증하고, 작업균형에 영향을 미치는 요인을 분석하는 추가연구가 필요할 것이다.

• 한국콘텐츠학회논문지
• /
• 제10권9호
• /
• pp.487-495
• /
• 2010

본 연구는 온라인 정보영재 교육의 질적 제고를 위해 온라인 콘텐츠 평가 준거를 제시하였다. 선행연구를 통해 나타난 정보영재의 특징과 사고양식, 학습양식의 특성을 기반으로 정보영재를 위한 온라인 콘텐츠 평가 준거를 개발하였다. 개발된 평가 준거는 정보영재 전문가를 대상으로 문항 타당성 검사를 진행하였다. 분석 결과 전체 문항의 신뢰도는 .94로 신뢰롭게 나타났다. 그리고 문항 특성 부분인 변별도는 .53~.83이었고, 난이도에서도 만족할만한 결과 값을 보여주었다. 개발된 정보영재를 위한 온라인 콘텐츠 평가 준거는 '재능개발', '상호작용' 등 5개 평가 영역, 11개 평가 요인, 40개 평가 문항으로 구성하였다. 본 연구에서 제시한 평가 준거는 정보영재 온라인 콘텐츠 개발을 위한 가이드라인 및 온라인 교재 선택에 도움을 줄 수 있을 것으로 기대된다.

• 컴퓨터교육학회논문지
• /
• 제6권4호
• /
• pp.1-10
• /
• 2003

제7차 교육과정이 시작되면서 수업의 형태가 다양화되어지고 있다. 이 중에 팀별로 문제를 해결하는 협동학습이 학교에서 진행되고 있는데, 협동학습 시 평가를 위한 연구는 많이 진행되고 있지 않다. 한편, 웹기반교육인 경우 매체의 특성 때문에 협동학습이 더욱 잘 활용될 수 있다. 향 후, 웹기반 협동학습을 위한 선행연구로서 전통적 협동학습에서 결과 중심의 평가방법을 지양하면서 팀별로 문제해결을 위한 과정을 종합적으로 평가하며 팀 구성원을 개별적으로 평가할 수 있는 새로운 학습자 평가문항이 요구된다. 본 논문에서는 ABET EC-2000에서 개발한 프로그램 결과물과 평가에 관한 속성들 중에서 관련되는 속성을 추출하고 Bloom의 인지적 영역을 혼합하여 평가문항을 마련한다. 또한, 본 논문에서는 제안한 평가문항의 신뢰도를 검증하고, 각 평가문항의 척도를 임의적으로 계량화한 후 학생들이 전통적인 평가방법에 의해 받은 점수와 제안한 평가문항으로 설문을 실시한 후의 점수를 이용하여 본 논문의 결과물에 대한 응용 사례를 제시한다.

• 한국사회복지학
• /
• 제59권4호
• /
• pp.273-296
• /
• 2007

본 연구는 장애정체감을 평가하는 도구로 개발된 23문항의 척도를 Rasch 모형을 적용하여 문항을 재구성한 연구이다. 척수손상 장애인 397명을 대상으로 개발한 장애정체감 척도(이익섭 신은경, 2006)는 요인분석으로 타당도를 검증한 것으로 문항의 적합도나 난이도 및 응답범주의 적절성을 평가하지는 못하였다. 본 연구에서는 요인분석 절차에서 파생될 수 있는 한계를 보완하고자 문항반응이론(item response theory)의 하나인 Rasch 모형을 각 하위차원별로 적용하여 장애정체감 척도를 재검토하였다. 결과로는 4개차원의 20문항으로 축소되는 것이 문항의 적합도가 높은 것으로 나타났으며, 문항의 난이도 측면에서는 평균수준의 문항이 많은 것으로 드러났다. 응답범주는 4점 척도가 적절했다고 평가되었다. 이러한 척도의 재구성을 통하여 장애정체감의 문항 적합도와 난이도 및 응답범주의 적절성을 객관적으로 평가할 수 있었다.

• 한국산림과학회지
• /
• 제111권3호
• /
• pp.450-460
• /
• 2022

본 연구는 산림교육 프로그램을 평가하고, 국민의 산림생태감수성을 측정하기 위한 문항을 구성하여 신뢰도와 타당도를 검증하고, 척도를 개발하는 데 목적이 있다. 문헌 연구와 전문가 회의를 통해 산림생태감수성의 정의를 내리고 각 문항의 요인을 나누어 106개의 예비문항을 개발하였고, 전문가 평가를 통해 내용타당도와 문항이해도 및 중복성을 평가하여 98문항을 추출하였다. 추출된 문항을 바탕으로 성인 256명에게 예비조사를 진행하였다. 조사 결과를 바탕으로 탐색적 요인분석을 실시하였고, 요인간 중복되는 문항과 요인부하량에 적합하지 않은 문항을 제외하여 총 19문항을 선정하였다. 본 연구는 전국에 있는 성인을 대상으로 진행하였고, 총 557명이 참여하였고, 분석에는 532개의 설문이 사용되었다. 탐색적 및 확인적 요인분석 결과, 산림생태감수성 척도는 10문항, 3개 요인(개인적 단계, 사회적 단계, 일체적 단계)로 구성되었고, 양호한 적합도를 보였다. 본 연구를 통해 개발된 산림생태감수성 문항을 이용하여 산림교육 프로그램의 효과성을 평가하여 산림교육 프로그램의 질적 향상에 기여할 수 있길 기대해본다.

• 대한수학교육학회지:수학교육학연구
• /
• 제23권2호
• /
• pp.193-212
• /
• 2013

본 연구의 목적은 선택형 문항 제작 전문성 향상 연수에 참여한 고등학교 수학교사들의 경험을 바탕으로 평가 문항 제작 전문성 향상 연수 프로그램의 효과 제고 요인을 밝히기 위한 것으로, 이를 위하여 사례연구를 실시하였다. 연수 한 팀에 교사 5명이 참여하였고 연수 후 포커스 그룹 인터뷰를 실시하였다. 두 차례의 포커스 그룹 인터뷰 자료에 대한 질적 분석을 통해 선택형 평가 문항 연수의 효과 제고 요인을 도출하였다. 연구 결과로 연수 프로그램 효과 제고 요인은 집중 훈련 가능한 프로그램 구조(소규모 인원의 협력학습, 적정량의 집중적인 훈련), 문항 제작 습관 표면화와 수정(사전과제를 통한 문항 제작습관 표면화, 문항 제작에 대한 즉각 피드백), 교사간 공감대 형성(적극적인 학습태도, 문항 제작 과정 공유), 평가 문항 제작 전문성에 대한 자기 성찰(문항 제작 과정에 대한 반성, 문항 제작 전문성 중 취약점 자각)이었다. 이러한 요인을 바탕으로 평가 문항 제작 전문성 향상 연수 프로그램 개발을 위한 시사점을 도출하였다.

• 한국체육학회지인문사회과학편
• /
• 제55권6호
• /
• pp.417-435
• /
• 2016

본 연구의 목적은 태권도 공연 관람자의 인지된 가치 척도를 개발하고 더 나아가 개발된 가치 척도에 대해 다양한 분석 방법을 이용하여 척도의 타당성, 신뢰성, 적용가능성을 평가하여 태권도 공연 관람자에 대한 후속 연구를 위한 기초 자료를 제공하는데 있다. 이에 따라 척도개발과 관련된 선행연구의 절차를 참고하여 8단계 방법인 (1) 선행연구 검토, (2) 예비 요인 및 문항 추출, (3) 문항의 정제 및 평가, (4) 예비조사, (5) 데이터 수집, (6) 문항의 타당성 확보, (7) 문항의 유효성 평가, (8) 문항의 적용가능성 검토를 실시하였다. 분석 결과 태권도 공연 관람자의 인지된 가치 척도는 문화적, 사회적, 쾌락적, 미적, 도덕적 및 실용적 가치 등 6가지 요인, 19문항으로 개발되었다. 한편, 개발된 가치의 적용가능성을 검토하고자 관람태도, 만족 및 미래 소비행동과의 관계를 분석한 결과 문화적, 사회적, 미적, 도덕적 가치는 관람태도에 유의한 영향을 미치는 것으로 나타났으며, 사회적, 쾌락적, 실용적 가치는 관람만족에 유의한 영향을 미치는 것으로 나타났다. 또한 문화적, 사회적, 미적 가치는 미래 소비행동에 유의한 영향을 미치는 것으로 나타나 개발된 가치 척도의 모든 요인은 소비자행동(태도, 만족 및 행동)에 영향을 미치는 요인임을 확인 하였다.

• 대한화학회지
• /
• 제65권1호
• /
• pp.48-57
• /
• 2021

본 연구는 국제 학업성취도 평가인 TIMSS 2019 사전검사에서 지필 평가와 컴퓨터 기반 평가로 시행된 과학 평가 문항을 분석하여 검사 매체에 따라 문항 정답률에 영향을 미치는지를 문항 및 학년별로 살펴보았다. 그 결과, 4학년과 8학년 모두 검사 매체에 따른 과학과 문항 정답률 차이가 크지 않았다. 학년별로 살펴보면, 8학년보다는 4학년의 경우 정답률 차이가 상대적으로 크게 나타났다. 문항별로 살펴보면, 선다형 문항보다는 서답형 문항의 경우 정답률 차이가 상대적으로 크게 나타났다. 검사 매체 영향에 대한 과학과 평가 문항 내용을 분석한 결과로는 선다형 문항은 지필 평가와 컴퓨터 기반 평가 문항간의 차이가 거의 없었으나, 서답형 문항은 지필 평가에 비해 서답형 문항의 정답률이 낮아지는 경향을 보였다. 또한, 학년별로는 4학년 학생들이 8학년 학생들보다 서답형 문항에서 정답률이 낮아지는 것으로 나타났다. 본 연구를 토대로, 우리나라 컴퓨터 기반 평가의 개발과 현장 도입과 관련된 시사점을 제공하고 컴퓨터 기반 평가가 학교 평가로 잘 정착하기 위한 교육적 함의를 고찰하고자 한다.

• 대한수학교육학회지:수학교육학연구
• /
• 제26권3호
• /
• pp.527-542
• /
• 2016

통계 정보에 대한 비판적 이해 능력을 강조하는 통계적 소양이 통계 교육의 목표로 주목받고 있다. 통계적 소양 교육을 위해서는 평가의 역할이 중요하다. 특히 대학수학능력시험이 우리나라 학교 수업에 미치는 영향을 고려할 때, 대학수학능력시험에서 통계적 소양을 평가할 수 있는 문항이 출제될 필요가 있다. 이를 확인하기 위하여 PISA 평가틀(OECD, 2013)을 이용하여 대학수학능력시험의 통계 문항이 통계 정보에 대한 비판적 이해 능력을 측정하는지, 다양한 맥락을 활용하는지를 분석하였다. 대학입학시험에서 통계적 소양의 평가와 측정을 반영하기 위한 시사점을 도출하고자, 미국의 대학입학시험인 SAT의 통계 문항과 비교 또한 시도하였다. 분석 결과 수능과 SAT 모두 다양한 유형의 맥락을 활용하고 있었으나, 수능에 출제된 통계 문항들은 비판적 이해 능력을 평가하는 것에 있어 제한적인 것으로 나타났다. SAT에 출제된 통계 문항에는 비판적 이해 능력을 평가하는 것이 상당수 포함되어 있다. 이를 포함하여 통계적 소양을 평가하기 위한 다양한 문항들이 있다. 이 문항들을 참고하여 우리나라의 교육과정에서 제시하는 통계교육의 목표, 내용, 방법에 적합한 통계적 소양 평가문항을 개발할 필요가 있다.

• 한국멀티미디어학회:학술대회논문집
• /
• 한국멀티미디어학회 2000년도 춘계학술발표논문집
• /
• pp.210-214
• /
• 2000

컴퓨터를 이용한 교육 시스템은 1950년대말 일리노리 대학의 Donald Bitzer 박사에 의해 구상되어 왔고 1961년 PLATO 시스템이 개발된 이래 지난 30여년 동안 다각적인 연구가 이루어져왔고, 특히, 인터넷과 정보통신기술의 발달은 WWW 기반의 원격교육시스템의 개발과 발전을 진일보 시켰으며, 이들 시스템들은 기존의 교육 패러다임을 변모시키는 새로운 형태의 교육체계 구현을 통해 교육현장에 커다란 기여를 하고 있다. 본 논문은 WW W기반 기술 중 능동적 정보전달방식인 Push 기술을 기존 원격교육 시스템에 접목하여 학습자가 인터넷의 학습 DB에 접속하지 않고도 학습 내용을 제공받을수 있고, 새로운 학습정보를 실시간적으로 파악할 수 있는 Push 기반 원격교육시스템을 제안한다. 또한 , 학습지의 다양한 수준에 맞는 문제의 처리와 문항 분석이 가능한 수준별 문항평가 알고리즘을 통해 학습자의 학습수준에 적합한 문항 평가 이루어지도록 설계하였다.