• 품질경영학회지
• /
• 제45권1호
• /
• pp.55-64
• /
• 2017

본 연구는 컨조인트 분석에서 고려하고자 하는 속성의 수가 많은 경우 속성들의 병합을 통해 문항 당 묻는 속성의 수를 줄이는 방법을 제안한다. 속성 병합에 의한 문항 설계의 경우에 각 문항에 대한 응답자의 더욱 일관된 응답을 기대할 수 있어서 응답의 정확도를 높일 수 있다는 점에서 제안된 방법의 의의를 찾을 수 있다. 사례분석으로 2수준과 3수준 속성이 각각 4개인 $2^4{\times}3^4$ 문항 설계를 위하여 제안된 속성 병합 설계를 이용하여 블록의 크기가 36인 블록화 $6^4$ 설계를 생성하고, 각각의 문항에 대한 응답자들의 선호도 점수를 시뮬레이션 모형에 의해 생성하기 위해 주효과 A, C, V, W와 이인자 교호작용효과 AV, AW를 이용한 효용함수를 가정한다. 축차적인 변수 선택법과 모형 선택 기준에 따라서 1000회 반복된 시뮬레이션 모형에 의해 생성된 문항 자료를 분석하여 각 방법의 power를 비교한 결과, 보수적으로 변수를 선택하는 방법인 BIC를 기준으로 한 변수선택법과 유의수준을 0.01로 하는 본페로니 보정된 유의 수준값을 사용한 전진적 선택법이 적절한 모형 선택 방법으로 추천된다. 속성 병합 설계를 사용하는 경우에는 병합된 속성들 간의 교호작용효과를 추정할 수 없게 된다는 단점이 있다. 특정한 속성들 간의 교호작용효과가 존재할 가능성이 높다고 알려진 경우에는 실무 담당자들이 속성 병합 설계시에 병합되는 속성들의 배치를 조절해 잠재적인 속성들의 이인자 교호작용효과들은 추정가능하게 함으로써 이 문제는 해결 할 수 있다.

• 한국콘텐츠학회논문지
• /
• 제18권3호
• /
• pp.354-360
• /
• 2018

정보통신기술의 발달로 최근 컴퓨터 기술의 발달은 교수자, 학습자들 모두에게 새로운 방식의 교육개념과 교육시스템의 도입을 촉진해왔다. 이에 본 연구는 21세기의 새로운 기술요구에 따라 강조되고 있는 인식론적 프레임(Epistemic Frame)에 대한 이론적 모형 구축과 이를 평가할 수 있는 핵심 평가문항을 구축함을 목적으로 한다. 구체적으로는 첫째, 인식론적 프레임 이론적 모형을 도메인 분석을 통하여 구축한다. 둘째, 구축된 이론적 모형의 구성요소들을 평가할 수 있는 평가요소들을 개발하고자 한다. 마지막으로 개발된 평가문항을 요인분석과 Cronbach's alpha분석을 통하여 타당도와 신뢰도를 평가하였다. 연구 결과로는 컴퓨터를 활용하여 학습할 수 있는 인식적 프레임의 이론 모형제시하고, 이를 평가할 수 있는 평가문항들의 타당도와 신뢰도를 실증적 통계적 분석을 통하여 결과를 제시하였다. 본 연구는 컴퓨터를 활용하여 다양한 영역에서 인식론적 프레임이 적용된 교육프로그램을 개발하는 연구자 및 실무자들에게 유용한 정보를 제공할 것으로 기대된다.

• 한국학교수학회논문집
• /
• 제24권1호
• /
• pp.1-18
• /
• 2021

본 연구의 목적은 수학 교수 효능감 측정 도구(MTEBI)의 심리측정적 특성을 탐색하고 한국 초등 교사들에게 사용할 수 있게 측정 도구를 수정하는 것이다. 문헌 연구를 바탕으로 MTEBI 중 개인 효능감 요인만을 분석하였다. 299명의 초등 교사들의 설문자료를 Rasch 모형을 이용하여 일차원성 가정, 응답범주 적절성, 문항 난이도 적절성, 분리지수와 신뢰도 측면에서 분석하였다. 분석 결과 5점 범주로 된 13개 문항은 심리측정적 측면에서 몇 가지 문제가 있는 것으로 나타났다. 따라서, 후속 분석에서 5점 범주 대신 4점 범주로 수정하였으며 5개의 문항을 삭제한 후 8문항을 사용해 심리측정적 특성을 재분석하였다. 그 결과, 수정된 측정 도구는 초등 교사들의 수학 교수에 대한 개인효능감을 타당성 있게 측정하는 것으로 나타났다. 본 연구의 제한점과 제언을 추가 논의하였다.

• 한국컴퓨터정보학회논문지
• /
• 제28권3호
• /
• pp.177-187
• /
• 2023

이 연구는 교육서비스 관점에서 MOOC의 질 평가를 위한 잠재모형을 도출하고 신뢰롭고 타당한 MOOC 질 평가도구를 개발하고 타당화하는 데 목적이 있다. 연구목적을 달성하기 위해 선행 연구결과에 기초해서, MOOC 평가 잠재모형(4개 요인과 8개 하위요인)을 도출하였다. 이 잠재모형을 토대로 18개 예비 평가문항을 개발한 후, 대학 원격수업 경험이 있는 학습자 138명을 대상으로 문항중요도 설문을 실시하였다. 수집된 136개의 자료를 활용하여 탐색적 요인분석 결과, 수집된 데이터에서 4개의 요인(체제적 학습 경험, 가치 경험, 가치 경험의 공동 창조, 고차원 학습경험)과 7개의 하위요인(실제성, 신뢰성, 확신성, 반응성, 조직환경 체계성, 프로그램 체계성, 학습자 지지의 체계성, 공동주도성)으로 추출되었다. 신뢰도 분석결과, 선정된 문항들은 각 척도를 구성하는 문항으로서 높은 내적합치도를 보였다. MOOC에 대한 평가도구는 타당하고 신뢰할 수 있다는 결론을 내릴 수 있다.

• 한국콘텐츠학회논문지
• /
• 제16권7호
• /
• pp.50-62
• /
• 2016

본 연구는 전문대학을 선택하는 과정에 영향을 미치는 요인을 파악하기 위한 측정도구를 개발하고자 시행되었다. 이를 위해 연구모형과 초기문항을 설정하였고 내용타당도와 1차 예비조사과정을 거쳤다. 문항의 타당도와 신뢰도 분석을 위해 충북 제천 소재의 일개 전문대학 신입생 230명을 대상으로 2차 예비조사를 실시하였으며 문항분석과 문항 신뢰도 분석, 주성분 분석을 이용한 요인분석, Cronbach's ${\alpha}$ 계수를 통한 도구의 신뢰도를 검증하였다. 분석결과 전체 변량의 68.37%를 설명하는 15요인(61문항)이 추출되었으며 속성에 따라 매체경로정보수집(4문항), 대학활동경로정보수집(3문항), 대학지원 및 환경(4문항), 교육관련(5문항), 의사결정영향인사(3문항), 교육품질(4문항), 교육서비스(5문항), 대학명성(3문항), 접근성(2문항), 개인상황(2문항), 매체광고(5문항), 대학프로모션(4문항), 온라인홍보(4문항), 인적홍보(3문항), 대학 이미지(10문항)로 분류되었다. 본 설문도구의 Cronbach's ${\alpha}$는 전체 0.916이었고 각 요인별로 0.694~0.878로 나타났다. 개발된 측정도구는 급격한 환경변화로 신입생 충원에 어려움이 많은 지방 전문대학의 정책적 전략 수립 시 필요한 기초자료 수집에 활용될 수 있을 것이라 생각된다.

• 한국콘텐츠학회논문지
• /
• 제12권3호
• /
• pp.161-170
• /
• 2012

본 연구는 선행연구에서 도출된 무용영재성 구성요인을 바탕으로 무용영재를 판별할 수 있는 구조화된 평가도구를 개발하는 것이 목적이다. 무용영재의 잠재성을 대변할 수 있는 적합한 문항을 개발하기 위하여 무용영재성 구성요인인 신체적 조건, 동작수행능력, 표현 및 창의성, 무용태도 요인을 바탕으로 초기문항을 개발하였다. 1차 기초조사는 무용을 전공자와 직업무용단 단원 등을 조사 대상자로 선정하여 총 206명에게 실시하였고, 설문조사 결과자료를 바탕으로 기술통계 분석과 신뢰도 분석, 그리고 탐색적 요인분석을 실시하였다. 그 결과, 4요인(신체적요인, 표현 및 창의성, 무용태도, 동작수행능력)과 20개의 문항이 선정되었다. 선정된 모형(4개의 구인과 20개의 문항)의 적합도를 알아보기 위하여 1차 설문조사 대상과는 다른 무용전공생과 직업무용단 단원 등을 선정하여 총 292명에게 2차 기초조사를 실시하였다. 설문조사 결과자료를 바탕으로 확인적 요인분석을 실시한 결과, 모든 적합도 지수가 기준치에 만족하는 것으로 나타났다. 본 결과를 통해 4요인의 20개인 문항에 대한 모형은 적합한 것으로 판명되어 최종으로 채택하였다.

• 영재교육연구
• /
• 제17권1호
• /
• pp.1-26
• /
• 2007

본 연구의 목적은 중학교 수학 영재를 수학 창의적 문제해결력 검사로 판별할 때, 유창성만을 기준으로 수학 창의적 문제해결력을 채점하는 방식의 신뢰도와 타당도를 검증하는데 있다. 이를 위해서 수학영역에서의 직관적 통찰능력, 정보의 조직화 능력, 추론능력, 일반화 및 적용능력, 추상화능력, 공간화/시각화 능력, 반성적 사고력을 요구하는 문항들로 구성된 검사를 개발했다. 고급한 수학적 사고력을 요구하며 정답이 하나인 폐쇄적인 수학문항 10개와 다양한 답이 가능한 개방적인 수학 문항 5개를 영재교육기관의 교육대상자 선발과정에 지원한 중학교 1학년 1,032명에게 실시했다. 교사들은 각 문제에 대해 타당한 답을 제시한 빈도로 유창성을 채점했다. 학생들의 반응을 Rasch의 1모수 문항반응모형을 기반으로 한 BIGSTEPS로 분석했다. 문항반응 분석결과, 유창성만으로 측정한 창의성을 기준으로 한 영재교육대상자 선발의 신뢰도, 타당도, 난이도, 변별도가 모두 양호한 것으로 나타났다. 특히 덜 정의되고, 덜 구조화되고, 신선한 문제일수록 영재교육대상자 선발과정에 지원한 학생들의 수학 창의적 문제해결력을 평가하는데 양호한 문제임이 확인되었다. 이 검사는 영재교육원 지원생들이 영재학급 지원생들보다 창의적 문제해결력에서 더 우수함을 확인해주었다. 이로써 유창성만을 기준으로 수학 창의적 문제해결력을 채점하는 방식이 효율적이며, 타당하고 신뢰로울 수 있음을 확인해 주었다.

• 응용통계연구
• /
• 제12권2호
• /
• pp.433-447
• /
• 1999

검사관련 능력과 문항점수사이의 관계를 모형화하기 위해 사용한 순환모형에서 관측불능인 능력상대변수를 비롯한 모든 변수들이 범주형 변수라 가정하자. 이 범주형 자료를 위한 모수추정문제를 다루기 위해 EM 방법을 이용했는데, EM 방법은 사용하기에 편리하지만 순환모형에 대한 추정값이 적절하지 않는 경우가 발생한다. 그 주된 원인중의 하나로 초기값 선정의 잘못을 들 수 있는데, 본 논문에서는 이 외에 구조상의 결함도 그 원인이 됨을 경험적으로 보았다. 따라서 구조적 결함을 먼저 해결하면 보다 효과적인 초기값을 선정할 수 있으리가 기대한다.

• 정보관리학회지
• /
• 제22권4호통권58호
• /
• pp.39-59
• /
• 2005

본 연구는 정보활용능력의 기준과 범위를 설정하여 평가영역 및 평가문항을 설계함과 동시에 대학생들의 현재 정보활용능력의 수준을 진단하고 분석하여 정보활용능력 개발을 위한 평가모형을 제시하는데 목적이 있다. 실증적인 연구를 위해 정보활용능력 웹 평가사이트를 설계하여 학부학생을 대상으로 정보활용능력을 측정하였다. 정보활용능력 구성영역을 통계적 요인분석을 통해 정보자원 영역, 정보요구 영역, 정보검색 영역. 정보분석 영역, 정보기술 및 표현 영역, 정보윤리 영역임을 밝혀내었고, 기초환경 요인, 자가진단 요인, 영역별 요인, 정보활용능력 총점 요인 및 문항분석을 통해 평가설계 요소와 평가절차, 영역별, 수준별 교육 및 평가지침을 제시하였으며, 이를 근거로 정보활용능력의 통합적 평가모형을 개발하였다.

• 한국가정과교육학회지
• /
• 제19권3호
• /
• pp.169-183
• /
• 2007

본 연구는 중학교 2학년에 재학 중인 남녀 청소년을 대상으로 성별에 따른 청소년의 학교생활적응의 차이를 살펴보고, 관련 요인이 청소년의 학교생활적응에 미치는 영향을 파악하였다. 경기도 구리시에 거주하고 있는 중학교 2학년의 900명을 대상으로 조사한 후 874(남 557명, 여 317명)의 설문 자료를 최종분석에 이용하였다. 본 연구에서 얻어진 결과를 하면 다음과 같다. 첫째, 성별에 따른 청소년의 학교생활적응은 유의한 차이가 나타나지 않아 성별에 따른 차이가 없는 것으로 나타났다. 학교생활적응 하위영역의 성별에 따른 차이를 살펴보면 학교교사적응, 학교친구적응, 학교수업적응은 성별에 따라 차이가 없는 것으로 나타났다. 그러나 학교환경적응에서는 성별에 따른 유의미한 차이를 나타내 남학생이 여학생보다 더 많은 영향을 받는 것으로 나타났고, 학교생활적응에서는 여학생이 남학생보다 더 많은 영향을 받는 것으로 나타났다. 둘째, 성별에 따른 청소년의 학교생활적응 관련 요인의 차이를 살펴보면 학교생활적응, 자아존중감, 부모와의 관계는 성별에 따라 차이가 없는 것으로 나타났으며, 친구관계에 있어서는 성별에 따른 유의미한 차이를 나타내 여학생이 남학생보다 친구관계에 있어서 더 많은 영향을 받는 것을 알 수 있다. 셋째, 청소년의 학교생활적응 관련 요인에 따른 학교생활적응의 차이를 살펴보면 청소년의 자아존중감이 높은 집단에서, 그리고 부모 및 친구와의 관계가 좋은 집단에서 학교생활적응도가 높은 것으로 나타났다. 넷째, 관련 요인이 학교생활적응에 미치는 영향을 살펴보면 친구관계가 좋을수록, 부모와의 관계가 좋을수록, 자아존중감이 높을수록 학교생활적응도가 높은 것으로 나타났다. 남학생의 경우 다른 요인보다 친구관계가 가장 많은 영향을 미치는 것으로 나타났고, 여학생의 경우에는 다른 요인보다 부모와의 관계가 가장 많은 영향을 미치는 것으로 나타났다. 머물러 있어 구체적인 개선방안으로 교육과정의 내용을 조망하는 시각으로 이해하여 실제적 인 교육현장에서의 적용능력을 평가할 수 있는 '복합지식 또는 이해와 적용'의 행동영역을 제안하였다. 가정과교수학습법 문항의 행동영역은 대체로 '복합지식 또는 이해와 적용'으로 나타났으나 좀 더 발전적인 문항의 개선방안으로 특정 교수 학습법에 대한 개념과 원리의 이해만을 요하는 문항의 행동영역에서 좀 더 실제적인 수업상황에서 교수학습이론을 폭넓게 적용하는 '적용' 능력을 좀 더 요하는 문항의 행동영역을 제안하였다. 가정과교육평가 문항의 행동영역 역시 대체로 '복합지식 또는 이해와 적용'을 요하는 문항의 행동영역이라고 볼 수 있으나 좀 더 발전적인 문항으로의 개선방안으로 이론적인 내용의 '이해'만으로 해결할 수 있는 문항의 행동영역에서 가정과의 실제 수행평가 상황에 맞는 평가도구를 찾아 제작하고 활용할 수 있는 '적용' 능력을 요하는 문항의 행동영역을 제안하였다. 다섯째, 가정교과교육학 문항내용의 포괄성을 살펴보면 다음과 같다. 가정과교육과정 문항내용은 제7차 교육과정 문서상에 표면적으로 제시된 내용에 한정되어 있어 구체적인 개선방안으로 교육과정의 철학적 이론적 배경, 다양한 교육과정 원리를 활용하는 문항내용 등과 같이 좀 더 이론적이고 원론적인 내용으로의 확대를 제안하였다. 가정과교수학습법 문항내용은 특정 교수학습모형에 관련된 지식을 묻는 내용으로 주로 출제되었다. 이에 구체적인 개선방안으로 특정 교수학습모형의 이론적 토대가 되고 전체적인 교수설계를 하기 위한 기본 바탕이 될 수 있는 교수학습이론에 관한 내용, 또한 현재가정과교육에 있어서 유용한 교수학습법이라고 입증되고 있는 실천적 추론 가정과 수업에 관한 내용으로의 확대를 제안하였다. 가정과교육평가 문항의 출제는 대다수의 문항이 수행평가에 관한 문항내용으로 출제되었다. 이에 구체적인 개선방안으로 문항의