• 한국도서관정보학회지
• /
• 제52권4호
• /
• pp.205-228
• /
• 2021

본 연구는 도서관 이용자에게 맞춤형 도서를 추천하기 위한 기초 데이터 수집의 한 방편으로 '독서감상 표현을 위한 체크리스트'를 개발하였다. 감상은 이해가 선행되는 작업이므로, 읽기이해력 관련 논문을 분석하여 읽기이해의 하위 요소를 범주화하고, 독자반응이론과 리터러시 교육을 실제 독서교육 현장에 적용한 논문들에서 독서 후 질문 구성에 참조가 되는 단어와 구문을 추출하여 문장의 형태로 문항을 구성하였다. 개발된 문항들은 독서지도 전문가들의 검토를 거쳐 수정, 보완되었으며, 사실·추론적 이해 관련 문항 4개, 평가적 이해 관련 문항 3개, 감상적 이해 관련 문항 7개, 총 14개의 문항으로 구성된 체크리스트가 최종 완성되었다.

• 한국과학교육학회지
• /
• 제40권3호
• /
• pp.253-269
• /
• 2020

본 연구는 2015 개정 과학과 교육과정에 제시된 성취기준에 기초하여 현대물리 개념지식에 대한 예비 물리교사의 이해를 진단할 수 있는 개념 진단지를 개발하고 타당도와 신뢰도를 확인하였다. Messick(1995)의 분류에 따른 5가지 타당도 중 검사내용에 기초한 타당도는 일련의 전문가 내용타당도 검사로 진행하여 확인한 후 24문항의 설문용 현대물리 개념 진단지를 구성하였다. 국내 15개 사범대학의 467명의 예비 물리교사에게 개발된 현대물리 개념 진단지를 적용하여 문항의 신뢰도와 Messick(1995)의 나머지 4가지 타당도를 확인하였다. 실제에 기초한 타당도는 Rasch 모형이 적용된 통계분석방법으로 문항적합도(MNSQ)를 확인한 결과, 23문항이 적합한 수준으로 나타났다. 이중 오타가 발생한 문항을 제외한 22문항에 대하여 내적구조에 기초한 타당도 분석을 하여 개발된 현대물리 개념 진단지의 일차원성을 확인하였다. 일반화에 기초한 타당도 확인 결과에 따르면 개발된 개념 진단지가 집단특성에 대해 독립적이라고 판단된다. 양자역학 수강 여부에 따른 검사점수의 t-검증 결과, 유의미한 차이가 나타났으며, 이를 외적준거에 기초한 타당도 확인으로 활용하였다. Cronbach alpha 및 Rasch 모형 분석에서의 피험자 신뢰도와 문항신뢰도 값은 검사자료가 적합한 수준의 신뢰도를 갖는다는 보여주었다. 또한 고전검사이론에 의한 문항분석 결과, 양호한 문항난이도를 보여주었으며 문항변별도는 두 문항이 준거값을 벗어났으나 다른 나머지 문항들은 양호한 값을 보여주었다. 양류상관계수는 한 문항을 제외한 나머지에 대해서 양호한 값을 나타내었다. KR-20과 Ferguson's delta 값 역시 검사지가 양호하다는 것을 보여주었다. 마지막으로 문항반응 이론에 의한 문항난이도(추정치)를 Rasch 모형 분석으로 추정하였으며, 이 값들은 피험자 집단 특성에 영향을 받지 않을 것으로 판단된다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 2005년도 한국컴퓨터종합학술대회 논문집 Vol.32 No.1 (A)
• /
• pp.88-90
• /
• 2005

컴퓨터 개별적응 검사(CAT: Computerized Adaptive Testing)란 각 학습자 수준에 적절한 형태의 검사를 개별적으로 실시함으로써 짧은 시간 안에 적은 수의 문항으로도 측정하고자 하는 제 특성을 보다 정확하고 효율적으로 측정할 수 있게 하는 기법이다. 이는 학습자 중심의 수준별 교육을 위한 학습 도구로서 이용될 수 있다. 본 연구에서는 문항반응이론 기반의 CAT를 학습에 적용시킴으로써 학습자의 평가결과에 따라 즉각적인 피드백을 통한 개별학습을 할 수 있고 일정수준의 성취단계에 이를 때까지 스스로 부족한 부분에 대한 평가를 계속 실시하여 완전학습에 도달할 수 있는 새로운 형태의 CAT 기반 학습시스템을 제시한다.

• 한국정보처리학회:학술대회논문집
• /
• 한국정보처리학회 2008년도 추계학술발표대회
• /
• pp.1149-1151
• /
• 2008

본 논문에서는 학습자들의 학습특성 및 학습 능력에 따라 문제은행에서 문항을 선택하는 기준과 학습코스를 재구성하기 위한 방법을 제안한다. 본 논문에서 제안한 시스템은 학습단계와 평가단계를 연계하여 평가 단계에서 추정된 학습자의 능력에 따라 차기 학습단계에서 수준별 학습내용을 재구성하여 학습자에게 제공함으로써 합리적인 학습이 가능하도록 지원하고 있다. 이를 위해 학습자의 학습능력을 정확하게 판단 할 수 있도록 문항반응 이론에 의한 학습자 능력평가 모듈을 만들고, 가중치 값을 갖는 문항특성모델을 개발하여 적용함으로써 학습과정의 우선순위를 부여하여 학습코스를 재구성하는 시스템을 설계 및 구현하였다.

• 한국콘텐츠학회논문지
• /
• 제11권12호
• /
• pp.220-229
• /
• 2011

본 연구는 소비자가 제품 및 서비스 불만족으로 인해 발생하는 감정적 반응 (Anger)이 소비자 불평행동에 미치는 영향을 행동이론 중에 하나인 계획행동이론(Theory of Planned Behavior)과 결합하여 살펴보고자 한다. 본 연구는 삼성 핸드폰 애니콜 사용자들이 개설한 '소비자의 힘'이란 웹사이트에서 소비자들의 적극적인 활동을 예측하기 위해서 기존 문헌연구를 통해 감정적인 부분과 인지적인 요인들의 결합을 통한 모델을 제시하였다. 제시된 모델을 검증하기 위해서 "소비자의 힘" 웹 사이트 회원들을 대상으로 실증적 분석을 위한 온라인 설문을 실시하였다. 온라인 설문은 감정적 반응인 분노와 계획행동이론의 변인들(주관적 규범, 태도, 행동의도, 행위)과 함께 불평행동 하나인 서명운동의 유무를 묻는 문항들로 구성되었다. 수집된 자료를 분석한 결과, 제품 서비스에 대한 감정적 반응(Anger)과 행동이론의 결합이 소비자 행동을 보다 잘 예측하는 것으로 판명되었다. 그리고 불평행동의 적극적 참여 의도는 서명참여 유무를 유의미하게 설명하였다.

• 한국과학교육학회지
• /
• 제22권1호
• /
• pp.40-53
• /
• 2002

이 연구의 목적은 만 15세 학생들의 과학적 소양을 평가하는 학생 성취도 국제 비교 연구인 PISA 2000의 지구 환경 과학 영역에 해당하는 13개 문항에 대한 우리 나라 여학생과 남학생의 성취도 차이, 여학생과 남학생에게 유리한 문항의 특징, 우리 나라 학생들이 가지는 지구 과학 관련 오개념 등을 파악하는 것이다. 이를 위해 13개 지구 환경 과학 문항의 정답율 및 문항 반응 이론에 의한 정답 반응율을 분석하였다. 분석 결과, 남학생의 평균 정답율이 여학생의 평균 정답율보다 통계적으로 의미 있는 차이를 보이며 높게 나타났으나, 성취 능력이 높은 집단에서는 여학생이 남학생보다 전반적으로 높은 성취 수준의 경향을 보였다. 특히, 문항의 유형에 따라 여학생과 남학생의 정답 반응 경향이 뚜렷하게 차이가 났는데, 성취 능력이 높은 여학생의 경우 서술형 문항에서 가장 높은 성취도 결과를 나타냈다. 여학생에게 유리하게 작용한 문항은 긴 문장의 서술이 필요하거나 과학의 과정과 관련되는 경향을 보였고, 남학생에게 유리하게 작용한 문항은 과학적 지식을 묻거나 자료 해석과 관련되는 경향을 보였다. 한편, 우리 나라 학생들 중에는 지구의 자전축, 적도의 방향, 온실 효과의 원인 등 지구 환경 과학 관련 오개념을 지니고 있는 학생들이 매우 많다는 것도 밝혀졌다.

• 비교교육연구
• /
• 제28권1호
• /
• pp.135-151
• /
• 2018

이 논문은 교육평가학과의 관계를 점검함으로써 비교교육학의 학문적 위상을 정립하는 데 도움을 주려는 목적으로 작성되었다. 비교교육학은 교육학의 분과 학문이면서 교육학의 다른 분과 학문들을 포괄할 수도 있다는 점에서 독특한 성격을 지닌다. 그리고 교육평가학은 평가의 내용을 다루기도 하지만 평가 방법론이 연구 영역에 포함된다는 특징을 지닌다. 교육평가학과 비교교육학 간 접점으로는 먼저 점차 확대되고 있는 국제비교평가를 들 수 있다. 국제비교평가는 1960년대 12개국의 수학교육을 비교하기 위해 실시된 국제수학연구를 필두로 대상 과목과 참여국가가 점점 확대되고 있다. 국제비교평가는 단지 참여국의 순위 경쟁이 목적이 아니라 각국의 교육과정 및 교육실천을 다각도로 비교함으로써 교육 개선을 위한 시사점을 제공하기 위해 실시되고 있다. 국제비교평가에는 다집단 분석을 실시할 수 있으며, 특히 국가 간 사회문화적 차이 등 측정구인 외의 요소가 어떻게 작용하고 있는지 밝히는 차별적 문항기능 분석이 가능하다. 또한 국제비교평가 자료는 다른 교육 자료들과 마찬가지로 위계적 구조를 지니고 있어 다층모형 또는 위계적선형모형이 적절하다. 따라서 문항반응이론을 확장시킨 다층문항반응이론을 적용할 수 있으며, 이를 통해 국가 간 차이에 대한 다차원적 진단이 가능하다. 교육평가학의 방법론적 진보에도 불구하고 비교 교육학과의 간극으로 인해 그 도구들은 적절히 사용되지 못하고 있다. 이를 해결함으로써 비교 교육학은 학문으로서 진일보할 수 있을 것이다. 결론적으로 방법론을 쉽게 풀어 널리 알림으로써 연구자가 도구를 손쉽게 사용할 수 있도록 하는 교육평가 학계의 노력과 함께 이러한 도구들을 사용함으로써 보다 정밀하고 정확한 분석을 통해 정책적 시사점을 도출하고자 하는 비교교육 연구자들의 노력이 함께 요구된다.

• 응용통계연구
• /
• 제22권2호
• /
• pp.309-315
• /
• 2009

인터넷 쇼핑몰에서 상품에 대한 고객의 인지도는 기존 상품사용고객의 상품평과 평점에 의하여 크게 좌우될 수가 있다. 본 논문에서는 이러한 평점을 매기는 인터넷 쇼핑몰의 현황을 조사하여 문제점을 지적하고 간단한 해결책을 제시하고자 한다.

• 대한간호학회지
• /
• 제46권1호
• /
• pp.109-117
• /
• 2016

Purpose: The aim of this study was to develop a Korean version of Night Eating Questionnaire (KNEQ) and test its psychometric properties and evaluate items according to item response theory. Methods: The 14-item NEQ as a measure of severity of the night eating syndrome was translated into Korean, and then this KNEQ was evaluated. A total of 1171 participants aged 20 to 50 completed the KNEQ on the Internet. To test reliability and validity, Cronbach's alpha, correlation, simple regression, and factor analysis were used. Each item was analyzed according to Rasch-Andrich rating scale model and item difficulty, discrimination, infit/outfit, and point measure correlation were evaluated. Results: Construct validity was evident. Cronbach's alpha was .78. The items of evening hyperphagia and nocturnal ingestion showed high ability in discriminating people with night eating syndrome, while items of morning anorexia and mood/sleep provided relatively little information. The results of item analysis showed that item2 and item7 needed to be revised to improve the reliability of KNEQ. Conclusion: KNEQ is an appropriate instrument to measure severity of night eating syndrome with good validity and reliability. However, further studies are needed to find cut-off scores to screen persons with night eating syndrome.

• 한국지구과학회지
• /
• 제24권3호
• /
• pp.150-159
• /
• 2003

본 연구에서는 지구과학 지식과 창의력을 동시에 적용해야 해결할 수 있는 지구과학 창의력을 평가할 수 있는 문항의 개발 방법을 제시하고자 하였다. R&D과정을 거친 본 연구의 결과는 첫째, 조작적 정의를 통해 창의력과 과학창의력간의 인지능력 차이를 명료화하였고 둘째, 과학창의력을 구성하는 하위 요소들 중에서 문항 개발이 가능하다고 판단된 유창성, 융통성, 정교성, 독창성을 선정하여 각각에 대한 조작적 정의를 내린 후 각 요소들에 대한 평가와 채점의 준거를 제시하였다. 셋째, 평가도구의 구비 조건인 타당도, 신뢰도, 변별도, 난이도를 검증하기 위하여 3번의 현장검증을 실시하였으며, 본 연구에서 개발한 지구과학창의력 평가도구는 각 하위 요소별로 2문항씩 총 8문항으로 구성되어 있다. 넷째, 문항합치도 지수 평균은 .99, 문항 내적 합치도 지수인 Cronbach ${\alpha}$값은 .79, 각 문항별 평가자간 신뢰도는 0.78,각 하위 요소별 평가자간 신뢰도는 0.75, 변별도 지수인 점이연상관 지수는 .19, 문항 난이도 지수는 .00이었다. 이와 같이 평가도구의 구비조건들이 허용 범위 내에 있는 것으로 볼 때 본 연구에서 개발한 지구과학 창의력 평가도구는 유용한 것으로 판단할 수 있다.