• 한국정보과학회 언어공학연구회:학술대회논문집(한글 및 한국어 정보처리)
• /
• 한국정보과학회언어공학연구회 2016년도 제28회 한글 및 한국어 정보처리 학술대회
• /
• pp.181-185
• /
• 2016

최근 교육과정에서 학생들의 능력 평가는 단순 암기보다 학생들의 종합적인 사고력을 판단할 수 있는 서답형 문항을 늘리는 방향으로 변하고 있다. 그러나 서답형 문항의 경우 채점하는 데 시간과 비용이 많이 들고, 채점자의 주관에 따라 채점 결과의 일관성과 신뢰성을 보장하기 어렵다는 문제가 있다. 이런 점을 해결하기 위해 해외의 사례를 참고하여 국내에서도 서답형 문항에 자동채점 시스템을 적용하는 연구를 진행하고 있다. 본 논문에서는 2014년도에 개발된 '한국어 문장 수준 서답형 문항 자동채점 시스템'의 성능분석을 바탕으로 언어 처리 기능과 자동채점 성능을 개선한 2015년도 자동채점 시스템을 간략하게 소개하고, 각 자동채점 시스템의 성능을 비교 분석한다. 성능 분석 대상으로는 2014년도 국가수준 학업성취도평가의 서답형 문항을 사용했다. 실험 결과, 개선한 시스템의 평균 완전 일치도와 평균 정확률이 기존의 시스템보다 각각 9.4%p, 8.9%p 증가했다. 자동채점 시스템의 목적은 가능한 채점 시간을 단축하면서 채점 기준의 일관성과 신뢰성을 확보하는 데 있으므로, 보완한 2015년 자동채점 시스템의 성능이 향상되었다고 판단할 수 있다.

• 한국컴퓨터정보학회:학술대회논문집
• /
• 한국컴퓨터정보학회 2023년도 제68차 하계학술대회논문집 31권2호
• /
• pp.109-110
• /
• 2023

본 논문에서는 교육현장에서 서술평평가를 자동화하기 위한 시스템을 제안한다. 제안 시스템은 장문의 응답에서 단어를 추출하여 단어 간 네트워크를 생성하고 정답 네트워크와 비교를 통해 평가를 실시한다. 기존의 키워드 방식은 네트워크 관점에서 노드를 기준으로 채점하는 것이라면, 제안 시스템은 엣지를 기준으로 채점하게 되어 학습자의 답변에서 지식의 관계성을 채점할 수 있어 학습자에게 유용한 피드백을 줄 수 있을 것으로 기대한다.

• 영재교육연구
• /
• 제9권1호
• /
• pp.127-147
• /
• 1999

본 연구는 마인드맵이 아동의 작문수행에 미치는 효과를 연구하기 위해 이루어졌다. 연구 대상자는 초등학교 6학년 학생 78명(2학급)으로, 각 학급을 실험집단과 통제집단에 각각 무선으로 배정하고 사전검사를 실시하였다. 이어서 10차시에 걸친 실험을 실시하고 실험을 마친 다음날 직후검사를 하였다. 실험의 파지효과를 알아보기 위해서는 실험 종류 1주 후에 파지검사를 실시하였다. 본 연구에서 사용된 측정도구는 작문검사(사전검사, 직후검사 및 파지검사)이다. 작문의 채점에 있어서는 2명의 채점자가 분석적 평가 기준에 따라 채점한 것을 합산하여 사용하였다. 분석결과는 다음과 같다. 1) 마인드맵이 아동의 작문수행에 미치는 효과는 긍정적이었다. 2) 마인드맵이 아동의 작문수행에 미치는 효과는 지속적이었다. 이러한 연구결과는 아이디어를 창출하고 아이디어를 조작하며 글을 개정하는 과정에서 마인드맵이 유용한 학습도구로서 이용될 수 있음을 시사해준다. 또한 정규교실에 있는 영재아들에게도 양반구의 기능을 고루 활용하는 마인드맵이 독자적인 학습방법으로 유용하게 활용될 수 있을 것으로 보인다.

• 정보교육학회논문지
• /
• 제8권1호
• /
• pp.113-125
• /
• 2004

본 논문에서는 실제 학생들이 논술시험을 치르는 것과 유사하게, 온라인 상에서 200자 원고지를 이용하여 논술을 작성하고 작성된 원고지 위에 첨삭지도를 할 수 있도록 하는 온라인 논술시험 시스템을 설계 및 구현하였다. 온라인 논술시험 시스템의 주요기능은 응시자가 주어진 논술문제에 대한 논술답안을 작성하여 원고지로 전환하여 제출하고, 채점자는 제출된 원고지 위에 직접 첨삭지도를 한다. 제안된 시스템에서 채점자는 펜 마우스와 타블렛을 이용하여 첨삭지도를 하고, 네트워크의 트래픽을 줄이기 위해서 원고지 그림을 JPEG형태로 압축하여 서버로 전송한다. 이 시스템은 비용이 적게 들고, 효율성, 사용성 면에서 상당한 이점이 있다. 나아가 온라인 주관식시험의 한 대안으로 발전 가능하리라 기대한다.

• 정보교육학회논문지
• /
• 제8권1호
• /
• pp.1-13
• /
• 2004

본 논문에서는 실제 학생들이 논술시험을 치르는 것과 유사하게, 온라인 상에서 200자 원고지를 이용하여 논술을 작성하고 작성된 원고지 위에 첨삭지도를 할 수 있도록 하는 온라인 논술시험 시스템을 설계 및 구현하였다. 온라인 논술시험 시스템의 주요기능은 응시자가 주어진 논술문제에 대한 논술답안을 작성하여 원고지로 전환하여 제출하고, 채점자는 제출된 원고지 위에 직접 첨삭지도를 한다. 제안된 시스템에서 채점자는 펜 마우스와 타블렛을 이용하여 첨삭지도를 하고, 네트워크의 트래픽을 줄이기 위해서 원고지 그림을 JPEG형태로 압축하여 서버로 전송한다. 이 시스템은 비용이 적게 들고, 효율성, 사용성 면에서 상당한 이점이 있다. 나아가 온라인 주관식시험의 한 대안으로 발전 가능하리라 기대한다.

• 정보교육학회논문지
• /
• 제8권2호
• /
• pp.251-259
• /
• 2004

우리 생활 전반은 인터넷 서비스의 확대 보급으로 많은 변화를 보이고 있으며 학교 현장 역시 인터넷과 학교 전산망이 설치되어 교육에 필요한 다양한 정보의 수집과 탐색이 용이해짐으로써 인터넷을 활용한 웹 기반 가상 수업 실시, 실시간 평가, 학습 진도 관리 등 새로운 형태의 교육 활동이 이루어지고 있다. 본 논문은 문제의 정답이 한가지로 이루어진 단답형 문제가 아니라 간단한 문장으로 이루어진 문제를 처리할 수 있는 웹 기반 온라인 주관식 문항 평가 시스템을 학습자의 성취 수준을 보다 빠르게 정확하게 알 수 있도록 하였다. 정확히 규정된 정답과 정확한 채점 기준이 있는 주관식 문제는 교사가 직접 채점하는 경우와 유사한 정확성을 가지고 있으며 채점 시간의 신속성이 매우 높아서 평가 결과의 실시간 피드백이 가능하여 주관식 문제를 평가하는데 그 효율성이 기대된다.

• 한국가정과교육학회지
• /
• 제32권3호
• /
• pp.135-159
• /
• 2020

본 연구는 교육과정, 수업, 평가의 일체화를 강조하고 있는 교육의 변화 속에서 2015 개정 가정과 교육과정에서 수업과 평가를 연계할 수 있는 서술형 평가 문항을 개발하는 것에 목적을 두었으며 연구의 내용은 다음과 같다. 첫째, 평가계획 수립 단계에서는 평가기준에 제시된 평가 영역 중 서술형 평가에 적합한 14개의 성취기준이 분석되었으며 총 29개 문항의 내용요소를 포함하여 문항요소를 개발하였다. 둘째, 평가도구 개발 단계에서는 서술형 문항의 구조에 알맞은 문항을 사전개발하고, 문항에서 활용할 자료, 채점기준의 제시 방법을 각 문항에 맞게 선택하였다. 셋째, 답안 및 채점기준표 작성 단계에서는 채점기준과 부분점수별 예시 답안을 채점기준표로 작성하고 평가목표와 채점 항목, 항목별 배점을 검토하였다. 넷째, 전문가 검토 및 수정·보완 단계에서는 개발된 문항과 답안들은 전문적 교과학습공동체 교사들과 함께 문항 구성요소, 평가목표의 구체화, 출제 의도의 구현 여부, 채점 결과에 대하여 예비검토와 상호검토를 거쳐 수정·보완하였다. 본 연구는 서술형 평가 문항과 채점기준 개발을 위한 기초 연구로 활용될 수 있으며, 이를 통해 교사의 평가 전문성에 대한 인식변화를 도모하고 추후 학습자의 지식 적용능력을 높이기 위한 서술형 문항개발 연구에 도움이 될 수 있을 것이다.

• 한국정보과학회:학술대회논문집
• /
• 한국정보과학회 2006년도 가을 학술발표논문집 Vol.33 No.2 (A)
• /
• pp.92-96
• /
• 2006

WBES(Web-Based Education System for Programming Language)는 웹을 기반으로 한 프로그래밍 학습 시스템이다. 학습자와 교수자가 시스템적 공간적 제약에 구애 받지 않도록 하여 학습자에게는 자율적이고 효율적인 학습이 가능하도록 하고 교수자에게는 과제제출이나 성적부여에 편의성을 극대화 한다는 장점이 있다. 본 논문에서 제안하는 WBES의 구현으로 가상학습시스템의 실습교육환경 미 구축 문제를 해결하여 이론교육과 그에 따른 실습이 병행되도록 한다. 또한 교수자 일인당 많은 학습자가 존재하는 현재의 교육환경에서 과제제출과 채점, 성적부여에서 학습자를 개인단위로 관리해야 하는 어려움을 별도의 과정이나 번거로움 없이 해결한다. 향후 본 시스템은 사이버대학, 방송대학, IT교육기관 등의 가상교육 학습시스템의 컨텐츠로 활용 가능할 뿐만 아니라 점차 확대되고 있는 공학인증시스템에 도입되어 발전가능하다.

• 한국가정과교육학회지
• /
• 제21권1호
• /
• pp.35-49
• /
• 2009

본 연구의 목적은 제7차 교육과정 중학교 3학년과 2007 개정 교육과정 중학교 주생활 관련 단원의 수행평가를 위해 학습자 참여 분석적 루브릭 개발 수업이 학습동기에 미치는 영향을 살펴보는데 있다. 루브릭 개발 수업은 개별 수행과제로 연구보고서법을 활용하여 '내가 살고 싶은 집'의 루브릭을 개발하는 것으로, 루브릭을 개발하는 과정은 정의, 개발, 평가 단계를 거쳐 이루어졌다. 루브릭 개발 수업이 학습동기에 미치는 영향을 살펴보기 위해 중학교 3학년 한 학급씩 실험집단과 통제집단으로 선정하여 독립변인은 루브릭 제시방식으로 종속변인은 학습동기로 하여 총 2차시에 걸쳐 실험이 이루어졌고 사잔 사후 동기검사를 실시하였다. '내가 살고 싶은 집'의 루브릭은 '주거공간의 기본 조건에 대한 개념의 정확성', '적용방법의 적합성', '보고서 제출 마감일 준수'의 3가지 평가항목에 따라 채점기준이 A, B, C 또는 A, B, C, D 척도로 채점기준을 기술하였다. 채점자 간 신뢰도는 모두 높게 나타났다. 루브릭의 개발수업이 학습동기에 미치는 영향을 살펴본 결과 주의집중과 관련성에는 영향을 주지 않았으나 자신감과 만족감에는 긍정적인 영향을 주었다. 개방형 질문의 내용분석 결과에서도 루브릭 개발 수업이 학생의 자신감과 만족감에 긍정적 영향을 미쳤다는 것을 알 수 있었다.

• 응용통계연구
• /
• 제9권2호
• /
• pp.45-53
• /
• 1996

1994년도 대학입시부터 재개된 논술시험이 점차 그 비중을 확대하는 추세에 있다. 논술시험은 특히 1997년도 입시부터 시작될 교육개혁안에 의한 대학입시체제에서 강조된다고 한다. 그러나 논술시험에 대해 우려되는 것이 몇가지 있으며 그 중 하나는 채점의 신뢰도에 관한 것이다. 본 연구에서는 1995년도 K대학교 입시 논술의 채점 신뢰도를 높이기 위하여 취해졌던 연구과정과 그 결과를 평가, 보고한다. 주요 결과는 두 차례에 걸친 독립 채점의 결과 그 차이가 정한 값 이상일 때 재검하여 제3차 채점자가 최종점수를 내는 채점절차가 세 차례에 걸쳐 독립적으로 채점하는 절차보다 신뢰도가 높으며 또한 효율적이라는 것이다.