Browse > Article
http://dx.doi.org/10.9716/KITS.2021.20.4.129

An Inquiry into Prediction of Learner's Academic Performance through Learner Characteristics and Recommended Items with AI Tutors in Adaptive Learning  

Choi, Minseon (이화여자대학교 교육공학과)
Chung, Jaesam (이화여자대학교 교육공학과)
Publication Information
Journal of Information Technology Services / v.20, no.4, 2021 , pp. 129-140 More about this Journal
Abstract
Recently, interest in AI tutors is rising as a way to bridge the educational gap in school settings. However, research confirming the effectiveness of AI tutors is lacking. The purpose of this study is to explore how effective learner characteristics and recommended item learning activities are in predicting learner's academic performance in an adaptive online learning environment. This study proposed the hypothesis that learner characteristics (prior knowledge, midterm evaluation) and recommended item learning activities (learning time, correct answer check, incorrect answer correction, satisfaction, correct answer rate) predict academic achievement. In order to verify the hypothesis, the data of 362 learners were analyzed by collecting data from the learning management system (LMS) from the perspective of learning analytics. For data analysis, regression analysis was performed using the regsubset function provided by the leaps package of the R program. The results of analyses showed that prior knowledge, midterm evaluation, correct answer confirmation, incorrect answer correction, and satisfaction had a positive effect on academic performance, but learning time had a negative effect on academic performance. On the other hand, the percentage of correct answers did not have a significant effect on academic performance. The results of this study suggest that recommended item learning activities, which mean behavioral indicators of interaction with AI tutors, are important in the learning process stage to increase academic performance in an adaptive online learning environment.
Keywords
Adaptive Learning; Recommended Items; AI Tutors; Behavioral Indicators; Prediction of Learner's Academic Performance;
Citations & Related Records
Times Cited By KSCI : 2  (Citation Analysis)
연도 인용수 순위
1 Joksimovic, S., D. Gasevic, T.M. Loughin, V. Kovanovic, and M. Hatala, "Learning at distance : Effects of interaction traces on academic achievement", Computers and Education, Vol.87, 2015, 204-217.   DOI
2 Yu, T. and I.H. Jo, "Educational technology approach toward learning analytics : Relationship between student online behavior and learning performance in higher education", Proceedings of the Fourth International Conference on Learning Analytics and Knowledge, 2014, 269-270.
3 채종현, "머신러닝 기반의 학습분석기술 적용 사례", 2018 이러닝 코리아 발표자료, 2018. 9. 15.
4 Agudo-Peregrina, A.F., S. Iglesias-Pradas, M. A. Conde-Gonzalez, and A. Hernandez-Garcia, "Can we predict success from log data in VLEs? Classification of interactions for learning analytics and their relation with performance in VLE-supported F2F and online learning", Computers in Human Behavior, Vol.31, 2014, 542-550.   DOI
5 이재무, 김두규, "동적 링크를 지원하는 적응형 학습시스템의 구현", 한국정보교육학회, 제16권, 제3호, 2012, 275-282.
6 교육부, "인공지능, 학교 속으로! 인공지능(AI), 초등수학 고우 도우미로, 고교 진로 선택 과목으로 도입", 보도자료, 2020. 9. 11.
7 고민서, "AI 활용교육 年40%대 급성장...코로나發 학습격차 메운다", 매일경제, 2021. 5. 14.
8 곽기영, "R을 이용한 통계데이터분석", 서울, 도서출판 청람, 2019.
9 교육부, "17천여 편의 온라인 콘텐츠와 인공지능(AI) 학습 지원으로 수준별 자기주도적 학습서비스 강화", 보도자료, 2021a. 5. 27.
10 교육부, "2020년 국가수준 학업성취도 평가 결과 및 학습 지원 강화를 위한 대응 전략 발표", 보도자료, 2021b. 6. 1.
11 구아현, "인공지능(AI)으로 영어교육이 확 달라지고 있다", AI타임스, 2021. 6. 2.
12 김영민, "e-learning에서 물류 학습자 특성이 물류학업 성취도에 미치는 영향에 관한 연구", 유통경영학회지, 제11권, 제4호, 2008, 151-170.
13 김용수, "개인화 서비스를 위한 추천 시스템의 연구 동향", IE매거진, 제19권, 제1호, 2012, 37-42.
14 김원경, 황성현, 곽승우, "사이버대학에서 교수자-학습자 간, 학습자-학습자 간 상호작용이 학업성취도에 미치는 영향", 교육정보미디어연구, 제12권, 제1호, 2006, 23-46.
15 김정현, "이르면 올해 서울 초.중.고에 민간 '인공지능 선생님' 도입 추진", 조선일보, 2021. 2. 9.
16 김동심, 김실희, "학업복귀 성인학습자의 자기조절학습 및 성취도 예측변인 검증", 평생학습사회, 제13권, 제4호, 2017, 129-150.
17 김연희, 임수진, "기계학습을 활용한 대학생 학습결과 예측 연구", 한국콘텐츠학회논문지, 제20권, 제6호, 2020, 695-704.   DOI
18 민연아, 임동균, "소규모학습그룹의 학습자 맞춤형 교육을 위한 비정형데이터분석 연구", 한국인터넷방송통신학회논문지, 제20권, 제5호, 2020, 89-95.   DOI
19 김호준, "AI.AI 또 AI...인공지능에 사활 건 교육업계", 이데일리, 2020. 5. 24.
20 노일경, 이성혜, "재직 학습자의 원격고등교육과정에서의 학습활동 특성 및 학업성취 영향 변인분석 : 학습분석을 적용하여", 평생학습사회, 제12권, 제4호, 2016, 53-78.
21 손지은, 김성범, 김현중, 조성준, "추천 시스템 기법연구동향 분석", 대한산업공학회지, 제41권, 제2호, 2015, 185-208.   DOI
22 양영욱, 유원희, 임희석, "실시간 학습자 프로파일링을 이용한 적응적 학습 시스템", 디지털융복합연구, 제12권, 제2호, 2014, 467-473.   DOI
23 이새벽, 지혜성, 유원희, 임희석, "실시간 학습평가 및 학습 액티비티 결과 수집을 이용한 학습자 프로파일링", 한국컴퓨터교육학회 학술발표대회논문집, 2013, 119-122.
24 정인성, 임철일, 최성희, 임정훈, "평생교육을 위한 웹 기반 학습에서 상호작용 유형에 따른 효과분석", 교육공학연구, 제16권, 제1호, 2000, 223-246.
25 서희전, 강명희, "온라인 학습공동체에서 학습자 특성, 학습자간 상호작용, 학습결과 간의 관계 분석", 교육공학연구, 제21권, 제2호, 2005, 1-28.
26 이종연, "웹 기반 교육에서 학습자의 자기주도성 및 사전지식과 전달전략이 학습만족도와 학업성취도에 미치는 영향", 교육공학연구, 제18권, 제3호, 2002, 3-25.
27 이현우, 이종문, 차윤미, "머신러닝 기반의 학업성취예측 모형 탐색", 교육방법연구, 제33권, 제1호, 2021, 29-46.
28 조용상, "학습 분석 기술 활용 가능성 및 전망 : 유즈케이스와 서비스 모델", 한국통신학회지(정보와통신), 제31권, 제12호, 2014, 73-80.
29 신종호, 최재원, 고욱, "대학교육에서 학습분석 적용에 관한 탐색적 연구 : 교수자의 관점을 중심으로", 교육공학연구, 제31권, 제2호, 2015, 223-252.
30 정화영, "문항난이도를 이용한 웹 서비스 기반의 적응적 이러닝 시스템", 한국인터넷정보학회, 제10권, 제3호, 2009, 151-157.
31 조헌국, "머신 러닝을 활용한 이러닝 학습 환경에서의 학습자 성취 예측 모형 탐색", 학습자중심교과교육연구, 제18권, 제21호, 2018, 553-572.
32 하승인, 유영범, 정예숙, "기계 학습에 기초한 추천시스템 알고리즘에 대한 연구", 한국서비스경영학회 학술대회, 2017, 185-195.
33 한경석, 노미현, "데이터마이닝 가상강의 효과와 만족도에 영향을 미치는 주요 요인 분석", Korea Business Review, 제7권, 제2호, 2004, 37-55.
34 홍원준, 임철일, 박태정, "동영상 강의 분할시간이 학습성과에 미치는 영향 : 스마트폰을 활용한 모바일 학습환경을 중심으로", 한국콘텐츠학회논문지, 제13권, 제12호, 2013, 1048-1057.   DOI
35 한지원, 임희석, "적응적 학습을 위한 협업 필터링 기반 추천시스템", 한국컴퓨터교육학회 학술발표대회논문집, 2015, 157-160.
36 Arnold, K.E. and M.D. Pistilli, "Course signals at Purdue : Using learning analytics to increase student success", Proceedings of the 2nd International Conference on Learning Analytics and Knowledge, 2012, 267-270.
37 Curran, P.J., S.G. West, and J.F. Finch, "The robustness of test statistics to nonnormality and specification error in confirmatory factor analysis", Psychological Methods, Vol. 1, No.1, 1996, 16-29.   DOI
38 정재삼, 임규연, "웹 기반 토론에서 학습자의 참여도, 성취도 및 만족도 관련 요인의 효과 분석", 교육공학연구, 제16권, 제2호, 2000, 107-135.
39 우종정, 김보나, 부기동, "학습참여활동이 학습효과에 미치는 영향력 검증에 대한 연구 : O 사이버대학 LMS 중심으로", 한국정보기술학회논문지, 제10권, 제4호, 2012, 97-103.