The Journal of Korean Association of Computer Education (컴퓨터교육학회논문지)

The Korean Association of Computer Education (한국컴퓨터교육학회)
권호 표지

Development of a scoring rubric based on Computational Thinking for evaluating students' computational artifacts in programming course

비전공자 프로그래밍 수업 창의적 산출물의 컴퓨팅 사고력 기반 평가 루브릭 개발

  • 김민자 (고려대학교 컴퓨터 교육학과) ;
  • 유길상 (고려대학교 정보대학 컴퓨터학과) ;
  • 김현철 (고려대학교 정보대학 컴퓨터학과)
  • Received : 2016.11.28
  • Accepted : 2017.01.31
  • Published : 2017.03.31
Download PDF
⟨ Previous Next ⟩

Abstract

The demands of computer science education for non-majors in higher education is increasing but relevant evaluation tools for the students' computational artifacts are lack. This research aims to develop a scoring rubric to assess student's computational artifacts in non-major programming course at Computational Thinking point of view. The rubric was developed based on 'CT Practice Design Pattern' as a framework. The rubric consists of 'domain, skills, evaluation, evaluating resources, and scales'. Domains are 'Design of abstract model', 'Design and application of creative artifacts', and 'Analysis of the artifacts'. Experts reviewed the rubric to ensure contents validity. The rubric is resulted in reliable for consistency. This rubric can be revised and applied to application environment accordingly.

고등교육의 비전공자 대상 정보과학 교육의 수요가 늘고 있지만, 컴퓨팅 사고력 관점에서 적절하게 학생들의 창의적 산출물을 평가하는 도구는 부족하다. 이에 본 연구는 고등교육의 비전공자를 위한 정보 과학 수업에서 학생들이 개발한 창의적 산출물을 컴퓨팅 사고력 관점에서 평가하는 루브릭을 개발하기 위한 목적으로 진행되었다. 루브릭 초안의 준거틀(framework)은 CT Practices Design Pattern이며, 개발된 루브릭의 구성 요소는 영역, 역량요소, 평가요소, 평가자료, 평가단계의 다섯 가지이다. 루브릭은 '추상화 모델의 설계', '창의적 산출물의 설계 및 적용', 그리고 '산출물의 자가 평가'의 세 영역으로 구분하여 개발되었다. 전문가 검토를 통해 내용 타당성을 확보하였으며, 신뢰도 측면의 일관성이 검증되었다. 본 연구에서 개발된 루브릭은 해당 목적에 맞게 수정하여 사용할 수 있다.

Keywords

References

  1. 우호성, 김자미, 이원규 (2017). 해외 고등정보 표준교육과정 기반의 국내 대학 교육과정 비교 분석, 한국컴퓨터교육학회 논문지, 20(1), 27-38.
  2. 김민자, 김현철 (2016). 정보 교과 경험 차이에 따른 대학 전공 선택 및 SW수업 학업성취 분석, 한국컴퓨터교육학회 논문지, 19(3), 1-9.
  3. 김자미, 이원규 (2014). 영국의 교육과정 개정으로 본 정보교과의 지식과 문제해결력에 대한 쟁점, 한국컴퓨터교육학회 논문지, 17(3), 53-62.
  4. Department for Education (2014). The national curriculum in England: Framework document, Department for Education.
  5. 김한성, 정혜진, 이원규 (2010). 한국과 일본의 고등학교 정보교과 교육과정 비교 연구, 비교교육연구, 20(4), 129-151.
  6. 김자미, 이원규 (2014). 브루너 이론에 근거한 인도의 정보교육과정 고찰, 한국컴퓨터교육학회, 17(6), 59-69.
  7. 김경훈, 이은경, 김영애, 양재명, 이영준, 김현철, 김재현, 배정이, 한건우, 박소영, 박종훈 (2015). 정보과 교육과정 시안 개발 연구 (연구보고 CRC 2015-17). 서울: 한국교육과정평가원.
  8. Malan, D. (2017년 1월 5일). CS50. Retrieved from http://cs50.harvard.edu
  9. 임현석 (2014년 12월 12일). [세종대학교] 인문-과학 통섭교양과목.토론식 수업으로 창의인재 육성, 동아일보, 출처: http://news.donga.com
  10. National Science Foundation (2017, January 5). Transforming Undergraduate Education in Science, Technology, Engineering and Mathematics. Retrieved from http://nsf.gov
  11. 미래창조과학부, 정보통신산업진흥원 (2016년 11월 17일). 소프트웨어 중심대학. 소프트웨어 중심사회. 출처: https://software.kr
  12. Qualls, J. & Sherrell, L. (2010). Why Computational Thinking should be integrated into the curriculum, Journal of Computing Sciences in Colleges, 25(5), 66-71.
  13. Committee for the Workshops on Computational Thinking; National Research Council (2011). Report of a workshop of pedagogical aspects of Computational Thinking, Washington, D.C.: The National Academies Press.
  14. Committee for the Workshops on Computational Thinking; National Research Council (2010). Report of a workshop on the scope and nature of Computational Thinking. Washington, D.C.: The National Academies Press.
  15. Wing, J. (2006). Computational Thinking, Communications of the ACM, Viewpoint, 49(3), 33-35.
  16. Wing, J. (2008). Computational Thinking and thinking about computing, Philosophical transactions of the Royal Society A, 366, 3717-3725. https://doi.org/10.1098/rsta.2008.0118
  17. Lee, I., Martin, F., Denner, J., Coulter, B., Allan, W., Erickson, J., Malyn-Smith, J., & Werner., L. (2010). Computational thinking for youth in practice, ACM Inroads, 2(1), 33-37.
  18. Barr, V., & Stephenson, C. (2011). Bringing computational thinking to K-12: What is involved and what is the role of the computer science education community?, ACM Inroads, 2(1), 48-54. https://doi.org/10.1145/1929887.1929905
  19. CSTA & ISTE (2011). Computational Thinking in K-12 education - teacher resources, 2nd edition, CSTA & ISTE.
  20. Computing at School Working Group (2012). Computer Science: A curriculum for schools, Computing at School.
  21. 이영준, 백성혜, 신재홍, 유헌창, 정인기, 안상진, 최정원, 전성균 (2014). 초중등 단계 Computational Thinking 도입을 위한 기초 연구, 한국과학창의재단.
  22. Denning, P. & Martell, C. (2015). Great principles of computing, The MIT Press.
  23. 성태제 (2014). 문항제작 및 분석의 이론과 실제 (개정판). 서울: 학지사.
  24. Josson, A. & Svingby, G. (2007). The use of scoring rubrics: Reliability, validity and educational consequences, Educational Research Review, 2(2007), 130-144. https://doi.org/10.1016/j.edurev.2007.05.002
  25. Reddy, Y. & Andrade, H. (2010). A review of rubric use in higher education, Assessment & Evaluation in Higher Education, 35(4), 435-448. https://doi.org/10.1080/02602930902862859
  26. Bienkowski, M., Snow, E., Rutstein, D., & Grover, S. (2015). Assessment design patterns for computational thinking practices in secondary computer science: A first look (SRI technical report). Menlo Park, CA: SRI International.
  27. 최형신 (2014). 로봇활용교육의 효과성 검증을 위한 평가도구 개발: 사회.문화적 맥락 및 컴퓨팅 사고 연계, 한국정보교육학회 논문지, 18(4), 541-548.
  28. Brennan, K. & Resnick, M. (2012). New frameworks for studying and assessing the development of computational thinking, Paper presented at annual American Educational Research Association meeting, Vancouver, BC, Canada.
  29. 최형신 (2014). Computational Thinking 역량 개발을 위한 수업 설계 및 평가 루브릭 개발, 한국정보교육학회 논문지, 18(1), 57-64.
  30. Bort, H. & Brylow, D. (2013). CS4Impact: Measuring Computationl Thinking concepts present in CS4HS participants lesson plans, Proceedings in SIGCSE 2013, March 6-9, Denver, Colorado, USA.
  31. Sherman, M. & Martin, F. (2015). The assessment of mobile computational thinking, Journal of Computing Sciences in Colleges, 30(6), 53-59.
  32. Josson, A. & Svingby, G. (2007). The use of scoring rubrics: Reliability, validity and educational consequences, Educational Research Review, 2(2007), 130-144. https://doi.org/10.1016/j.edurev.2007.05.002
  33. Moskal, B. & Leydens, K. (2000). Scoring rubric development: Validity and reliability, Practical Assessment, Research & Education, 7(10), Retrieved September 19, 2016 from http://PAREonline.net/getvn.asp?v=7&n=10.
  34. Reddy, Y. & Andrade, H. (2010). A review of rubric use in higher education, Assessment & Evaluation in Higher Education, 35(4), 435-448. https://doi.org/10.1080/02602930902862859
  35. 한건우, 이은경, 이재희, 이영준 (2006). 학습자 중심 루브릭을 적용한 수행평가가 학습동기와 학업성취도에 미치는 영향, 한국컴퓨터교육학회 논문지, 9(4), 1-8.