Good assessment is crucial for feedback on curriculum and to motivate students to learn. This study was conducted to perform item analysis on the Medical Education Assessment Consortium clinical knowledge mock examination (MEAC CKME) (2011-2016) and to evaluate several effects to improve item quality using both classical test theory and item response theory. The estimated difficulty index (P) and discrimination index (D) were calculated according to each course, item type, A (single best answer)/R (extended matching) type, and grading of item quality. The cut-off values used to evaluate P were: >0.8 (easy); 0.6-0.8 (moderate); and <0.6 (difficult). The cut-off value for D was 0.3. The proportion of appropriate items was defined as those with P between 0.25-0.75 and D ${\geq}0.25$. Cronbach ${\alpha}$ was used to assess the reliability and was compared with those of the Korean Medical Licensing Examination (KMLE). The results showed the recent mean difficulty and decimation index was 0.62 and 0.20 for the first MEAC CKME and 0.71 and 0.19 for the second MEAC CKME, respectively. Higher grade items evaluated by a self-checklist system had better D values than lower grade items and higher grade items gradually increased. The preview and editing process by experts revealed maintained P, decreased recall items, increased appropriate items with better D values, and higher reliability. In conclusion, the MEAC CKME (2011-2016) is deemed appropriate as an assessment to evaluate students' competence and prepare year four medical students for the KMLE. In addition, the self-checklist system for writing good items was useful in improving item quality.
이 글은 사진실 선생의 학문 세계에 대해 살핀 것이다. 사진실 선생의 연구 성과에 대한 섬세하고 엄밀한 평가라기보다는, 그와의 직 간접적인 만남 속에서 필자가 생각했던 것들을 정리했다. '참여 관찰기'라는 논제가 붙은 연유가 여기에 있다. 필자는 이 글이 관례적이고 형식적인 추도사가 되는 것을 경계했다. 사 선생 역시 형식이고 관례적인 글을 원하지는 않을 것이라 생각했기 때문이다. 필자의 참여 관찰기는 사 선생의 문헌 중심 연구에 대한 생각을 정리하는 것으로 시작했다. '알려진 성과와 재평가될 것들'이라는 목차 제목이 필자가 말하려는 것을 함축하고 있다. 전통연행 관련 문헌 연구에서 사 선생이 기여한 바와 기존 평가의 타당성에 대한 필자의 생각이 여기서 정리되었다. 이미 널리 알려진 기여나 성과에 대해서는 새삼스럽게 재론하지 않았다. 여기서 필자가 특별하게 살핀 것은 '재평가될 것들'이었다. 그 중요성과 의의에도 불구하고 제대로 평가받지 못한 것, 어쩌면 이제는 당연한 것으로 인식되어 쉽게 지나쳐 버리는 성취를 새삼 강조했다. 이어지는 논의에서는 사 선생의 전혀 다른 학문적 면모를 살폈다. 필자는 이 대목의 제목을 '편견에 맞선 의외의 성과'라 붙였다. 여기서 다루어진 대상은 사 선생의 현장 중심적 연구들이었다. 흔히 사진실 선생을 문헌을 중심으로 연구하는 연극사학자 혹은 전통공연예술학자라 평가한다. 필자는 이것이 편견이라 생각한다. 워낙 그러한 생각이 일반적이어서, 문헌이 아닌 현장을 바탕으로 한 연구 성과를 간과하기가 쉽다. 목차 제목에 '편견'과 '의외'라는 표현을 한 이유이다. 여기서 필자는 사 선생이 현장 중심의 연구도 했다는 식의 논의에 그치지 않았다. 현장 연구에서 그가 이루어낸 성취를 적극적으로 강조하고 평가했다.
본 연구는 수학적 추론, 문제해결, 의사소통과 관련된 평가 문항을 소개하고, 평가 문항에 대한 5 학년 학생들의 반응을 보다 심층적으로 분석한 연구이다. 수학적 추론은 연역 추론, 귀납 추론, 유비 추론으로, 문제해결은 외적 문제해결과 내적 문제해결로, 의사소통은 말하기, 읽기, 쓰기, 듣기로 나누어 각각의 예시 문항과 학생들의 반응을 소개하였다. 수학적 추론 문항은 각각의 추론 능력을 발휘할 수 있는 문항의 개발이 중요하며, 5학년 학생들 중 일부는 이러한 능력을 보여주었다. 의사소통의 각각의 형식보다는 문항에 내재된 수학적 상황이 학생들의 반응에 더 많은 영향을 미치는 것으로 나타났다. 본 연구로부터 수학 평가 문항에 대한 지속적인 연구가 필요하고, 수학 평가에서 인지적 영역의 설정과 활용 방안에 대한 연구가 필요하며, 수학 평가 문항 개발과 관련된 교사 연수의 필요성을 제안하였다.
The Ministry of Education have had us practice the performance test as a substitute proposal, however, all the more for the idealistic purport, our education front does not have such a sufficient condition as to practice the performance test for many classes and miscellaneous duties and over-populated class, and that practice has been enforced so abruptly without any drastic preparation and has caused much confusion from the beginning of that enforcement. Thus, these problematic concerns are remained as the tasks of the teachers to be solved by themselves in the front of education, and herein I came to do this research. The followings are the conclusions that I got as the results of the research (1) Performance test style should be applied in consideration of the students' achievement level and the gap of the teachers' recognition; descriptive test, portfolio assignment and formative test styles were proper for the students lacking basic study ability. (2) Descriptive test should have its beginning with the question items to which students can write the problem solving procedure logically rather than those to evaluate the creation ability and thinking ability: and putting down specifically the assessment standard could prevent students' confusion and scheme the impartiality of the assessment. (3) Portfolio assignment evaluation should be given with as interesting and suitable amounts as possible so that the students can do by themselves. (4) Utilizing the performance test table enabled easy management of documentary evidence. And it is needless to say that the success of the performance test should have preceding conditions like the teachers' understanding and their positive participation. Therefore, I'd like to give suggestions herein like the followings; (1) The performance test should not always be made into grades, and there is a need to develop the test gradually in the condition that the education surroundings permit by checking time, frequency, ratio and contents of the test while practicing the multiple choice writing test. (2) As long as the performance test has the aims of improving the studying and learning activities, any performance test only for the sake of making numerals with the thought that assessment is the disposal of the grades should be avoided, and the change of the lecturing styles and development of various assessing types and studying materials should be endeavored to confirm with the aims.
강의평가는 정확하게 학생들의 수준을 평가하고 대학교육의 교육방법 개선을 위한 중요한 요소이다. 그러므로 본 논문은 보다 객관적이고 공정한 강의평가가 이루어질 수 있도록 강의평가 서비스에 대한 연구를 하였다. 연구 방법은 K 대학에서 시행된 강의평가를 기반으로 각 교과목별로 분석하였다. 분석 결과는 다음과 같은 결론을 도출하였다. 첫째, 수업에 4주 이상 장기결석한 학생은 강의평가에 참여할 수 없도록 한다. 둘째, 공정한 강의평가를 위하여 평가 시점을 다음 학기 수강신청이 이루어지는 시기로 한다. 셋째, 수강 신청한 학생 수와 강의평가와의 연계성을 고려한다. 넷째, 다양한 강의평가 도구유형을 적용하고, 강의평가 기술방법도 객관식과 주관식 등 다양한 평가방법을 적용한다. 마지막으로 강의평가 결과는 반드시 다음 강의에 반영될 수 있도록 한다.
본 연구 목적은 코로나 19 펜데믹 상황에서 이루어진 온라인 건강사정실습 교과목에서 능동학습 적용이 간호대학생의 비판적사고성향, 문제해결능력 및 셀프리더십에 미치는 효과를 확인하고자 수행하였다. 자료수집은 21년 9월 1일부터 12월 17일까지 D대학교 간호학과 2학년 78명을 대상으로 이루어졌으며 수집된 자료는 SPSS/WIN 20 프로그램을 이용하여 분석하였다. 본 연구결과 온라인 건강사정실습 수업에서 능동학습 적용 후 비판적사고성향(t=-2.11 p=.038), 셀프리더십(t=-2.07 p=.042)은 통계적으로 유의하게 증가되었다. 능동학습으로 적용된 SOAP, 임상추론학습지(Outcome-Present-Test) 및 임상추론 웹 작성(Clinical reasoning web), 마인드맵 작성은 간호대학생들의 비판적사고성향과 셀프리더십을 향상시키는 것으로 확인되어 대면수업에서의 효과를 확인하는 연구가 이루어져야 할 것이다.
In addition to technical skills and competencies, communication competence has been identified to be important to engineering students who will be drivers of innovation in a rapidly changing society. Drawing on the previous studies, this research examines the results of an empirical exploration of engineering students' perception of speaking ability and their communicative competence. To date, there has been most of the research conducted on 'writing' (e.g., its educational process, class designs, ability, etc.) for engineering students. However, relatively little attention has been paid to engineering students' speaking ability perception and their competence diagnosis. This study relies on quantitative data obtained from one survey questionnaire and one test conducted respectively. The sample consists of 386 engineering students as well as 481 non-engineering students for the 1st survey. And to measure communicative competence, 150 engineering students as well as 136 non-engineering students participated in the test. Our findings show that firstly, there were significant differences in perception of speaking ability by majors and gender. Whereas there was no difference in the same survey by grade. Secondly, there was a close and significant relationship between sub-factors of speaking ability. Thirdly, there were significant differences in communicative competence by majors. Whereas there was no difference by gender and grade. Fourthly, there was a close and significant relationship between sub-factors of communicative competence. These findings are expected to provide an explanation for the improvement on engineering students' speaking ability and to encourage the participation in extra-curricular activities and programs in engineering school.
This study was conducted in order to investigate the effect of students' attitudes to internet media language and orthographic knowledge on their use of internet media language. The participants were 989 students in the 4th to 11th grades in Kyunggi-do. It was found that the participants used more internet media language in internet literacy than for general writing. Elementary students exhibited significantly less orthographic knowledge and used more internet media language to write on the internet than older students. Students' attitudes to internet media language went a long way to explaining their self-assessment on the frequency of using internet media language and their genuine use of internet media language on the internet. Their orthographic knowledge, however, was not a significant predictor for their use of internet media language.
In accordance with U.S. Nuclear Regulatory Commission regulatory guide(NRC RG) 1.20(Rev.3), we are writing a comprehensive vibration assessment program(CVAP) design control document(DCD) and a technical report for U.S. NRC design certification(DC) of an Advanced Power Reactor 1400(APR1400) nuclear power plant(NPP). CVAP of an APR1400 NPP for U.S. NRC DC is classified as a non-prototype category 1 type. Therefore, CVAP DCD of reactor vessel internals(RVI) and steam generator internals(SGI) consist of analysis and full inspection program. However, piping system of primary and secondary system will be described as measurement program.
For the first time, the spot the differences (STD) game was employed in the teaching of basic organic chemistry course. Three sets of paired pictures associated with selected topics in organic chemistry were presented to the students and they were required to spot the differences between the two pictures. Based on the students' pre and post self-assessment, the STD game resulted in several positive learning outcomes as indicated in the students' reflective writing, including knowledge recall, deeper understanding of a subject, enhanced analytical skill, motivation and fun-filled learning, learning from peers and self-empowerment in learning. The STD game is a desirable teaching and learning tool, as learning in an entertaining and interactive way is highly sought after in today's classroom, especially to novice students. In the future, the STD game can be modified and implemented to cater the needs of different courses and topics.
본 웹사이트에 게시된 이메일 주소가 전자우편 수집 프로그램이나
그 밖의 기술적 장치를 이용하여 무단으로 수집되는 것을 거부하며,
이를 위반시 정보통신망법에 의해 형사 처벌됨을 유념하시기 바랍니다.
[게시일 2004년 10월 1일]
이용약관
제 1 장 총칙
제 1 조 (목적)
이 이용약관은 KoreaScience 홈페이지(이하 “당 사이트”)에서 제공하는 인터넷 서비스(이하 '서비스')의 가입조건 및 이용에 관한 제반 사항과 기타 필요한 사항을 구체적으로 규정함을 목적으로 합니다.
제 2 조 (용어의 정의)
① "이용자"라 함은 당 사이트에 접속하여 이 약관에 따라 당 사이트가 제공하는 서비스를 받는 회원 및 비회원을
말합니다.
② "회원"이라 함은 서비스를 이용하기 위하여 당 사이트에 개인정보를 제공하여 아이디(ID)와 비밀번호를 부여
받은 자를 말합니다.
③ "회원 아이디(ID)"라 함은 회원의 식별 및 서비스 이용을 위하여 자신이 선정한 문자 및 숫자의 조합을
말합니다.
④ "비밀번호(패스워드)"라 함은 회원이 자신의 비밀보호를 위하여 선정한 문자 및 숫자의 조합을 말합니다.
제 3 조 (이용약관의 효력 및 변경)
① 이 약관은 당 사이트에 게시하거나 기타의 방법으로 회원에게 공지함으로써 효력이 발생합니다.
② 당 사이트는 이 약관을 개정할 경우에 적용일자 및 개정사유를 명시하여 현행 약관과 함께 당 사이트의
초기화면에 그 적용일자 7일 이전부터 적용일자 전일까지 공지합니다. 다만, 회원에게 불리하게 약관내용을
변경하는 경우에는 최소한 30일 이상의 사전 유예기간을 두고 공지합니다. 이 경우 당 사이트는 개정 전
내용과 개정 후 내용을 명확하게 비교하여 이용자가 알기 쉽도록 표시합니다.
제 4 조(약관 외 준칙)
① 이 약관은 당 사이트가 제공하는 서비스에 관한 이용안내와 함께 적용됩니다.
② 이 약관에 명시되지 아니한 사항은 관계법령의 규정이 적용됩니다.
제 2 장 이용계약의 체결
제 5 조 (이용계약의 성립 등)
① 이용계약은 이용고객이 당 사이트가 정한 약관에 「동의합니다」를 선택하고, 당 사이트가 정한
온라인신청양식을 작성하여 서비스 이용을 신청한 후, 당 사이트가 이를 승낙함으로써 성립합니다.
② 제1항의 승낙은 당 사이트가 제공하는 과학기술정보검색, 맞춤정보, 서지정보 등 다른 서비스의 이용승낙을
포함합니다.
제 6 조 (회원가입)
서비스를 이용하고자 하는 고객은 당 사이트에서 정한 회원가입양식에 개인정보를 기재하여 가입을 하여야 합니다.
제 7 조 (개인정보의 보호 및 사용)
당 사이트는 관계법령이 정하는 바에 따라 회원 등록정보를 포함한 회원의 개인정보를 보호하기 위해 노력합니다. 회원 개인정보의 보호 및 사용에 대해서는 관련법령 및 당 사이트의 개인정보 보호정책이 적용됩니다.
제 8 조 (이용 신청의 승낙과 제한)
① 당 사이트는 제6조의 규정에 의한 이용신청고객에 대하여 서비스 이용을 승낙합니다.
② 당 사이트는 아래사항에 해당하는 경우에 대해서 승낙하지 아니 합니다.
- 이용계약 신청서의 내용을 허위로 기재한 경우
- 기타 규정한 제반사항을 위반하며 신청하는 경우
제 9 조 (회원 ID 부여 및 변경 등)
① 당 사이트는 이용고객에 대하여 약관에 정하는 바에 따라 자신이 선정한 회원 ID를 부여합니다.
② 회원 ID는 원칙적으로 변경이 불가하며 부득이한 사유로 인하여 변경 하고자 하는 경우에는 해당 ID를
해지하고 재가입해야 합니다.
③ 기타 회원 개인정보 관리 및 변경 등에 관한 사항은 서비스별 안내에 정하는 바에 의합니다.
제 3 장 계약 당사자의 의무
제 10 조 (KISTI의 의무)
① 당 사이트는 이용고객이 희망한 서비스 제공 개시일에 특별한 사정이 없는 한 서비스를 이용할 수 있도록
하여야 합니다.
② 당 사이트는 개인정보 보호를 위해 보안시스템을 구축하며 개인정보 보호정책을 공시하고 준수합니다.
③ 당 사이트는 회원으로부터 제기되는 의견이나 불만이 정당하다고 객관적으로 인정될 경우에는 적절한 절차를
거쳐 즉시 처리하여야 합니다. 다만, 즉시 처리가 곤란한 경우는 회원에게 그 사유와 처리일정을 통보하여야
합니다.
제 11 조 (회원의 의무)
① 이용자는 회원가입 신청 또는 회원정보 변경 시 실명으로 모든 사항을 사실에 근거하여 작성하여야 하며,
허위 또는 타인의 정보를 등록할 경우 일체의 권리를 주장할 수 없습니다.
② 당 사이트가 관계법령 및 개인정보 보호정책에 의거하여 그 책임을 지는 경우를 제외하고 회원에게 부여된
ID의 비밀번호 관리소홀, 부정사용에 의하여 발생하는 모든 결과에 대한 책임은 회원에게 있습니다.
③ 회원은 당 사이트 및 제 3자의 지적 재산권을 침해해서는 안 됩니다.
제 4 장 서비스의 이용
제 12 조 (서비스 이용 시간)
① 서비스 이용은 당 사이트의 업무상 또는 기술상 특별한 지장이 없는 한 연중무휴, 1일 24시간 운영을
원칙으로 합니다. 단, 당 사이트는 시스템 정기점검, 증설 및 교체를 위해 당 사이트가 정한 날이나 시간에
서비스를 일시 중단할 수 있으며, 예정되어 있는 작업으로 인한 서비스 일시중단은 당 사이트 홈페이지를
통해 사전에 공지합니다.
② 당 사이트는 서비스를 특정범위로 분할하여 각 범위별로 이용가능시간을 별도로 지정할 수 있습니다. 다만
이 경우 그 내용을 공지합니다.
제 13 조 (홈페이지 저작권)
① NDSL에서 제공하는 모든 저작물의 저작권은 원저작자에게 있으며, KISTI는 복제/배포/전송권을 확보하고
있습니다.
② NDSL에서 제공하는 콘텐츠를 상업적 및 기타 영리목적으로 복제/배포/전송할 경우 사전에 KISTI의 허락을
받아야 합니다.
③ NDSL에서 제공하는 콘텐츠를 보도, 비평, 교육, 연구 등을 위하여 정당한 범위 안에서 공정한 관행에
합치되게 인용할 수 있습니다.
④ NDSL에서 제공하는 콘텐츠를 무단 복제, 전송, 배포 기타 저작권법에 위반되는 방법으로 이용할 경우
저작권법 제136조에 따라 5년 이하의 징역 또는 5천만 원 이하의 벌금에 처해질 수 있습니다.
제 14 조 (유료서비스)
① 당 사이트 및 협력기관이 정한 유료서비스(원문복사 등)는 별도로 정해진 바에 따르며, 변경사항은 시행 전에
당 사이트 홈페이지를 통하여 회원에게 공지합니다.
② 유료서비스를 이용하려는 회원은 정해진 요금체계에 따라 요금을 납부해야 합니다.
제 5 장 계약 해지 및 이용 제한
제 15 조 (계약 해지)
회원이 이용계약을 해지하고자 하는 때에는 [가입해지] 메뉴를 이용해 직접 해지해야 합니다.
제 16 조 (서비스 이용제한)
① 당 사이트는 회원이 서비스 이용내용에 있어서 본 약관 제 11조 내용을 위반하거나, 다음 각 호에 해당하는
경우 서비스 이용을 제한할 수 있습니다.
- 2년 이상 서비스를 이용한 적이 없는 경우
- 기타 정상적인 서비스 운영에 방해가 될 경우
② 상기 이용제한 규정에 따라 서비스를 이용하는 회원에게 서비스 이용에 대하여 별도 공지 없이 서비스 이용의
일시정지, 이용계약 해지 할 수 있습니다.
제 17 조 (전자우편주소 수집 금지)
회원은 전자우편주소 추출기 등을 이용하여 전자우편주소를 수집 또는 제3자에게 제공할 수 없습니다.
제 6 장 손해배상 및 기타사항
제 18 조 (손해배상)
당 사이트는 무료로 제공되는 서비스와 관련하여 회원에게 어떠한 손해가 발생하더라도 당 사이트가 고의 또는 과실로 인한 손해발생을 제외하고는 이에 대하여 책임을 부담하지 아니합니다.
제 19 조 (관할 법원)
서비스 이용으로 발생한 분쟁에 대해 소송이 제기되는 경우 민사 소송법상의 관할 법원에 제기합니다.
[부 칙]
1. (시행일) 이 약관은 2016년 9월 5일부터 적용되며, 종전 약관은 본 약관으로 대체되며, 개정된 약관의 적용일 이전 가입자도 개정된 약관의 적용을 받습니다.