王岱君,刘清华,王 箐,李 林,田 华
(潍坊医学院基础医学院,山东 潍坊 261053)
考试是教育教学过程中的一个重要环节。科学的考试分析评价、高质量的题库建设管理、智能化的抽题组卷考试等每一环节对保证考试质量都至关重要。把考试各环节用现代化手段有机地联系在一起,构建科学的“考试分析—题库建设—智能组卷”一体化完整考试体系,无疑对新时代创新人才的培养具有重要意义。目前此方面的工作国内各学校做得不多,已成为教育教学中亟待解决的问题。鉴于此,我们运用现代化技术手段构建“考试分析—题库建设—智能组卷”一体化考试体系,真正实现教考分离、公平公正考试以及科学化的考试评价,对提高教育教学水平和人才培养质量具有重要的现实意义。
所谓“考试分析—题库建设—智能组卷”一体化考试体系是指运用教育测量的方法进行考试分析评价,依据分析评价的结果优选试题以建立题库,然后从题库中智能化抽题组卷考试,再度对考试进行分析评价、优选试题入库,如此循环,不断提高,不断完善,形成一整体化的考试体系。
该体系是以我们自主开发的《试卷分析系统》及《题库管理系统》为主要工具进行构建的。前期,我们开发了《试卷分析系统》及《题库管理系统》,并长期实践应用,取得了良好的效果,且获山东省省级教学成果三等奖及校教学成果一等奖,《试卷分析系统》在学校已应用17年,效果良好,同时也推广到全国10余所学校应用,其开发工具主要为C#、VB、Excel VBA等[1-3]。现在此基础上,对上述两系统进行更新升级,使之功能更加强大,以此为主要工具,构建集科学的考试评价、优质的试题库建设与管理、智能化的组卷考试于一体的考试评价及考试管理体系。
运用《试卷分析系统》对考试进行分析评价;依据《试卷分析系统》分析计算出的每道题的难度和区分度进行试题优选,将优选出的试题做好各种标识后,建立试题库;用《题库管理系统》对试题库进行管理及智能组题,按要求输出规范的试卷进行考试;再度用《试卷分析系统》对考试进行分析评价、进一步优选试题,如此循环,不断提高,形成优质高效的“考试分析—题库建设—智能组卷”一体化考试体系。
“考试分析—题库建设—智能组卷”一体化考试体系构建工作主要有如下内容:①对《试卷分析系统》和《题库管理系统》更新升级。②以《试卷分析系统》对课程考试进行分析评价。③以《试卷分析系统》计算分析各试题的难度和区分度,以遴选优质试题。④建立试题库。⑤试题库扩展。⑥以《试题库管理系统》对题库进行管理和智能化组卷考试。⑦试题库更新。⑧构建完成“考试分析—题库建设—智能组卷”一体化考试体系并持续提高。
2.3.1 前期准备
召集课程任教教师、全体参与人员及学生代表,对体系构建的重要意义统一认识,对所涉及的有关考试评价、试题命题、录入和生成试卷等各环节提出明确要求。
2.3.2 更新升级《试卷分析系统》和《题库管理系统》
进一步分析论证,对系统中各项指标及实现进行细致研究,对系统进一步改进完善,使其更适合各学科应用。对《试卷分析系统》和《题库管理系统》的功能作用、操作方法和流程进行说明和培训,使参与的每个成员能熟练掌握。
2.3.3 以《试卷分析系统》对课程考试进行分析评价
以试卷的“四度”(难度、区分度、信度、效度)[4]、成绩分布及各试题的两度(难度及区分度),结合学生及教师的情况,评价考试的试卷及试题、学生学习及教师的教学情况。
2.3.4 以《试卷分析系统》确定的各试题的难度和区分度遴选优质试题
(1)收集整理资料。收集整理课程考试材料。我们以解剖学课程为例收集整理2006年以来的《系统解剖学》《局部解剖学》《人体解剖学》及《口腔解剖学》等课程已进行过考试的全部资料。之所以选择2006年至今的资料,是因为自2006年以来,我们各课程的考试资料保存完整,皆有考试试题、参考答案、学生成绩、成绩分析等,且成绩分析资料全部由《试卷分析系统》所做出。
(2)筛选优质试题。将所有试题的考试成绩用《试卷分析系统》进行分析。依据《试卷分析系统》所分析出的各题的难度、区分度等进行试题筛选。对难度过低(P≥0.8)或过高(P<0.2)、区分度过低(D<0.2)的试题剔除,保留难度为0.8>P≥0.2及区分度D≥0.2的试题待纳试题库。
2.3.5 试题库建设
(1)分类标记:①将筛选出的试题依据难度划分为三个层次:难(0.3>P≥0.2)、中(0.5>P≥0.3)、易(0.8>P≥0.5),按照统一的规定要求,分别编号标记。②对筛选出的各题分别进行题型、章节等标识。
(2)入库。依据《题库管理系统》标准要求,将整理标识好的试题输入到系统中(或输入到系统产生的模板中,然后导入系统),进行试题库的建立。
2.3.6 试题库扩展
除对以往试题进行遴选入库外,课程教师日常教学中认为质量较好的题目也加入题库中。但因这部分题目还未进行过考试,未用《试卷分析系统》进行遴选,因而先对其做出未考试标记,暂纳入题库,经考试后进行成绩分析,按入选标准再筛选入库,作为正式题目。
2.3.7 以《试题库管理系统》对题库进行管理和智能化组卷考试
依照需要,对试题库进行各种管理如新建试题库、删除试题库、修改试题库各种属性(例如更改试题库名称,添加、删除题型等)、题目管理(题干、答案、备注、所属章节、所属试题库、各其他属性等)。
将纳入库内的试题应用于考试。按照要求的章节、难度、各部分题量、题型等全自动化完成抽题组卷。组成的试卷还可进行手工调整(如添加、删除试卷中的题目、修改试题的顺序等)。按要求输出规范的考试试卷,输出的试卷为word格式,可直接用于考试。
2.3.8 题库更新
考试完成后再利用《试卷分析系统》进行考试分析,对整个试卷的难度、区分度、信度、效度、成绩分布等进行综合分析,再依据各试题的难度和区分度对不合格试题再进行剔除,使试题库不断更新完善。
试题库建设是一个长期的工程,随着教育教学改革及人才培养目标的不断完善,先前的试题也随之不能适应教学考核的要求。因建立的试题库是一个开放的系统,之后可随时加入、剔除、替换更新,以适应人才培养的要求。总之,建立的试题库能做到选题科学化、题库规范化、组卷自动化。避免了以往试题库建设中选题主观、试题不规范、组卷随意的弊端,使考试更客观、更全面、更合理、更公平、更科学、更有效。
此体系有以下三个显著特点:(1)集科学考试分析评价、规范优质题库建设及智能组卷考试整个流程于一体;(2)用各学校各学科自己经过试卷分析验证优选的题目进行题库建设而后进行智能化组卷考试,非常适合针对各自的学生考试,这显著优于商业化的题库或未经科学筛选自行建立的题库;(3)《试卷分析系统》及《题库管理系统》为我们针对各学科课程所开发,经长期实践应用效果良好。
《试卷分析系统》能够高度自动化完成考试评价,评价指标全面,能够科学评价试题的质量、学生的学习以及教师的教学。由于该系统对试卷中每一试题都做了难度和区分度的计算分析,因而能够依据试题的难度、区分度等进行科学的遴选试题,在此基础上建设高质量的试题库。《题库管理系统》能够按考试所要求的试题难度、章节、题型等自动抽题组卷,按要求输出规范的word格式试卷。这样,使考试分析评价、优质题库建设及管理、自动化组卷考试有机结合,融为一体,完美实现“考试分析-题库建设-智能组卷”一体化考试体系的构建。
试题库建设是课程建设的一个重要组成部分,也是创新人才培养所要求的。试题库建设是一项长期的、复杂的系统性工程,需要各学科课程共同努力来完成。目前,试题库建设中大多没有科学的指标作为依据并进行科学的指标检验,多为主观的判断,这就存在着诸多的弊端。外购的试题库经实践证明并不适合自己的课程考试。因此,自己学科课程的授课教师依据科学的指标标准进行试题库建设无疑是最好的、最合适的。
迄今,集考试评价、题库建设、智能组卷于一体的考试体系构建,在国内开展研究的尚少。该体系为一个循进提升、不断完善的完整的开放的体系,可使考试分析、优质试题库建设及管理、自动化组卷考试有机结合,融为一体。我们近两年的初步应用收到了良好的效果。该体系的应用,能够真正实现教考分离、公平考试、科学评价、以考促学,必将为教育教学改革、持续提高教育教学水平和人才培养质量起到明显的推动作用。