构建研究生招生考试自命题质量保障体系的必要性分析*

2023-01-25 03:14
新教育时代电子杂志(教师版) 2022年31期
关键词:区分度科目试卷

魏 权

(烟台大学 山东烟台 264010)

近年来,全国硕士研究生报考人数剧增,2022年达到457万人,较2021年增加80万,增幅约21%;较2017年增加256万人,增长1.27倍[1]。我国硕士研究生招生采用初试加复试的“两段制”模式,初试考试科目为思想政治理论、外国语、业务科一、业务科二。其中全国统一命题科目主要集中在思想政治理论、外国语,业务科除部分统考科目外,根据学科专业设置不同的自命题考试科目,目前全国统一命题科目约23种,招生单位自命题科目超2万种[2]。自命题科目命题因未设置统一的考纲和标准,不同高校自主命题,必然导致命题标准不统一、命题质量参差不齐,虽突出了招生单位招生自主权和专业培养特色,但对于招生的公平和质量埋下不小隐患。近年来,自命题集中出现了试题命题雷同、试题命题偏差、试卷封装错误或是试题泄露等严重问题,给研究生教育招生考试的权威性和公信力带来了极大的影响,也对当前各招生单位组织考试的质量和专业性提出了质疑[3]。

自身专业的需求和特点是自命题质量限定的根源,通过自命题全面、综合、公平地考核和筛选,择优选拔基础知识扎实、科研素养较高的科研型人才,从而保障研究生招生考试自命题质量,提升研究生招生考试的权威性和公信力。

一、研究生招生考试自命题现存主要问题

1.命题局限性与主观性问题

高校的学科建设虽然有自己的发展特色和定位,但从科学研究和社会需求两个维度衡量,相同的学科有一定的统一性和共性要求,对学生的培养要求也是能够彼此贯通的。紧紧围绕本校本科教学内容重点命题,明显影响命题覆盖面和侧重点。本文选取4所不同层次高校(A为985高校,B为双一流高校,C、D为省属高校)342农业知识综合四自命题科目不同来源考生及格率进行了统计分析,图1结果表明,同一自命题科目本校毕业生的及格率(成绩≥90)显著(p>0.05)高于外校考生及格率,自命题试卷无法准确地筛选其他外校考生掌握和运用本学科所学知识的真实度,降低了本门考试的有效性,不利于不同来源考生报考,容易产生差异考生群体的不公平竞争。

图1 4所代表高校342农业知识综合四自命题

2.自命题成绩分布不合理,自命题信度、效度和区分度较低

虽近年来招生规模日益增长,但优质生源流向稳定,多数普通高校招生工作受制于区域、美誉、专业特色等因素,一志愿生源数量、质量仍面临严峻考验。自命题工作思路和质量保障良莠不齐。图2选取同一所省属综合性大学较热门专业(报录比>1.5)不同自命题科目进行了近5年考生成绩情况统计分析。结果表明,A专业考生成绩120分以上常年居于80%以上,而B专业历年均不足5%,不同自命题科目在考生群体中反映出难易程度明显差异化,较低信度、效度、区分度,难以取得择优筛选过程和调整自命题命题思路的参考依据。

图2 近5年同一高校2个自命题成绩分布差异

3.自命题保障机制不健全,缺少自命题评估反馈过程,尚未形成自命题工作闭环循环管理

自2019年教育部办公厅关于印发《全国硕士研究生招生考试自命题工作指导规范》的通知(教学厅〔2019〕12号),各招生单位针对自命题各环节开展不同程度的自查和运行体制机制建设,但大多集中在试题命制、制卷、分装、评卷环节,而针对试题质量、成绩分布、反馈评价等保障环节往往被忽视。本文对20所不同层次高校开展了调查问卷统计,针对自命题保障体系建设情况进行了梳理总结,结果如表1所示,关于命题工作的运行机制和管理规定都已健全,但因此项工作的特殊性和保密性,很多环节还未充实和完善,命题结束了、考试结束了,此项工作也就结束了,而用以有效考核这些管理规定和规章制度落实情况的方法、制度及措施等却很少,或者完全没有,这使命题管理工作显得有始无终(如表1所列)。

表1 不同高校自命题保障体系构建情况调研

二、自命题质量保障体系工作原则

研究生招生考试是一种具有选拔功能的升学考试,自命题环节应比较客观、科学、公正、规范地对考生相关专业知识的掌握程度和应用相关知识解决实际问题的能力进行合理筛选,并能科学评价考生将来是否有潜力、有资质去从事本专业深层次和前沿性的研究,从大量的考生中把理论功底扎实、创新研究能力强的优秀考生筛选出来。据此,自命题成为具体体现考试控制模式的关键。为了实现淘汰的控制模式,有效地选拔优秀考生,命题应当遵守一些必要的原则。

1.科学性原则

命题的科学性包含试题呈现、组题思路、命题思想三个层面。试题呈现主要体现于试题题干、试题设问和试题答案设计的科学性;组题思路主要体现在自命题题材选择、试卷结构和难易分布科学性;命题思路主要体现在命题以检测与筛选产生的目的性,确保试题的信度、效度与区分度。

2.规范性原则

强化自命题工作管理,做到自命题组织结构合理、规章制度完备、自命题流程合理、操作过程严格,确保自命题质量。规范的自命题应是从大多数考生的实际水平及能力出发,知识面布局合理,项目结构完整,经多番论证检查,高质量、多形式的命题能够有效实现考试检测、激励、鞭策以及信息反馈功能。

3.安全性原则

牢固树立安全意识,将自命题保密举措和要求贯穿到自命题工作的重要节点和环节,从学校、二级学院不同环节和要求上,针对不同工作人员分工层层落实细化,确保各环节的一关多控。

4.有效性原则

按照学科专业特点,合理设计题型、题量和难度,保证择优选拔所需要的区分度,试卷难度应保持基本稳定。试题应当有适当的难度效度及区分度,尽量避免考生分值差异的偶然性,保障考生成绩的客观性,从而真实地反映学生的知识面和灵活运用能力。

5.适度性原则

主要指试题题量适度和范围适度。题量适度指如果题量过多过少对考生实际知识理论水平产生非客观影响,从而难以区分考生具体运用知识解决实际问题水平,从而难以提升试题的区分度。另一方面,试题覆盖面超纲,考生针对未学问题,难以区分优劣,所以试题范围应以不超出本学科普遍认同的教学大纲,试题的覆盖面应以本学科重点和共通点内容为宜,保证全面考核学生的学业水平。

三、研究生招生考试自命题保障系统运行机制的特点

1.封闭性

自命题保障系统的不同功能系统、具体框架、子系统等具有相对稳定性。在一定时期内,确保系统完整性、闭合性运行,减少自命题保障系统本身的构建框架的稳定与反馈价值。

2.程序性

自命题保障系统的运行应设定合理的规则和秩序,保障各个子系统运行的前提和基础。

3.循环性

自命题保障系统的运行是以一个研究生招生考试周期计量单位。在对一轮招生考试质量执行情况进行总结时,应不断查找自命题保障过程中存在的弊端与不足,从而不断调整质量执行方案、规则秩序、具体措施与质量目标,为下一次系统改进与提升提供思路和依据。通过循环往复的检验、提升过程将促进自命题质量不断提高。

四、研究生招生考试自命题保障系统必要子系统初探

1.试题库管理系统

试题库为大批优良试题的储存库,经严格筛选并合理组织建设,完成技术参数,建设指标测定,便于按照一定的组题科学程序,按照预先设计的组题原则和理念,挑选试题、优化组合,最终形成难度、卷型、内容符合既定质量指标,且能保证稳定的难度、区分度、效度的考试试卷。试题库建设将传统的手工组题运用计算机数据库建设改善为自动化命题,极大提高了命题的工作效率,对于提高招生考试自命题规范化管理水平,加强命题保密管理,实现教师办公自动化,完善自命题质量保障有突出意义。

(1)试题库数据架构

题库架构应按照分层分块的模式,根据总库、子库、分库三层交叠模式。试题信息按题目、评分参考、附件三部分构成,分别存放于不同的子库当中;每个子库按照科目、题型、测试指标等分库储存。

(2)试题库功能设计

试题库管理系统应包括用户管理、自命题科目管理、题库管理、组卷管理和试题质量分析等五大功能模块。用户管理包括对命题工作人员信息、考试专业信息和考生信息的管理;自命题科目管理包括考试科目清单、录入科目信息、科目信息列表等功能;题库管理主要是由各招生专业根据考试科目,按照科目、知识点、题型、难度实现试题的录入、修改、删除、保存和查询等功能;试题组卷功能是由命题教师根据所授考试信息设定组卷策略算法和相关参数,并按照参数要求组成试卷。试题质量分析功能为组题结束后对试题进行一个客观参数的评价分析,包含历年试题重复率、效度、难度、区分度检验。

2.自命题工作自循环量表管理系统

工作自循环管理是通过高效的计划、组织、监控、反馈,利用资源系统管理办法,结合量表审核记录实现各环节流程化、程序化和规范化管理。

研究生招生考试自命题工作涉及 7 个主要环节构成:命题、印制、封装、收发、评阅、成绩录入、质量评估。每一环节涉及实施的部门与人员均不同。采用对标对表的量化记录管理办法,不仅可以打破不同环节间的信息传送间隔,也可进一步明确责任分工、工作标准、程序要求,建立良好的监控反馈流程。量表包括《试卷印制、封装工作流程图》《自命题试卷印前审核记录表》《自命题科目试题命制审核表》《自命题试卷印制记录表》《自命题分装检查记录表》等。

充分利用各个环节的量表监督考核反馈,及时进行科学总结,更加客观地评定在自命题工作中发现的问题和存在的不足。利用总结经验和查找问题,对工作中出现的创新举措和经验及时总结推广,对出现的问题和不足提出改进举措,结合SWOT分析提出针对下一年度自命题工作的改进方案,形成具有良性循环运行机制的自命题工作模式。

猜你喜欢
区分度科目试卷
多科目训练见招拆招练硬功
高校开设专业的首选科目和再选科目要求浅析—以法学(类)专业为例
浅谈试卷分析常用的几个参数及其应用
图形推理测量指标相关性考察*
高考“新科目”
Module5 A Trip Along the Three Gorges
Module5 Great People and Great Inventions of Ancient China
Module 4 Sandstorms in Asia
Module 1 Europe
浅观一道题的“区分度”