基于大数据分析的教学评价体系建立与实践——以绍兴文理学院为例

赵伟强 陈 坤 卢雪萍

(绍兴文理学院 机械与电气工程学院,浙江 绍兴 312000)

地方本科院校在我国高等教育应用型人才培养中起着关键性作用.培养具有创新思维与应用能力的高素质人才，需要建设一支教学态度好、教学能力强的师资队伍，以及构建一套教学模式新、评价模式优的体系.目前各地方本科院校都在积极探索与实践课程教学模式改革，也非常重视利用教师的教学业绩考核和课程教学质量测评的结果，促进教师教学水平和教学能力的提升.但无论是教学业绩考核还是课程教学质量评价指标，都倾向于总体的、宏观的考量，缺少量化的、微观的、易借鉴的和可操作的评价模型.此外，地方本科院校教务管理部门为了降低管理成本、简化教学工作量分配，普遍采用一刀切的方式，即课时津贴只与教学工作量有关，与教学效果和教学质量无关，同工同酬，但优课不优酬，未能调动教师从事一线教学工作的积极性.

本文以地方本科院校——绍兴文理学院的机电学院、土木工程学院等6个二级学院作为研究对象，以电路原理、模拟电子技术等6门承担省级课改项目的工科课程为例，通过构建课程评价指标体系、二级学院评估体系和地方高校评估指标体系，利用近3年教学测评、教改课题、教学成果等大数据，探究教学模式改革对教学质量提高的积极作用，分析教学测评成绩、教学模式改革与二级学院教学质量之间多赢关系，评估教学质量、教学模式、教学测评及教学管理之间制衡关系，探索各学科普遍适用的教学评价模型，寻求切实提高教学质量的有效途径.具体见图1.

1 教学评价体系的建立

教学评价必须客观地反映课程教学的基本情况，如课程考核评价方式、作业布置及批改、教学语言是否生动形象、网络教学平台应用等，并且评价指标要简单、实用、科学、完整并易操作，突出评价的核心要素，以提高评价指标的客观性和准确性.因此，课程教学评价模型以学生参与度、认可度、满意度以及实施效果为核心，分别构建课程评价指标体系、二级学院评估体系和高校评估指标体系.

1.1 课程评估指标

课程评价体系包括目标层、一级指 标层(综合指标层)、二级指标层(明细指标层 )和三级指标层(评价对象层)等四个层次[1].其中一级指标有4个，二级指标有11个.教师教学水平、考核评价方式、课程教学模式这三个一级指标设置了30个观察点；学生学习状况这个一级指标设置了11个观察点；加上总体评价，课程评价指标共计42个观察点，具体见表1.剔除课程难易程度的3个观察点和总体评价后，课程评价指标体系剩余38个观察点.

教师教学水平、考核评价方式、课程教学模式这三个一级指标的每个观察点其评价等级及得分如下：“非常满意”得5分；“比较满意”得4分；“有点满意”得3分；“不太有效”得2分；“没有效果”得1分；“没应用/不知道”得0分.

一级指标学生学习状况剩余8个观察点的评价等级及得分如下：“比其他课程多很多”得5分；“比其他课程多”得4分；“与其他课程相同”得3分；“比其他课程少”得2分；“比其他课程少很多”得1分；“没应用/不知道”得0分.

以上38个观察点量化考核满分为190分.如果课程教学综合评价分超过152分，表示课程教学质量优良、学习效果较好，并且学习收获较大；如果总评分低于114分，表示课程教学质量较差，教师需要反思教学过程及教学方式及时做出调整.

图1 基于大数据分析的教学评价模型的应用

表1 课程评价指标体系设置的观察点

一级指标二级指标序号具 体 指 标教师教学课堂组织安排知识传授表达师生交流互动1对本课程学习要求等的讲解……2每一堂课教师的准备情况……3课堂知识点精通与熟练程度……4课堂时间的合理安排……5在课堂上对重要知识点的强调或归纳的方式……6知识点传授清楚，易懂……7语言表达流畅、清晰……8所引用的例题、案例及解释能很好匹配知识点……9提出有挑战性、应用性或实用性问题，启发学生创新思维……10教学生动、投入，富有激情并有感染力……11教师对学生的指导与帮助，提问的及时反馈……12教师对学生关心及重视的程度……13教师对学生学习状态的关注及所取得进步的关心……14提供课外交流帮助的机会，比如安排固定的课后答疑时间……15教师愿意聆听学生的问题与观点，有问必答……考核评价方式考核方式考核评阅16公布课程考核评价方式，比如总成绩构成、课堂考勤等……17试卷考题的质量，试题的科学性与相关性……18试卷中课程重要知识点的覆盖情况，即试题分布的合理性……19教师对课后作业、试卷的及时认真批改与评阅……20对教师推荐或选用的教材总体质量的评价……21课后作业对理解掌握本课程知识的帮助程度……课程教学方法与手段团队合作模式改革网络平台22导师为学习小组提供讨论、研究的问题与项目……23布置学期论文或研究项目……24布置需要学生团队合作的作业或项目……25布置案例学习、情景模拟、软件仿真或角色扮演等作业……26多元化考核方式，注重过程考核，比如安排阶段性测试……27针对学生掌握程度，采用因材施教的分层分级教学方式……28教师使用Elearning网络平台或创建课程网站等……29基于网站、QQ群或微信群等信息技术，搭建师生交流平台……30教师使用电脑或其他信息手段，主动积极地帮助与指导学生……学生学习状况课程学习效果学生投入状况课程难易程度31通过本课程学习，学习能力及学习效果的增加……32在达到课程学习目标方面，取得的进步……33通过课程学习，对本专业的学习兴趣与研究欲望增加……34本课程帮助我独立思考与研究专业方面的知识……35本课程使我更加积极地投入到专业知识的学习……36投入本课程的学习时间与精力……37每堂课的课前准备工作(包括完成预习、做作业等……38本课程的学习压力与挑战……39对于自身的基础与能力而言，本课程的难易程度40与相同学分其他课程相比，本课程学习的压力与负担41对您而言，教师授课进度的快慢程度总体评价42请评价本课程教师的教学质量(请忽略课程内容对您的主观影响)

1.2 专业教学质量评价模型

利用教学质量测评成绩，对二级学院下属各个专业教学质量及教学效果进行评估，统计各专业教学测评成绩平均分，列出学院测评成绩前1/3课程的名称及数量及测评成绩后1/5课程的名称及数量，对各专业教师承担的各级各类教学改革项目、获得的其他教学类成果及荣誉进行量化处理，用数据说明各专业的教学质量，如图2所示.

1.3 高校评估指标

根据各二级学院教学改革实施状况及教学质量评估报告，从学校层面分析适合各专业特点的课程教学评价，汇总教学改革过程中遇到的困难，总结地方本科院校教学模式改革总体实施评估报告，并制订高校的教学模式总体实施方案.通过大数据，统计各个二级学院所承担的各级各类课改项目和教改项目、教学成果奖、教学类研究论文等成果及荣誉并量化，研究各二级学院的教学管理与教学质量.

图2 专业教学质量评价模型

2 基于大数据分析的评价过程

随着信息技术的飞速发展,大数据浪潮波及世界每一个角落.现代大学管理也在经历数据革命与数据管理的变革，即从传统主观决策和经验管理转向以数据和信息为有效支撑的理性决策和科学管理[2].大数据给教学带来深刻的变革，比如大数据引发新的教学模式、大数据转变大学教学管理观念、大数据促进分级分类教育等[3].

基于大数据分析的视角，利用近3年全校教学质量测评数据，探究电路原理等6门承担2015年浙江省课堂教学模式改革项目的课程对教学质量提升的促进作用；评估机电学院等6个二级学院教学测评成绩、教学模式改革与学院教学管理之间的关联度；分析地方高校在整体推进教学模式改革进程中教学模式、教学测评及教学管理等方面顶层设计需要关注的问题.

2.1 课程教学质量评价

表2为机电学院承担省级课改项目课程近3年教学质量测评成绩.表2显示，该学院近3年测评成绩均保持在84分左右，而承担上述6门课程测评成绩均位于学院前1/10，远高于平均分8.42、7.52、7.40，领先优势明显并能持续保持.特别是基于形成性评价的电路原理课程，采用强化过程的多元化评价考核机制后(具体评价方式见图3)，始终受到学生的一致好评，教学测评成绩稳步上升。

表2 机电学院实施省级课改课程教师近3年教学测评成绩一览表

课程名称2016年度2015年度2014年度分数排名分数排名分数排名电路原理93 461/14893 622/16090 6916/201数据结构91 486/14893 851/16094 752/201高级语言94 502/16491 766/21993 971/249模拟电子技术90 4717/16492 501/21992 147/249数字电子技术90 7915/16490 638/21993 003/249Web高级编程91 0314/16489 3619/16492 575/249课程平均分91 9691 9592 85学院平均分84 5684 4384 23

2.2 学院教学质量评价

以绍兴文理学院承担课程教学模式改革唯一试点学院——机电学院为例，该学院连续3年省级课改项目数量位列全校16个二级学院的第一，约占总数1/4.以其下属的控制学科、计算机学科和机械学科为比较对象，统计近3年各学科主持的课改项目数(见表3)与教学测评成绩前20名(约前1/3)教师人数(见表4)；数据表明，只占学院专任教师总人数约1/5的控制学科，省级课改项目数占5/12,教学测评前1/3平均在7人以上，课改项目对教学质量的提升作用显著.

图3 电路原理课程形成性评价模式

项

表4 机电学院近3年各学科教师学评教成绩列前1/3数据统计表 人

2.3 高校教学质量评价

以地方本科院校绍兴文理学院为例，该校2011年制定了《关于开展课程教学模式改革试点工作的指导意见》，启动了校级第一批课程教学模式改革试点工作，首批立项55门课程，目前已计推出300多门校级课改项目.利用教学评价数据研究课改项目对提升教学质量、提高学院教学管理水平的作用与影响，已成为高校教学管理部门的抓手.抽取教学管理与教学重视程度较好的6个二级学院近3年教学项目和教学测评的数据(见表5和表6)，量化分析显示，机电学院总分遥遥领先于其他学院，说明该学院在教学研究与教学改革方面成绩显著，并且承担省级课改项目的6门课程教学测评成绩平均为92分，高于其他学院平均6分以上，进一步验证了课改对教学质量的促进作用.

3 提高课程教学质量的几点思考

3.1 推广课程形成性评价方式

形成性评价又称为过程性评价，是在教学过程中即时、动态、多次对学生实施的评价，它注重及时反馈，以强化和改进学生的学习.形成性评价的工作模型见图4[4].在电路原理等课程实施形成性评价后，通过阶段测试、平时作业、团队合作项目等方式，不断考查学生的学习过程，既能看到学生所取得的成就和进步，又客观识别学生距离目标的差距和不足，在分析原因的基础上不断动态调整教与学并及时反馈给学生，真正发挥形成性评价的作用[5].教学测评数据说明教学效果显著，教学测评成绩明显上升，并始终稳定在学院的前1/10，学生反映良好，课程形成性评价方式适合在本科院校积极推广.

表5 绍兴文理学院二级学院近3年主持的教学类项目数、获得教学成果奖数及得分

学院名称2016年度/项2015年度/项2014年度/项省级课改省级教改市级课改市级教改校级教学成果奖省级项目省级教改市级课改市级教改市级教学成果奖省级课改省级教改市级课改市级教改总分机电学院332135122424260医 学 院22321111122教育学院222121117外国语学院23211213123数理信息学院11211511121土木工程学院3411316合 计1061256123123393125159

注：省级项目2分，市级项目1分，市级教学成果奖4分，校级教学成果奖2分.

表6 绍兴文理学院二级学院近3年教学测评平均分一览表

学院名称2016年度2015年度2014年度上半年下半年上半年下半年上半年下半年平均分机电学院84 4484 6784 6884 1784 4584 0084 40医学院83 2983 4684 1084 1883 7684 3183 85教育学院83 4884 0983 2883 8083 2383 5683 57外国语学院84 6386 2887 3586 5387 9387 5886 06数理信息学院85 2486 6586 0687 2785 8985 2283 59土木工程学院81 7082 5284 0783 9385 5783 7584 70

图4 课程形成性评价的工作模型

基于形成性评价的教学方式，需要高校教师花费大量的时间和精力，因此，为鼓励教师安心致力于教学模式的探索与实践，切实提高教学质量，本文特提出优课优酬的理念，地方高校需要在教学管理的顶层设计方面予以考虑.

3.2 应用大数据于教学管理

美国著名的管理学家、统计学家爱德华·戴明(Edwards Deming)有句名言：“我们信靠上帝;除了上帝，其他人都必须用数据说话”.数据被视为知识的来源，没有数据，研究寸步难行[6-7].地方本科院校要提高教学管理水平，需要深入挖掘教学管理中生成的有用信息，用数据去考核量化，才能激励二级学院和教师寻求提高教学质量的新路径和新方法.

[1]张远龙,屠建飞,谢文东.基于模糊层次分析法的云制造资源评价[J].制造材料,2015(6):49-52.

[2]张俊超.大数据时代的院校研究与大学管理[J].高等工程教育研究,2014(1):128-135.

[3]朱建平,李秋雅.大数据对大学教学的影响[J].中国大学教学,2014(9):41-44.

[4]林静.形成性评价在高校课程评价中的应用[J].现代教育管理,2011(9):66-68.

[5]许华琼,胡中锋.形成性评价及其反馈策略[J].教育测量与评价,2010(1):23-26.

[6]迈尔-舍恩伯格,库克耶.大数据时代[M].盛杨燕，周涛，译.杭州：浙江人民出版社,2013.

[7]常桐善.数据挖掘技术在美国院校研究中的应用[J].复旦教育论坛,2009(2):72-79.