章勇 邹良 唐文君
[摘要]监测结果运用是“监测—反馈—整改—提升”工作完整闭环中的关键环节,直接影响监测工作的现实价值与教育改革成效。对监测数据的精准分析与深度挖掘是结果应用的前提和基础。长沙在8年监测实践和结果应用基础上,探索出“市级总体数据分析、区县横向数据分析、年度追踪数据分析、数据结论全盘分析、质量互证综合分析”的市级监测数据应用路径,为充分发挥国家义务教育质量监测对教育实践的改进功能、促进教育高质量发展奠定基础。
[关键词]义务教育质量监测;监测结果应用;监测数据应用路径
[中图分类号]G424.74[文献标识码]A
[文章编号]1673—1654(2023)06—002—008
一、引言
2015年,国务院教育督导委员会办公室印发《国家义务教育质量监测方案》(国教督办〔2015〕4号),正式建立国家义务教育质量监测制度。国家义务教育质量监测(以下简称“国测”)数据,有助于教育行政部门了解区域义务教育发展水平,明晰教育发展的优势与不足,为加强教育宏观指导、完善教育政策措施、改进学校教育教学、实现教育科学管理提供依据和参考。2021年9月,教育部发布了《国家义务教育质量监测方案(2021年修订版)》,对监测工作进行改进“升级”,进一步强调结果运用是教育质量监测与评价发挥作用的“最后一公里”,要建立更加完善的监测结果运用机制,形成推介国家义务教育质量监测结果运用范式,促进学校改革,推动区域教育高质量发展。在“监测—反馈—整改—提升”工作的完整闭环中,监测结果运用是关键环节,直接影响监测工作的现实价值与教育改革成效。运用教育质量监测数据,推动教育改革,促进教育高质量发展已成为目前基础教育发展的国际趋势[1]。
目前区域结果应用路径研究大多为行政层面的路径分析,例如吉林省确定了“发现问题、制定计划、实施行动、反思调整”的行动路径[2],广西壮族自治区提出“协同发力、打造智库、以点带面、巧用资源”的四条路径[3]。而对监测报告具体数据进行分析,彻底读懂监测结果数据,充分理解数据背后的含义是实现监测结果应用路径的前提和基础。义务教育质量监测报告学理性强、统计测量技术含量高、数据信息量大,分析监测数据,运用监测结果改进教育教学需要一定的知识和经验积累[4]。但目前对于获得监测报告后,从哪些方面开始进行数据分析,将哪些指标纳入分析,具体如何操作等数据分析环节的研究较少。
长沙一直重视运用大数据诊断教育质量,市教育质量监测与评估中心作为专业团队,站位在数据分析不同视角,探索监测数据应用路径,挖掘数字内在价值,提高分析的精准性和科学性,为国测结果应用提供专业支撑。
二、市级监测数据应用路径探究
当前,监测数据在助推教育发展中起着重要作用,而对数据的分析与解读能力是科学应用数据、发挥数据作用的基本前提[5]。为更好地看懂数据、用活数据,在8年监测实践和结果应用基础上,探索建立监测数据市级应用路径,具体如图1所示。
路径分析一:市级总体数据分析,宏观分析本市现状。国家义务教育质量监测学科三年一周期,既关注某学科监测结果,也关注三年所有学科监测情况;既关注学生的结果产出,也关注学校管理、教师教学、家庭教育的影响过程;既关注学生学业成绩,更关注学生的身心全面发展。根据实践需要,列出所有需要分析的监测指标,以全国均值和本省均值为标准,将监测指标初步分为优势指标和待提高指标,若指标高于全国均值和本省均值,则初步归为优势指标,否则归为待提高指标。
路径分析二:区县横向数据分析,分析全市各区县情况。一方面,报告选取代表性的指标,根据区县在全国样本县中的位置分别评定为1星-10星,星级越高,表示区县在该指标全国样本县中的位置越靠前。对于进行星级评定的指标,可以统计区县在指标的星级评定情况,将指标分为优势指标与待提高指标。另一方面,对于没有进行星级评定的指标,可以与市、省、全国的均值进行差异对比分析,根据差异量的正负和大小,分为优势指标与待提高指标。
路径分析三:年度追踪数据分析,分析年度追踪数据。国家义务教育质量监测每三年一周期,部分指标可追踪前后三年的数据情况,通过三年间的纵向数据挖掘,探究指标纵向变化趋势。可以将年度变化趋势向上的指标归为优势指标,趋势向下的指标归为待提高指标。同时,三年后的监测可以为三年前制定的教育措施是否取得相应的成效提供数据支持。
路径分析四:数据结论全盘分析。结合市级总体数据分析、区县横向数据分析和年度追踪数据分析,可以根据本地实践需要制定优势指标与待提高指标的分类标准,将三类数据均表现优异的指标归为优势指标,三类数据均表现不佳的数据归为待提高指标,其他指标归为中等指标,在确定优势指标与待提高指标的基础上,提炼出下一步调研重点。
路径分析五:质量互证综合分析。一方面要从多个方面对监测数据进行综合分析,避免用单一数据作简单推论,另一方面要结合调研进行分析,调研的目的在于對监测数据的真实性进行验证,探寻背后的原因和解决问题的策略[6]。调研专家组成员包括测量评估专家、教育管理专家和教育科研专家。调研前,根据调研重点,制定调研方案、设计调研访谈提纲、编制调查问卷,其中调研方案包括调研成员、调研对象、调研时间、工作行程、内容、需要提供的资料等;提纲内容包括综合基础背景信息、监测报告数据发现的问题等;对于一些敏感问题,可编制调研问卷,匿名回答,收集问卷数据。调研期间,遵循科学性、规范性、客观性原则,采用课堂观察法、访谈法、问卷法,深度访谈行政领导、校长、教师,实地走访区县、学校,随访学生等,收集第一手真实、客观资料。调研后,专家们交流意见、研讨归纳调研结果,结合数据分析和实地调研结果,将质性经验与量化数据互证,形成分析报告。
需要注意的是,不仅要关注待提高指标,也要关注优势指标。目前地方上可能更多的是将监测定位为“找问题”,但同时还应该“保优势”,通过量化数据与质性经验,明晰教育发展的优势与不足,探究表现优劣的原因,为后续改进教育教学提供依据和参考。下面以某市2021年数学学科监测为例来做具体说明,为保障监测数据的保密性,本研究所用数据均为模拟数据。
三、监测数据应用实例分析
2021年某市所有区县参与国家义务教育质量监测,根据《数学学习质量监测结果报告》,数学学科包含六大监测内容,22项监测指标,本文仅以报告中选取的九项综合状况指标进行详细阐述,具体分析如下:
第一步:市级总体数据分析
站位市级总体层面,全面观察数据。以全国均值和本省均值为标准,将九项监测指标初步分为优势指标和待提高指标。若指标高于全国均值和本省均值,则初步归为优势指标,否则归为待提高指标,具体见表1。
第二步:区县横向数据分析
在全市各区县四、八年级数学综合状况表中,9项指标分别被分成1星-10星,星级越高,表示区县在该指标表现越好。本文将半数区县发展状况在8星及以上的指标作为优势指标,发展状况存在3星及以下的指标作为待提高指标,具体情况如表2。
第三步:年度追踪数据分析
与2018年数学监测结果对比分析发现,2021年9项指标中,数学学业成绩、数学学业表现水平中等及以上的比例、数学学业均衡、数学学习兴趣、数学学习焦虑、数学周课时数超标率和数学教师课堂管理七项能力指标存在年度对比数据。其中数学学业均衡为区县层面数据,统计小于15%的区县数量变化[7]。具体分析如表3所示,箭头向上表示2021年该指标表现优于2018年,箭头向下表示2021年该指标表现较2018年有所降低。
第四步:数据结论全盘分析
表4为指标分类和调研重点表,结合市级总体数据、区县横向数据、年度追踪数据进行全盘分析,将三类数据均表现优异的指标归为优势指标,三类数据均表现不佳的数据归为待提高指标,其他指标归为中等指标。其中表现不同的指标可以结合起来作为调研重点,如数学学业表现较好,且四年级多数区县校间差异<15%,但八年级多数区县>15%,四、八年级教育均衡状况差异较大的原因;也可以单独将某一个指标作为调研重点,如教师总体使用探究性教学行为频率较高,但不同区县存在较大差异,区里是否有实行相关培训或政策。
第五步:质量互证综合分析
量化数据能够描述教育现象,质性分析可以揭示现象背后的原因,在综合分析时,要将量化数据和质性分析相结合。本文以“数学学习兴趣”指标为例阐述调研过程和分析:
1.调研重点:T区八年级学生数学学习兴趣状况。
2.调研团队:包含教育督导、教育管理、教育科研部门人员及中小学校长。
3.调研对象:T区教育行政领导、学校校长、教师、学生。
4.调研资料准备
(1)监测数据分析:2018年T区八年级数学学习兴趣高和较高的比例之和为60.2%,低于省和全国,仅达到4星。
(2)区县材料准备:校长基本信息,师资队伍基本信息,学校分类统计表,各级各类学校数、学生数、教师数,流动儿童、留守儿童统计,教育经费投入,区县教育公平和质量提升等政策措施。
(3)访谈提纲设计:根据访谈对象设计相应的访谈提纲。例如教师访谈提纲,可以包括教龄、学历、职称、课时、兼课情况、班容量等基本情况;教研培训、职业规划、教师待遇、工作满意度等专业发展信息;影响学生学习兴趣的因素;学校对教师教学质量的评价方式;学校生源情况;学校在扶持学困生和培养优等生方面的特色等。学生访谈提纲可以包括学习压力、作业时间、体育锻炼、睡眠时间、与老师的关系、老师的教学行为(如课堂提问)等方面。
5.调研方式:实地走访、推门听课、访谈、问卷调查等。
6.原因探究:调研发现,导致学生学习兴趣偏低的原因可能包括学生、教师、教研等多方面因素。
(1)学生层面
①学生反映数学知识体系繁杂、抽象难懂,学习过程中缺乏直观感受,感觉无法与自己的生活和实际应用产生联系,缺乏趣味性和实用性,导致学习兴趣不高。同时,知识连贯性强,前面没听懂,后面很难跟上。
②存在學习方法不当的问题,无法有效地掌握学习技巧和方法,导致学习效果不佳,认为自己无法掌握数学知识,缺乏数学学习自信心。2018年监测结果也显示,该区八年级数学学习自信心在全国星级评定中仅为1颗星。
③课外培训辅导时间较长,2018年监测结果也显示,56.9%的八年级学生每周参加校外线上线下辅导班或补习班(包括家教),高于全国23.7个百分点。
(2)教师层面
①数学教师留职意愿偏低,2018年监测报告结果也显示,在问及“如果让您重新选择,您还愿意当数学教师吗”时,八年级数学教师表示愿意继续当数学教师的比例为75.6%,低于全国5.0个百分点。
②教师的非教学事务性工作繁多,分散了教师部分精力。
(3)教研层面:教师培训的针对性有待提高,2018年监测结果也显示,培训偏理论,对实践的指导性较差是该区八年级数学教师认为当前培训存在的最主要问题。
7.采取措施
(1)探索智慧教育教学新模式,加强信息技术在课堂教学中的运用,提升教师的信息素养,提高数学课堂的趣味性。
(2)加强对学校课堂教学指导,提升教师探究性教學能力,注重数学应用,联系数学在现实生活中的应用场景,鼓励学生思考,提出问题,并引导学生寻找解决问题的方法,激发学生学习兴趣。
(3)鼓励教师分层布置作业,提高作业设计针对性,引导教师关注作业布置的实践性和探究性,合理控制作业时长。
(4)鼓励学校探索适合本校的数学课堂教学模式,通过教师培训、数学竞赛、课题研究等多种方式,积极探索教学方法创新。
8.取得成效
2021年八年级学生数学学习兴趣较2018年有较大提升,2021年该区八年级数学学习兴趣高和较高的比例之和较2018年提升23.2个百分点,在全国星级评定中达到10颗星。同时,学生数学学习自信心较2018年提升了18.3个百分点。
“一分监测,九分运用;一分预警,九分改进;一分外推,九分内驱”[8],监测结果应用是监测评价发挥作用的“最后一公里”,而对监测数据的精准分析与深度挖掘是结果应用的前提和基础。长沙市在国家义务教育质量监测数据市级应用路径的基础上,进一步形成了“解读报告、分析数据、归因问题,制定措施、建立台账、综合施策,强化过程、专项督导、形成机制,聚焦重点、专项监测、力求实效”的监测结果应用长沙路径[9]。经过八年的监测与结果应用,学生学习兴趣、自信心显著提升,教师教学理念更新,新时代教育评价改革理念深入人心。未来长沙将进一步做好国家义务教育质量监测实施和结果应用工作,探索数据应用范式,发挥大数据应用价值,加快教育评价数字化转型,提升义务教育优质均衡发展水平,推动长沙教育高质量发展。
参考文献:
[1]李勉,张岳,张平平.国际基础教育质量监测评价结果应用的经验与启示[J].外国中小学教育,2017,(05):1-7.
[2]蔡京玉.省域基础教育质量自主监测的顶层设计及实践推进——吉林省基础教育质量监测中心自主监测实践为例[J].吉林省教育学院学报,2018,34(09):50-55.
[3]陈怡静.义务教育质量监测结果应用的路径研究——以广西壮族自治区为例[J].广西教育,2022,(04):4-6+10.
[4]邹良,章勇.长沙市、区、校三级联动的义务教育质量监测结果应用研究[J].考试研究,2021,17(04):90-95.
[5]邹良,唐文君.长沙市县域义务教育优质均衡发展监测数据结果应用的五步路径探究[J].考试研究,2020,16(05):3-10.
[6]李凌艳,苏怡,陈慧娟.区域运用基础教育质量监测结果的策略与方法[J].中小学管理,2019,No.345(08):48-51.
[7]教育部.县域义务教育优质均衡发展督导评估办法[EB/OL].(2017-04-26).http://www.moe.gov.cn/srcsite/A11/moe_1789/201705/ t20170512_304462.html.
[8]罗强.监测驱动:大数据时代评价改革的新走向——苏州市义务教育学业质量监测结果运用的思考与启示[J].中小学信息技术教育,2019,(Z1):45-47.
[9]邹良.推动高质量发展的国家义务教育质量监测结果运用[J].年轻人:C版(学校天地),2022,(8):44-47.
Research on the Municipal Path of the Application of National Compulsory Education Quality Monitoring Data Results
Zhang Yong Zou Liang Tang Wenjun
Changsha Institute of Educational Science Research,Changsha,Hunan,410016
Abstract:The application of monitoring results is a key link in the complete closed-loop of“monitoring,feedback,rectification,improvement”work,which directly affects the practical value of monitoring work and the effectiveness of educational reform. The precise analysis and deep mining of monitoring data are the prerequisite and foundation for the application of results. Based on the 8-year monitoring practice and results application in Changsha city,this article explores the application path of city level monitoring data,which includes“overall data analysis at the city level,horizontal data analysis at the district and county level,annual tracking data analysis,comprehensive analysis of data conclusions,and comprehensive analysis of qualitative experience and quantitative data”. This lays the foundation for fully utilizing the improvement function of national compulsory education quality monitoring on educational practice and promoting high-quality development of education.
Key words:Quality Monitoring of Compulsory Education,Application of Monitoring Results,Monitoring Data Application Path
(责任编辑:吴茳)