吴秀玲
综合性督导评估不同于一般的工作检查、验收,也不同于经常性督导评估或专项性督导评估。它是一个非常复杂的系统性工程。在实施这一系统工程时,应建立一定的工作流程,规范、有序地进行,才能保障督导评估工作的组织效率和评估效能。
在“义务教育学校办学质量综合督导评估”的实践研究中,我们把综合性督导评估基本模式作为研究的重要内容,进行了一系列的实践探索,初步构建了“三段五步”综合性督导评估模式。如图所示:
一、准备阶段
准备阶段是综合性督导评估的奠基性工程,这一阶段的工作能否思考缜密、设计周密、安排严密,直接影响着整个督导评估工作的科学性和高效性。
(一)制定《义务教育学校办学质量综合督导评估方案》
“凡事预则立,不预则废。” 《义务教育学校办学质量综合督导评估方案》(以下简称《督导评估方案》)是开展督导评估工作的行动纲领和施工蓝图,对于整个督导评估工作有着较强的导向和控制作用。
《督导评估方案》阐明了开展督导评估的指导思想、目的及原则,并对督导评估范围和内容、实施步骤等内容进行了设计,对督导评估所涉及的各类群体分别明确了分工和责任,同时对评估结果的使用做了具体的规定。方案在初步确定之后,聘请了全国知名专家对方案进行了论证、修改,并通过试评估对方案的可行性进行了检验,在此基础上又经反复修改,最终行文印发。
(二)研制《义务教育学校办学质量综合督导评估指标体系》
《义务教育学校办学质量综合督导评估指标体系》(以下简称《评估指标体系》)是落实督导评估目标的载体,也是实施督导评估的重要依据,解决的是用什么来进行评价的“工具”问题。它的科学化程度直接决定着评估结果的信度。假如把这个工具比喻为一把量尺的话,那么这把量尺只有刻度准确,才有可能丈量出物体的真实尺寸。
在研制《评估指标体系》的过程中,我们经历了收集资料、搭建框架→征求意见、初步定稿→专家论证、再次修改→征求意见、反复修改→尝试评估、修改定稿等一系列过程,最终形成了由指标要素系统、指标标准系统、指标权重系统共同组成的要素齐备、科学严谨、易于操作的《评估指标体系》。
(三)制定《督导评估细则》
为了使《评估指标体系》这把“尺子”的刻度更加精密,我们在《评估指标体系》确定之后,又进行了《督导评估细则》的研制。这是对《评估指标体系》的补充和细化,重点解决的是用什么样的方法去评估和如何进行量化赋分的问题。有了这个《督导评估细则》,任凭谁来进行评估,都能使评估结果尽量趋于一致,达到了用“量尺”刻度的精密保障了测量结果的精度,解决了评估者赋分时“跟着感觉走”“凭着印象赋分”的模糊性问题。
(四)開发评估应用工具
在实施督导评估时,还要辅之以一些其他评估应用工具,这样才能更加快捷、准确地采集到更多相关信息。
在“义务教育学校办学质量综合督导评估”中,我们研制了督导评估等级量化表、信息采集表、观测记录表、课堂观察量表、座谈会访谈提纲、调查问卷、学业水平测试题目、体质健康测试记录表等八类应用工具,为督导评估人员进行信息采集和价值判断提供了方便。
(五)分类组织开展培训
首先是对学校管理人员和各校责任督学的培训,内容主要是《评估指标体系》和《督导评估细则》的解读以及学校开展自评工作和接受实地督导评估应该注意的事项等;其次是对学校信息技术人员的培训,主要是“督导评估应用系统”介绍及其操作使用;最后是对聘请的督导评估人员进行培训,培训内容除上述所有内容之外,还增加了督导评估人员行为纪律准则、督导评估专业技术等方面内容,以便统一思想、统一标准、统一行动,使其成为本次督导评估名副其实的“专家”。
二、实施阶段
实施阶段是综合性督导评估的中心环节,这一阶段的主要工作也分为五步来实施。
(一)指导学校开展自评
学校自评,是综合性督导评估非常重要的一个环节。在自评的过程中,学校领导和广大教师能够对照《评估指标体系》更为全面地梳理学校工作、充分认识学校的发展现状以及面临的机遇和挑战,从而明确学校发展新的生长点。夯实学校自评环节,有利于学校形成“自我诊断—自觉改进—自主发展”的自评文化。在学校开展自评时,学校责任督学应从始至终参与进来,充分发挥其对学校的监督与指导作用,帮助学校提高自评的效果。
(二)组织开展问卷调查
问卷调查是督导评估中采集信息最重要也是最常用的方法,通过问卷方式向特定群体开展相关情况调查,可以使更多的人员参与进来,实现评估主体的多元化。特别是不实名式调查,更有助于提高调查的信度,也有助于督导评估人员多渠道、方便快捷地获取信息,为实地督导评估提供第一手素材和方向。
“义务教育学校办学质量综合督导评估”问卷调查的对象共包括教师、学生、家长三类群体,每类群体的调查问卷共两份,一份是对学校办学情况的调查,一份是对学校办学满意度的调查。我们首先结合“评估指标体系”编制了问卷,然后采用信息化手段组织开展问卷调查。
(三)进行调查统计分析
采用信息化操作系统进行问卷调查,最大的好处就是加快数据统计分析的速度。问卷调查时间一结束,系统就会自动生成统计结果,并能以多种图表的方式呈现出来,便于问卷者进行分析。
“义务教育学校办学质量综合督导评估”涉及188所学校,每所学校都有关于对教师、学生、家长的问卷各2份。督导评估专家通过分析每所学校问卷调查结果中的相对“异常值”,能够迅速捕捉到学校的长处与短板,这就为实地督导评估提供了“数据支撑”。
(四)专家远程线上评估
利用互联网开展远程评估是当前督导评估一种喜闻乐见的方式。线上评估既可以节约学校的迎检成本,也可以减少评估专家的负担,使评估工作不受时空限制,评估结果统计方便快捷,有利于提高工作效能。
“义务教育学校办学质量综合督导评估”主要采用的是“线上评估+实地督评”的方式。我们搭建了一套“教育督导评估应用系统”软件,并将《评估指标体系》嵌入系统中,由被评估学校将档案资料以电子文档方式上传到系统中。在经授权后,督导评估专家可以凭借用户名和密码进入系统,查阅学校已上传的电子档案,采集相关信息,为实地评估做好充分准备。
(五)深入学校督导评估
如果把线上评估和问卷调查比作西医诊查的话,那么深入学校实地评估,就好似中医面对面地“望闻问切查”。把中西医结合起来,能够诊断出真实、全面、立体的情况,从而有助于针对性地开出解决问题的“良方”。
我们对实地督导评估这一环节进行了精心的研究、设计,并在组织和实施的过程中,不断修正和完善,最终形成了如下工作流程图:
三、总结阶段
总结阶段是综合性督导评估的收尾性工程,主要包括五项工作。
(一)统计分析各校成绩
在“督导评估应用系统”中按一级指标或二级指标进行成绩统计分析,了解各参评学校的得分情况,分析全市各项指标的得分率等,为撰写督导评估报告奠定基础。
(二)形成督导评估报告
督导评估报告分为《学校督导评估意见书》和《督导评估总报告》两种。《学校督导评估意见书》须在实地督导评估口头意见反馈的基础上进一步梳理完善;《督导评估总报告》的撰写则需要对所有被评估学校的情况进行分析,找到共性,既要肯定成绩、总结经验,又要指出存在的普遍性问题,给出解决问题的“良方”。
(三)通报督導评估结果
督导评估的结果可以以不同的形式反馈给多个对象,如以电子报告的形式通过官网向社会发布;将总报告提供给党委、政府、教育局领导;把总报告分解成若干个分报告,提供给教育局各相关科室;将《学校督导评估意见书》和《问题清单》下达给学校。
(四)总结督导评估工作
对整体进行总结,检验本次督导评估是否达到了预设的目的,进一步分析研究《督导评估方案》《评估指标体系》和各类评估工具的科学性、评估技术方法的有效性,以及组织实施工作的合理性,为今后开展督导评估工作积累有益的经验。
(五)回访学校整改情况
督导评估之后的“回头看”环节必不可少。在给被评估学校下达《学校督导评估意见书》的同时,针对学校存在的突出问题下达《问题整改清单》,要求学校依据问题制订《整改台账》。然后对被评估学校进行回访,了解学校的整改情况,真正发挥出督导评估以评促建、以评促改的功能。
“三段五步”综合性督导评估模式遵循督导评估工作的自身规律,学习借鉴国内外先进的督导评估工作经验,结合本土的实际情况,经过试评估、县级评估以及市级评估等多轮实践,从最初的构想到不断的实践检验,修正改进,最终定型,基本上经历了一个从“定模”到“建模”再到“固模”的模型构建的过程,最终成为一个比较完善的综合性督导评估操作体系。该体系贯彻了评估主体多元化、评估方式多样化、评估手段现代化、评估过程精细化等现代督导评估的理念和要求,强化了程序意识,完善了工作流程,细化了工作规范,使综合性督导评估各个方面、各个环节的工作都能有章法可循,有效避免了督导评估过程中的盲目性和随意性,有利于提高督导评估工作的效能,保障评估结果的信度和效度。这一操作体系不仅为各种主题的综合性督导评估提供了明确具体的操作范式,也对各类专项性督导评估以及各种检查、验收工作具有一定的借鉴意义。