□肖小华(中国井冈山干部学院 教务部,江西 井冈山 343600)
评估监督是现代教育培训一个重要的管理环节。建立和完善干部教育培训的效果评估机制是提高干部教育培训质量一个不可或缺的环节。2013年中央颁布的《2013—2017年全国干部教育培训规划》强调:“全面开展培训质量评估,从培训设计、实施、管理以及培训效果等方面入手,对每个培训项目进行考核测评,把评估结果作为评价党校、行政学院、干部学院和社会主义学院办学质量的重要依据。”但从当前的干部教育培训效果评估实践来看,这一工作还存在许多困惑和难题。因此,加快干部教育效果评估研究,对提高干部教育培训质量,建设一支宏大高素质干部队伍具有重要的意义。
评估意指评价和估量。干部教育培训效果评估,是指对干部教育培训的价值进行一种价值判断,在广泛收集信息的基础上,运用一定的方法和技术,测定参训学员的能力、素质、价值观等各方面的变化情况,以判断培训活动目标的实现情况。
干部教育培训是一个层次分明、目标多样的相对独立的系统,因此,以不同的标准划分,干部教育培训的效果评估的类别也不一样。按评估涉及的范围分类,干部教育培训效果评估可以分为宏观评估、中观评估、微观评估。宏观评估主要是对某一地区、某一省市乃至全国干部教育培训的效果进行的评估,中观评估主要是对某一培训机构或某一参训群体的培训效果进行的评估,微观评估主要是指培训机构对自己内部的教学情况、管理情况及具体的课程方面的评估。按参评者的类别划分,可以分为外部评估和内部评估。外部评估,即他人评估,主要是指各级干部教育培训机构主管部门对所属培训机构的评估(也包括主管部门委托的中介机构评估)。内部评估,主要是指培训机构的自我评估(也包括外部评估中要求培训机构的自主评估)。按评估的程序划分,干部教育评估可以分为公共管理的“四职能”评估法和360度评估法。“四职能”评估法是指以现代公共管理为指导,把干部教育培训划分四个阶段并进行相应评估,即培训计划评估、培训组织评估、培训领导评估及纠偏控制评估等四个阶段。360度评估法则把干部教育培训划分为三个阶段并进行相应评估,即训前评估、训中评估及训后评估。按评估的方法技巧划分,可以分为定量评估和定性评估。此外按评估的功能划分,还可分为诊断性评估、形成性评估、终结性评估、整体性评估;按复杂程度划分,可以分为单项评估和综合性评估。
不管何种类别的评估,干部教育效果评估都具有以下特点:
(一)评估主体的指令性。干部教育主管部门组织的评估是相关党委组织部门履行职责,依权对干部教育培训工作进行管理的行为,具有较强的行政指令性特点。被评估的干部教育培训机构必须按照评估要求,如实报告工作情况,并提供相关资料。评估过程中,评估督导组对培训机构存在的问题,有权制止或限期改正。被评估的培训机构对评估报告中提出的意见和建议,如无异议,应认真整改。而培训机构内部的评估,也是评估者在履行相关职责,是一种组织行为,同样具有一定的指令性。
(二)评估内容的综合性。效果评估,表面上是对干部受训前后变化的评估,但实际上对干部教育培训的全方位、全过程评估。因为培训效果的好坏,牵涉到方方面面,是多种因素综合影响作用的结果。因此,培训项目设计、需求调研分析、培训计划、培训内容、培训方式、师资水平、硬件设施、学员的学习态度以及学员所在单位的支持力度等与教育效果相关的因素,都可视为效果评估内容。可见,效果评估内容具有较强的综合性。
(三)评估目标的导向性。任何评估都是以具体的评估指标为依据,而评估指标的制定又是以党对干部教育培训的要求、方针、政策和法规为依据。从某种意义上讲,干部教育评估指标体系实际上是干部教育行为的“导航仪”、“指挥棒”,因而评估指标的价值取向,决定了干部教育培训的目标方向。
(四)评估方法的多样性。从评估的方法来讲,干部教育评估有定性评估和定量评估之分。但从每一评估环节来说,其方法手段又不一样,如在信息收集中,有查档法、问卷法、访谈法、观察法、实地调研法等。
(一)开展培训效果评估,有助于干部教育主管部门对培训机构的培训质量作出正确评价。作为主管干部教育培训工作的党委组织部门或人事部门,如果不进行有效的效果评估,便无从对所属培训机构的工作质量得出正确的结论,因而也就弱化了对干部教育培训工作的领导、管理和调控。通过有效的干部教育效果评估,干部教育主管部门可以更好地引导培训机构各方面工作,对整个干部教育工作准确定位、科学定策,促使培训机构把主要精力集中在提高培训的质量上来,从而更好地实现培训目标,提高培训效益。
(二)开展效果评估,可以增强培训机构的工作动力。培训效果的好坏,表面上是看参训学员对培训机构教育教学、管理的满意度及学员所在单位对培训机构质量的认同度,实际上是培训机构教育教学、组织管理、后勤保障的综合反映。因此,有计划的、经常性的效果评估,可以使培训机构保持适度的压力,而适度的压力则可转化为工作动力和活力。培训机构为了在效果评估中获得好的声誉,会在培训项目的设计、教学组织管理、师资配备、后勤保障等方面投入更多的精力,从而把主要精力集中在提高培训质量上。
(三)开展效果评估,可以增强学员的学习动力。学风建设一直是党中央非常关注的重要问题,也是影响干部教育培训效果的重要因素。当前干部教育培训中学风不尽如意的原因很多,其中学习动力不够是一个重要原因。开展干部教育效果评估,采用科学的手段对参训学员的学习效果进行检测和考核,可以激发参训学员学习的内生动力,提高学员学习的积极性,促进学风的根本好转。
(四)开展效果评估,有利于对培训工作及时进行调控。效果评估实际上是干部教育培训的决策者和培训管理者系统收集信息、总结经验、发现不足的过程,在这一过程中,干部教育主管部门对培训工作中出现的问题、情况可以及时调控、纠偏、导向、激励和约束功能,实现评估工作的可持续发展。就培训机构自身而言,效果评估也是加强内部管理的重要手段,在效果评估的基础上,培训机构可以更好地完善培训模式、规范培训项目开发和管理流程,提高培训的针对性和实效性,并为以后的教育培训工作提供了更多的决策依据。
(一)培训效果评估理念缺失。中国共产党历来重视干部教育培训工作。党的十六大以来,随着“两个大规模”战略的提出,干部教育培训工作开展得如火如荼,但是干部教育培训的效果评估一直落后于干部教育实践,其关键原因是人们对效果评估的重要性还认识不到位,干部教育培训工作缺乏相应的教育评估理论作指导。当前,一些干部教育培训机构或主管部门,只注重培训规模而忽视培训质量,把注意力放在每年完成了多少培训任务,至于每期培训班的效果如何则很少问津。虽然从2011年开始,中组部开始对“一校五院”的教学情况开始进行评估,在此影响下,一些兄弟培训机构也加大了教学评估的工作力度,但总体上说力度还是不够的。虽然,有时干部教育主管部门会对培训机构的办学条件进行检查,或对某期培训班的教学质量进行抽检,但这并不等同于外部评估。虽然培训机构以考试或论文的方式对学员进行考核,这也不等同于对学员学习效果的评估。这些评估只是培训效果评估工作中的一个环节或一种方法,评估的深度和广度还远远不够。
(二)干部教育评估体系尚未健全。首先,从外部评估体系来看,真正的外部效果评估活动还未真正启动,即使有相关的类似活动,也是停留在检查评比阶段。一是培训机构星罗棋布,但缺少一个自上而下的干部教育培训有机的层级管理系统,各级各类培训机构的上下指导关系、功能定位、培训对象、培训内容界限不清;二是有些干部教育培训机构本身就是组织、人事部门自己办的中心、基地、学校,干部教育的“管”“办”尚未分离,评估主体与评估对象有着千丝万缕的联系,评估主体在评估过程中自觉或不自觉地带有主观意识和偏见,评估结果很难做到科学、客观、公正;三是各级党委组织部门虽然设置了干部教育职能处室,但这些内设机构的最主要职责是负责干部教育培训的日常工作。
其次,从培训内部评估的体制来看,也存在一些不尽合理的地方。如有的培训机构由教学管理部门具体负责教学评估,导致其评估工作没有应有的权威,提出的评估意见和建议没有约束力,最终使评估结果的利用率较低。因为教学管理部门作为培训机构的一个内设处室,由于行政级别低,难以组织专家、同行、领导等评价主体的评价。
(三)培训效果评估指标不健全。客观地讲,效果评估的环节、内容、方式、方法在理论上比较成熟,但在实际操作中还有许多困难,困难之一就是难以制定具有“指挥棒”功能的科学合理的效果评估体系。总体而言,目前干部教育效果评估指标体系中比较成熟和实用的仅是对培训机构办学条件、培训教材、培训师资、教学质量等方面的评估指标体系,评估内容基本停留在反应层和学习层两个较低层次。而在培训需求的满足、培训计划的科学性、受训学员在工作岗位上的行为表现、组织绩效的改变方面还很难制定科学、实用的指标,难以涉及培训效果行为层及结果层的评估,难以避免评估过程中的随意性和主观性,难以对干部教育的效果进行全面地评估,难以得出准确的评估结论。
(四)培训效果评估方法比较单一。目前大多数评估主要依靠考试、论文考核、问卷调查、访谈几种途径,定性评估多于定量评估,评估结果缺少科学的整理分析,评估的有效性不足,对学员参训后的跟踪评估缺乏有效手段。虽然网上评估、网上信箱也在逐步使用,但对那些没有上网习惯的学员来说,网上评估仍是形同虚设。因此,如何创新干部教育评估手段和方法的创新也是干部教育评估工作的一个难题。
(五)评估流程不完整和评估内容片面化。效果评估是一个全过程的、系统的、完整的活动,完整的培训评估环节应包括训前评估(培训项目评价、培训对象需求分析)、训中评估(培训的组织实施、计划执行、学员参与)、训后评估(效果测评,成本绩效分析)三个步骤。但实践操作中,大部分的评估忽略了训前和训后评估两个环节,以教学质量评估代替其它方面的评估。而培训效果的评估最核心的内容恰恰是考察学员参训前后的变化情况。
综上所述,干部教育培训效果评估具有导向、控制、纠偏、总结、诊断等基本功能。但是长期以来,对于干部教育培训的效果评估,一直缺乏科学规范、行之有效的评估形式、方法和手段,在很大程度上影响了干部教育培训质量的提高。因此,借鉴西方发达国家公务员培训的先进理念和经验,创新我国干部教育培训效果评估的方式方法,对党的十八大提出的“加强和改进干部教育培训,提高干部素质和能力”战略的实施有重要的意义。
(一)完善内外评估机制。首先要明确干部教育外部评估责任主体。参照国民教育的一些做法,在全国成立干部教育机构评估工作委员会,下设办公室(类似教育部的教育督导团),负责指导、协调、监督全国干部教育培训效果评估工作,并牵头组织对国家级干部教育培训机构、省级党校和行政学院、中央和国家机关部委及人民团体所属的干部教育培训机构进行评估。中央国家机关和各省区市成立相应的评估机构,负责下属的培训机构进行评估。其次,完善干部教育培训机构内部评估体系,改变目前内部教学质量评估机构的“三无”(无威、无位、无为)现状,成立由主管教学的副校(院)长直接主管的教学督导处室,组建一支教授、领导、普通教师、管理人员组成的教学质量评估队伍。
(二)构建科学的效果评估标准。《2013—2017年全国干部教育培训规划》要求:“结合不同培训项目特点,合理设置评估标准,把培训需求适配度、课程设计科学性、师资选配合理性、教学内容满意度、教学方法有效性、教学组织有序性、学风校风良好度以及培训对干部能力素养提高的帮助程度等,作为质量评估的主要内容,努力探索科学的项目质量评估办法。”根据这一要求,充分考虑各级各类干部的特点及干部所处地域的区别,把定量评估与定性评估结合起来,制订科学合理的效果评估体系。对学员的培训效果进行综合考核评估,将学员的培训考核与学员已有的知识基础、以前在工作中的表现和培训过程中的表现、培训后工作绩效发生的变化等联系起来,着重评估干部理论联系实际的情况,把考核重点放在学以致用上。
在坚持上述基本原则的基础上,进一步细化效果评估指标体系。如外部评估必须突出:办学的政治方向、办学行为的规范情况;学员对课程设置、教学效果的满意度;学员素质、能力变化情况;师资队伍建设情况;教学科研情况;班子建设情况;硬件建设情况;经费保障。内部评估必须突出:培训项目的设计、培训需求的调研情况;课程设置、培训安排情况;教学水平、教学态度、教学组织情况;教学保障情况。
(三)完善评估程序。在继续做好训中评估的基础上,逐步完善训前评估和训后评估两个重要环节,尽管这“两头”评估实施过起来困难重重,付出的时间成本也可能较大,但这是不可或缺的。按照先易后难、逐步推进的原则,当前应加大以下评估:一是对参训学员潜质评估,根据其能力素质结构,有计划地安排其参加相应培训;二是把培训需求调研做实做精,充分了解干部教育培训的组织需求、岗位需求及个人需求,为跟踪评估做些基础工作;三是抽样跟踪评估,以部分学员为样本,在适当时候对他们及其领导、同事进行走访,通过360度评估法了解学员参训后能力、素质、绩效、工作态度的变化情况,以此了解整个培训情况。
(四)创新评估手段。除采用传统的学员座谈、问卷调查、专家评定等方法外,还要根据干部的评估心理,借鉴西方国家的评估经验,从实际出发创新评估方法和手段。如在评估理念上引入绩效评估理论,测算出不同培训类别规模、质量、效益三者之间的关系。在方法上把全面检查与局部抽查、日常检查与专项检查结合起来,实现多样化、多角度评估。
(五)提高评估结果的利用率。一是要尽快建立学员培训效果与其晋级晋职、奖惩的联动机制,激发学员的学习积极性,提升学习能力。在相关规定没有出台以前,培训机构应把学员学习期间的表现情况和考核情况抄报学员所在单位。二是外部评估结果可以向社会公布,以方便干部选学需要,加大培训机构之间的竞争力度。三是建立激励约束制度。效果评估结果应作为培训机构的主管部门奖励、扶助、惩处所属培训机构的重要依据,对培训效果较好的机构,可以在任务分配、资金划拨、科研立项等方面给予照顾。四是充分发挥效果评估调控的功能。在评估过程中,对发现的问题要责令被评估者采取补救措施整改,及时对培训工作进行纠偏补救,不能等到培训结束再去放“马后炮”。