基于层次分析法的职业教育评价指标体系建立与优化

［摘           要］  基于职业教育的本质和特征，以职业教育评价理论为指导，分析高等职业教育发展要素，确立高等职业教育评价指标体系的构建与实施标准，以及提出我国高等职业教育评价改革的对策，以期能够促进我国高等职业教育评价突破当前发展瓶颈，回归到科学、理性，进而推进我国高等职业教育评价改革，提高其评价综合治理水平。

［关    键   词］  职业教育；教育评价；评价指标体系

［中图分类号］  G717                    ［文献标志码］  A                  ［文章编号］  2096-0603（2023）28-0017-04

①基金项目：河南省教育科学“十四五”规划2021年度一般课题（项目编号：2021YB0612）。

作者簡介：刘静（1984—），女，汉族，山东聊城人，硕士研究生，副教授，研究方向：职业教育、电力市场营销。

职业教育评价是在一定的教育价值观的指导下，依据确立的职业教育目标，通过一定的技术和方法，对所实施的各种职业教育活动、教育过程和教育结果进行科学判定的过程。通过对评价对象、目的、内容与方法四个要素的选择和组合，形成不同的教育评价模式。教育评价是教育实践的重要组成部分，同时对于教育实践具有显著的导向作用。

本文立足推动高等职业教育评价改革，促进高等职业教育高质量发展，保证高等职业教育评价的全面性、科学性，进一步完善评价指标的内涵及实施标准。在制定高等职业教育评价指标体系的过程中，既要提炼以往理论的精髓，又要兼顾实践结果，依据定性和定量相结合的方式，从影响高等职业教育发展的五个方面入手，即教育环境、发展水平、投入水平、师资水平、教育质量，生成符合育人和育才双向要求的评价指标体系的建设标准。本研究立足高等职业教育评价改革要求，以高等职业教育发展水平为评价对象，但考虑到高等职业教育涉及多个因素，内容极为广泛，需明晰评价对象。在横向范围上，界定高等职业教育的内涵，以河南职业教育为例。在纵向范围上，重视对河南职业教育发展现状的评价，体现改革评价指标体系的重要性和必要性。

一、评价指标体系设计的思路

建构高等职业教育评价指标体系，需要以完善的评价理论作为支撑，本研究对照国务院下发的《深化新时代教育评价改革总体方案》中的具体要求，借鉴当前较为权威的评价模式作指标体系建构的基础框架。特别是以背景评价、投入评价、过程评价、成果评价反映体系的完整性，始终以立德树人作为培养人才的中心，为评价的根本标准，在评价指标体系建构教育环境、发展水平、投入水平、师资水平及教育水平五大一级指标，精细化出若干个二级指标。通过对高等职业教育的功能、内涵与特征的提炼，结合职业教育现代化、职业教育改革与发展需要等内容，汲取其他学者提出的评价指标体系建设思想和方法的优点，构建本研究的评价指标体系，以突出高等职业教育评价的育人性、育才性和育能性。按照前文的论述，影响我国高等职业教育发展水平主要有以下五个方面：一是教育环境，包括政策环境因素、技能大赛环境因素，二者能够直观反映政府对高等职业教育的重视度，以及学校对立德树人的理解程度。二是发展水平，包括教育规模，民办职业教育规模、行业企业办学规模等。这些要素都能直观反映我国高等职业教育发展程度，可以为高等职业教育实施立德树人提供依据。三是投入水平，包括教育支出、基础设施投入。投入水平直接决定高等职业院校办学发展水平，亦是影响高等职业院校落实立德树人的重要条件。四是师资水平，包括教师队伍综合素质、教师能力成长等。五是教育质量，包括教师教学能力、教学观念、教学目标、教学内容、教学方法、教学手段等，直观体现高等职业教育人才培养效果。

二、高等职业教育评价指标体系的确立

（一）初步确立评价指标体系

综合考虑河南职业教育发展的特点和河南职业教育发展现状，以及破除“唯分数、唯升学、唯文凭、唯论文、唯帽子”顽疾，坚持积极、稳慎、务实改进结果评价，强化过程评价，探索增值评价，健全综合评价的要求，选定具体的评价指标，一方面确立立德树人的实施主线，另一方面便于提高测评质效性，根据实际情况生成部分新的指标。

指标的权重是每项指标在评价中不同程度的反映，其科学性直接影响评价结果。考虑到权重分配是否合理的情况，采用专家意见平均法，将所设立的指标划分为合理、较合理、不合理三个等级。对于不合理的指标予以剔除。

（二）基于层次分析法计算职业教育评价指标体系权重

1.层次分析法

层次分析法是一种多目标决策分析方法。分析时通常将与决策有关的元素分解为目标层、准则层、指标层等层次。在此基础上，进行定性和定量分析，确定各层次每个指标的相对重要性，形成判断矩阵，再求解每个判断矩阵内各指标的权重，适用于结构复杂、决策准则较多且不易量化的决策问题。根据职业教育评价指标体系的层次结构模型形成权重调查问卷，选取教育管理部门专家、教育评价研究专家、一线教师及学生代表，以匿名的形式对不同指标的重要程度进行打分，构造出相应的判断矩阵，并通过计算一致性比例（CR）对判断矩阵进行一致性检验，当CR ＜ 0.10时，符合一致性检验要求。

最终收回有效问卷179份，以调查对象G1为例，对每个层次指标进行层次单排序及一致性检验。职业教育评价能力（S）与其一级指标：教育环境（A）、发展水平（B）、投入水平（C）、师资水平（D）、教育质量（E）的判断矩阵及计算结果CR为0.081984548。

发展水平（B）与其二级指标（B1—B3）的判断矩阵及计算结果CR为0.070668976。以同样方法计算出其他二级指标——教育环境（B）、投入水平（C）、师资水平（D）、教育质量（E）对应的CR。

三级指标——政策法规理解与落实情况（A1）、举办技能大赛效果（A2）、普职招生比（B1）、普职在校生比（B2）、校均规模（B3）、民间办学（B4）、行业办学（B5）、学校网覆盖率（B6）、多媒体教室比（B7）、信息技术应用率（B8）、教育事业费（C1）、公用经费（C2）、职业教育支出（C3）、生均占地面积（C4）、生均校舍建筑面积（C5）、生均教研仪器投入资金（C6）、生均教学设备投入资金（C7）、生均图书拥有量（C8）、生均计算机拥有量（C9）、专职教师师生比（D1）、专职教师占教职工比例（D2）、双师占教职工比例（D3）、双师生比（D4）、国家级示范学校占比（E1）、职业学校教学比赛成果（E2）、学历达标率（E3）、毕业就业率（E4）、毕业生双证率（E5）对应CR均小于0.10。通过上述计算可知，专家G1的判断矩阵均满足一致性要求，由此得到的权重是可信的。

同理，对剩余178位专家的判断矩阵进行计算。经计算，所有专家的判断矩阵均满足一致性要求。最后，通过对179位专家的计算结果取平均值，即为职业教育评价指标体系的权重，结果见表2。

2.权重分析

从构建的职业教育评价指标体系来看，准则层发展水平、投入水平、教育质量指标为企业综合能力最为重要的因素，权重分别为0.30、0.24和0.21；其次为师资水平和教育环境指标，权重分别为0.17和0.08。

分指标层中，从三级指标的综合权重值来看，综合权重值排名较靠前的指标分别是学历达标率、行业办学、举办技能大赛效果、教育事业经费、职业教育支出等，可列为评价铁路施工企业综合能力的最基本考核指标。

（三）优化评价指标体系

综上所述，通过对各指标的权重分析，可以得出由层次分析法构建出的职业教育评价指标体系合理、科学、适用，验证了层次分析法确定权重的可行性和有效性。

（四）相关指标的解释说明

1.“教育环境”指标的内涵

教育环境是指影响职业教育发展的外部环境因素，其对于职业院校能否高效落实立德树人的教育要求产生较大的影响。考虑到外界环境对教育的支撑程度，将此项列为一级指标。本研究在“教育环境”内容上选取了政策环境、大赛环境2个二级指标。

高等职业院校所处的政策环境，直接影响其落实立德树人教育要求的重视程度。比如，高等职业院校能否认真贯彻职教法要求、能否严格按照政府及相关部门提出职业教育评价改革的要求等，都在很大程度上影响高等职业院校教育发展水平。

技能大赛平台的数量和举办大赛活动的规模，一方面能反映当地政府对高等职业教育的关注度；另一方面也体现了师生在大赛中的技能发展水平，亦是体现立德树人的一个方面。

2.“发展水平”指标的内涵

发展水平是指职业教育的各项资源在配置利用中发挥的作用，对其教育工作质效性的提高能产生直观的影响。本研究在“发展水平”内容上选取了规模结果、多元化办学、信息化3个二级指标。

规模结构指标主要考察的是高职院校规模在中等和高职教育规模所占的比例。包括普职招生比例和普职在校生比例，普职招生比例反映的是高等职业教育的发展规模，是衡量职业教育事业发展水平的重要指标。普职在校生比反映的是职业学校与高等教育在校生人数指标，亦是衡量高等职业教育发展水平的重要指标。

办学多元化指标反映的是职业院校的发展模式，包含民间办学和行业办学两类。

信息化指标体现的是高等职业教育现代化水平，能够从技术层面反映高等职业院校教育教学的先进性，包括校园网覆盖率、网络多媒体教室等。

3.“投入水平”指标的内涵

投入水平是指教育经费投入和基础建设实施投入两个方面，是高等职业院校实施立德树人的根本保障。本研究在“投入水平”内容上选取教育经费、基础设施投入2个二级指标。

教育经费指标主要包括教育事业费、职业教育经费投入比重、高等职业教育办学经费，反映的是高等职业教育的经济实力水平。基础设施投入主要包括校园占地面积、生均校舍建筑面积、生均教学仪器设备资金、生均图书拥有量、生均计算机拥有量，反映的是学生能否获得良好的教育资源。

4.“师资水平”指标的内涵

师资水平是高等职业院校培养人才的根本性保障，高等职业教育要获得高质量的发展，必须建立一支能够服务学生职业素能、提升专业能力成长的教师队伍，既包括专任教师，也包括兼职教师，还包括“双师型”教师。本研究在“师资水平”内容中提炼师生比、各类教师教职工占比，“双师型”教师比例，高级职称教师比例、兼職教师比例。

5.“教育质量”指标的内涵

教育质量是高等职业院校培养素质高、能力强、品格好的人才的决定性因素，是高等职业教育办学的重要成果。在“教育质量”内容中提炼学校质量、教师质量和学生质量3个二级指标。围绕这3个二级指标设立三级、四级指标，充分体现立德树人的教育要求。

学校质量是高等职业教育实现健康可持续发展的重要保障，依托国家或省级示范校、骨干校所占比例，可以了解地区高等职业院校的发展水平。

教师质量是高等职业院校实施立德树人教育的基础，教师的学历达标率、获得的工作成果，能够直观地反映教师教学的综合水平。

学生质量是高等职业院校推进教育发展的重要目标。学生的毕业就业率、取得双证率，是改进教学和提升教学质量的主要依据。

三、结论

高等職业院校是高等职业教育的办学主体，也是服务国家建设和社会发展的重要力量，在其发展过程中必须摆脱普通教育评价的路径依赖，建立能够体现自身办学特色的学校评价，通过明确办学目标定位，增强服务地方和行业的能力，不断提高办学水平，培养适应社会发展和行业要求的应用型人才。首先，坚持落实立德树人的根本任务，将立德树人成效作为学校评价的根本标准，建构以“思政课程+课程思政+思政文化活动”的大格局，全方位、全过程地培植师生的“劳模精神”和“工匠精神”，将思政教育与技术技能有机统一，生成新的评价指标，以评价指导教育教学工作，推动学生素质和能力的全面发展。其次，健全学校内部质量保证制度。将高等职业院校教学工作的诊断与改进作为重点工作内容，以制度管理的形式提高诊断和改进质量。通过明确人才培养的主体责任，建立常态化的保障机制，设立相对应的评价指标，促进评价从浅层向深层、从稀缺向完善过渡，促进高等职业教育评价质量的提升。同时以分类管理的方式推进职业学校评价体系建设，体现学校评价的功能与特色。最后，立足立德树人的教育要求完善学校评价内容。高等职业教育工作面向的是社会和市场，培育的是有德有才的学生，其评价建构的重点在于德技并修、产教融合、校企合作、育训结合、学生获取职业资格或职业技能等级证书、毕业生就业质量、“双师型”教师队伍建设等，通过合理设置评价指标和科学分配权重，对教师的“教”和学生的“学”的过程进行全方位的评价，确保将立德树人的根本要求落实在具体的评价中。同时完善政府、行业、企业、职业院校等多元参与的质量评价机制，引导行业企业深度参与评价，持续动态地调整和优化人才培养过程。

参考文献：

［1］习近平.论坚持全面深化改革［M］.北京：中央文献出版社，2018：472.

［2］陈宝生.在2019年全国教育工作会议上的讲话［N］.中国教育报，2019-01-31（1）.

［3］构建符合中国实际、具有世界水平的教育评价体系：教育部负责人就《深化新时代教育评价改革总体方案》答记者问［J］.新教育，2021（1）：15-17.

［4］涂端午.教育评价改革的政策推进、问题与建议：政策文本与实践的“对话”［J］.复旦教育论坛，2020（2）：79-85.

［5］龚方红，刘法虎.彰显类型特征的职业教育评价新蓝图：《深化新时代教育评价改革总体方案》解读［J］.国家教育行政学院学报，2020（11）：26-32.

［6］李华威.跨界、整合和重构：职业教育作为类型教育的三大特征：学习《国家职业教育改革实施方案》的体会［J］.中国职业技术教育，2019（7）：93-97.

［7］何方容.高等职业教育评价改革思路［J］.苏州市职业大学学报，2022，33（1）：43-48.

◎编辑 尹 军