专业学位研究生教育实践基地质量评估指标体系研究

景晓娜，黄丽静，杨 玉

（1.辽宁教育学院a.教育大数据管理中心；b.《现代教育管理》编辑部，辽宁 沈阳 110031；2.广西师范大学 教育学部，广西 桂林 541001）

专业学位研究生教育是培养高层次应用型专门人才的主渠道，国家非常重视发展专业学位研究生教育，而教育实践基地是专业学位研究生进行专业实践的主要场所［1］。2015 年，教育部印发了《教育部关于加强专业学位研究生案例教学和联合培养基地建设的意见》（以下简称《意见》），指出教育实践基地是深化专业学位研究生培养模式改革，提高培养质量的重要途经，并强调加强基地建设，推进产学结合，为基地的建设指明了方向［2］。2020 年9 月，教育部等三部门联合印发的《关于加快新时代研究生教育改革发展的意见》［3］和学位委员会印发的《专业学位研究生教育发展方案（2020—2025）》［4］均强调要实施“国家产教融合研究生联合培养基地”建设计划，着力提升实践基地的育人质量。然而，目前我国专业学位研究生教育实践基地缺乏明确统一的评估标准，导致基地质量管理与评估工作往往流于形式，基地创新育人质量效果不佳。构建科学的专业学位研究生教育实践基地已成为专业学位研究生教育发展改革的紧迫任务。

一、专业学位研究生教育实践基地质量评估指标体系构建依据

1.政策依据

建设教育实践基地是深化专业学位研究生培养模式改革，提高培养质量的重要举措。为保障教育实践基地的健康发展，各级政府及各专业学位研究生培养单位出台了一系列政策法规和规章制度来引导基地的建设发展方向。

（1）加大投入，完善基地基础条件。《意见》明确指出，要加大投入，为基地建设提供必要的条件保障；各高校应根据实际与需求，分类制定基地遴选与建设标准；加强基地导师队伍建设，构建“双师型”团队。而根据各省市和各高校的政策制度的具体内容，可将基地基础条件划分为两大方面，即硬件条件和人员配备。

（2）规范建设，健全基地管理机制。《意见》要求健全标准体系，规范基地管理。教育实践基地建设双方应相互合作，共建基地管理体系，完善管理制度。高校是实践基地的核心，要做好本校各级实践基地的规划和建设管理工作，积极推进相关管理工作向实践基地延伸，配合合作单位做好本校进入实践基地的导师和专业学位研究生团队管理工作。而实践基地依托的合作单位是专业学位研究生实践基地的建设与管理主体，应成立专业学位研究生实践基地管理委员会，具体负责制定和落实专业学位研究生实践基地管理办法、合作单位与高校合作计划及实施方案。

（3）严格培养过程，创新培养模式。《意见》强调，要严格人才培养过程，创新培养模式。高校与合作单位应根据社会需求和人才培养目标，坚持创新性原则与时效性原则，共同积极探索多种形式的联合培养机制。充分发挥双方积极性、主动性和创造性，共同建立健全教育实践基地研究生培养合作机制，明确培养方案并制定具体的培养细则，加强对基地培养过程的监督。

（4）深化产学研合作，加强培养效果评估。深化产学研合作，提高专业学位研究生培养质量是基地建设的主要目标。基地要搭建多层次、多渠道相互融合的专业学位研究生培养平台，旨在培养大批熟悉行业实际、了解行业发展前沿动态、具有较强职业实践能力的行业人才。《意见》明确要求针对不同专业学位类别，建立多样化的基地评价体系，定期开展自我评估，重点考核基地人才培养的实际效果。各地及高校基地也要制定合理的各级实践基地评估评价标准，形成多样化的基地评价模式，重点考核实践基地人才培养机制、高校与合作单位招生、培养与就业联动情况和培养专业学位研究生的实际效果。

2.理论依据

CIPP 评价模式是美国学者斯塔弗尔比姆在批判目标评价模式的基础上建立的。CIPP 评价模式包括背景评价、输入评价、过程评价、结果评价。CIPP 评价模式的全程性、全面性特征符合教育实践基地质量评估的系统性要求，同时该评价模式的改进性有利于实现基地质量评估“以评促改”“以评促建”的目标。因此，本文将借鉴CIPP 评级模式理论，从背景、输入、过程、结果四大方面构建评估模型。

（1）教育实践基地质量的背景评价。背景评价是根据社会发展需要和评价对象的需要，在特定的环境下判断是否有条件保证评价目标的实现［5］。因此，教育实践基地的背景评价需要考虑合作单位是否与所培养的研究生专业密切相关，是否具有一定数量的相关专业技术或管理人员担任实践导师，是否具有一定的承载规模和能力，具备专业学位研究生实践所需的基本条件、相关设施及较为规范的管理制度等。

（2）教育实践基地质量的输入评价。输入性评价是在背景评价的基础上，对实现目标所需的条件、资源及各备选方案的相对优点所做的评价［6］。因此，对教育实践基地输入评价需考虑基地是否具有丰富的硬件条件、雄厚的师资力量和管理团队、必要的经费投入、完善的管理机制、科学合理的人才培养方案及教材等。

（3）教育实践基地质量的过程评价。过程评价是在方案实施过程中进行连续不断的监督、检查和反馈，本质上属于形成性评价。教育实践基地质量过程评价是对基地质量的动态性评价，有利于了解基地运行情况及潜在的问题，可为修正方案提供依据与指导。教育实践基地质量的过程评价需考虑基地管理情况，明确基地运行过程是否符合管理制度与要求，是否按照原计划进行；考虑基地人才培养实施方案是否顺利进行，对学生的实践指导是否到位等。

（4）教育实践基地质量的结果评价。结果评价是对目标达到程度所作的评价。教育实践基地质量的结果评价是对基地建设目标达成程度的评价，是对人才培养效果的判断与最终检验。因此，对教育实践基地质量结果评价要考虑研究生学位论文选题来源及其质量；考虑研究生实践成果是否获得社会、有关部门、共建单位认可和采纳，是否帮助共建单位解决或部分解决了业务中的实际问题，或专业实践成果已申请专利、公开发表，是否获得科技竞赛、创新创业活动等相关奖项。同时也需考虑研究生在专业实践结束后是否与共建单位达成了正式就业意向或就业专业对口率基本情况等。

3.事实依据

评估的意义在于“以评促改，以评促建”，对专业学位研究生教育实践基地质量进行评估也是如此，而切合实际的评估指标体系是最大化实现该意义的重要保障。因此，专业学位教育实践基地质量评估指标的选取需依托事实，深入基地进行实地考察。研究团队以基地建设潜在问题和发展诉求，以及基地建设经验为视角，从基地建设基本情况和基地人才培养两大维度出发，对问卷内容与访谈提纲进行设计。其中基地建设基本情况主要包括基地基础条件、资金投入、组织结构、组织制度、运行管理等内容。基地合作培养情况主要包括导师团队、培养方案、培养过程、培养效果等内容。通过对访谈和问卷的结果分析，最终梳理出三级评价指标框架（如表1所示）。

表1 三级评价指标框架

二、专业学位研究生教育实践基地质量评估指标体系构建原则及指标

1.评估指标体系构建原则

专业学位研究生教育实践基地质量评估指标体系的构建应坚持“四统一”原则，即系统性与针对性相统一、过程性与结果性相统一、客观性与主观性相统一、可比性与普适性相统一。

2.指标的确定

本文以CIPP 评估模式为理论指导，以政策要求为导向，以事实为落脚点，构建出专业学位研究生教育实践基地质量评估三级指标体系。该指标体系包括了基地条件等4 个一级指标，导师团队等12 个二级指标，以及实践型导师与学生比例等34个三级指标（具体见表2）。

1.一级指标的确定

以CIPP 评价模式为理论指导，结合政策要求与调研结果，确定了“基地条件、管理机制、人才培养、合作效果”四个一级指标。基地条件，即在人力、物力及财力等方面为基地人才培养所提供的基础保障；管理机制，即基地的结果及其运行机理，确保基地按照一定的规律、秩序正常有序运转；人才培养，即基地合作双方共同规划人才培养方案，完善培养教材，由校内外导师共同指导研究生实践学习以提高人才培养质量；合作效果是基地质量的最直观表现，主要表现为实践基地培养专业学位研究生的实际效果。

2.二、三级指标的确定

（1）在基地条件准则层，设置人员配备、基础设施与资金投入三个二级指标层。一是人员配备，主要包括导师和管理人员两个主体。实践基地实行校内外双导师或双师型导师负责制，应具有充足数量的联合培养导师，原则上联合培养导师数与实践环节学生数比例不小于30%～50%；同时，共建双方分别为基地配备了专职管理人员或协调员，具体负责实践基地日常运行、专业实践教学计划制定与实施、研究生在实践基地期间的管理、高校与企业之间的日常沟通联系等工作。因此，人员配备主要考查实践型导师与学生比例、实践型导师正高职称占比及基地研发团队人数和管理队伍人数。二是基础设备。实践基地应满足实践基地运行的必要条件保障，应拥有服务于研究生专业实践的充足空间和必要的设施，还要有良好的安全保障条件和措施，能合理地解决学生实践期间的餐饮、住宿、交通等生活需求。每年度可接纳的学生数应符合学校要求并且应具备较高的科研学术平台，为研究生实践提供支持。因此，基础设备主要考查基地设施设备等教学条件，同时可接纳的学生规模、省部级以上科研平台和占本校该类型（领域）学生总数的比例等指标。三是资金投入。实践基地的资金投入应满足实践基地运行所需经费，因此，主要考查实践基地单位年均投入经费和学校年均投入经费。

（2）在管理机制准则层，设置规章制度、组织机构与管理运行三个二级指标层。一是规章制度。实践基地制度应设计合理、体制健全，内容覆盖安全保障、指导教师工作制度、实习实践考核和成绩评定、日常管理等各个方面，能体现前瞻性和长远计划，同时制度执行到位，基地日常工作运行顺畅，无重大责任事故或社会影响恶劣的事件发生。因此，规章制度主要考查基地的制度体系建设情况及其执行情况，以及联合培养导师评聘方式和标准完备程度。二是组织机构。实践基地组织框架应层次分明、科学合理，职责分工明晰、人员搭配合理，唯有此才能顺利高效地推进实践基地工作。因此，组织机构指标主要考查基地的机构设置情况及其管理情况。三是管理运行。为促进实践基地工作的正常有序开展，基地共建双方应共商基地建设之事，定期进行交流沟通与总结。而研究生与导师的满意度也是基地管理运行是否顺畅合理的重要体现。因此，管理运行主要考查定期交流情况、实践总结情况及学生和基地导师对基地管理的满意度。

(3)在人才培养的准则层，设置研究生入驻、实践指导与评估考核三个二级指标层。一是研究生入驻。基地接纳的专业实践研究生人数及研究生在基地从事专业实践的有效时间是基地培养人才的重要表现。因此，该指标主要考查研究生在基地的年均实践人数和人均实践时长。二是实践指导。基地联合培养导师应积极参与研究生的录取复试、培养方案的制定、实践教学、学位论文撰写、论文评阅和答辩、实践基地实习的考核和评价等培养环节。培养方案设置应具有特色，课程设置具有实践性和应用性。突破“学科”“专业”课程体系限制，以行业从业需求为导向，设置实践课程模块化。企业联合培养导师应参与实践课程开发、授课、实践教学教材编写。开设的实践课程对研究生实习实践项目起到良好的指导作用。编写或出版专用的实习实践讲义、实践大纲、实践课程教材，并运用到实践教学中。除此之外，导师在指导研究生实践过程中应注意选择适当的方式方法、良好的态度等。因此，实践指导这一指标主要考查实践型导师参与研究生人才培养方案的制定情况、讲案例类课程门数和参与编写教材册数及实践指导情况。三是评估考核。实践基地应定期对研究生实践情况进行考核并在实践结束前对学生实践情况（提交实践总结、毕业论文的完成情况等）进行考核，考核优秀占比情况。因此评估考核指标主要考查基地实践过程考核情况和结果考核情况。

（4）在合作效果准则层，设置学位论文、实践成果与就业情况三个二级指标层。一是学位论文。主要考查研究生学位论文选题来自基地项目比例及学位论文优秀率比例。二是实践结果，主要考查科技竞赛获奖的学生数量及占比、申请专利的学生数量及占比、公开发表论文的学生数量及占比，以及基地导师合作科研项目及其效益、科研成果及其转化。三是就业情况，考查研究生在基地就业比例和研究生就业与行业相关比例。

三、基于层次分析法的专业学位研究生教育实践基地质量评估指标权重的确定

本研究基于层次分析法思想，构建专业学位研究生教育实践基地质量评估指标体系，并确定层次指标要素权重。

（一）建立递阶层次结构

利用层次分析理论对复杂问题进行分析决策，首先需要将问题进行层次化，建立层次结构。前文基于政策依据、理论依据及事实依据已构建出的专业学位研究生教育实践基地质量评估指标体系，把“专业学位研究生教育实践基地质量”这一总目标分解为不同的组成因素，按照各因素间的关联及隶属关系，形成了一个由“4 个一级指标、12 个2 级指标和34个三级指标”构成的多层次分析模型。

（二）建立两两比较的判断矩阵

专业学位研究生教育实践基地质量影响因素复杂多样，其权重难以直接获取，需利用两两比较进行判断，以通过各因素之间的反复比较，获取更多的信息，得出一个比较合理的排序，进而确定各因素的重要程度。本研究将通过问卷收集专家们对各元素间的重要程度进行打分，且打分采用的是1—9 的标度赋值。为避免研究者自身的价值偏好和主观臆断，本研究邀请了20 位专家填写调查问卷。其中高校专业学位研究生导师10 人，实践基地导师6人，实践基地管理者4人，这就使得专家的选择兼顾了多元主体，能够从不同角度对实践基地质量的评估标准进行思考，确保指标权重的科学性和合理性。最终取所获数据的几何平均数，构建要素间两两比较的判断矩阵A＝（aij）n×n（其中，aij为标度，ij分别代表同一层级的不同的两个指标元素，n代表数量）。

1.各因素权重的计算

构建出判断矩阵之后，首先需要根据所得的判断矩阵，计算出每一个判断矩阵的特征值及特征向量，即AW=λmaxW。其中A为判断矩阵，λmax为判断矩阵的最大特征值，W就是相应的特征向量，Wi即为i指标权重值。计算λmax值的具体步骤如下：

首先对判断矩阵的每一列进行正规化（亦称归一化），即bij=，使得每一列元素之和均为1；其次，对归一后新矩阵同一行元素求和算出特征向量，即Vi=；再对特征向量进行V=［V1,V2,…,Vn］T进行正规化处理，即Wi=，这样得到的向量［w1,w2,…,wn］T即为权重向量。最终根据20位专家AHP问卷评分结果，计算出各元素的权重。

2.两两矩阵一致性检验

至此，已计算出各指标所对应的权重值。但专家对因素进行两两比较时有可能会出现自相矛盾的现象。因此，必须进行一致性检验，用以检查和保持专家判断思维过程的一致性［7］，以验证各指标权重的有效性。一致性检验公式为CI=（n为判断矩阵的阶数），一致性比率公式为CR=（RI为随机一致性指标均值）。当CR≤0.1 时，判断矩阵通过一致性检验，反之则未能通过。

通过上一步骤对准则层判断矩阵的计算，已得出其最大特征值λmax=4.1130。因此，一致性指标CI计算如下：

根据判断矩阵为1—9RI值表可知，当n=4 时，RI=0.9。因此判断平均随机一致性比率CR计算如下：

由于CR小于0.10，因此可以认为判断矩阵的构造是合理的。同时，重复上述计算步骤，分别计算出要素层和方案层的CR值分别为：0.0838、0.0072、0.0594、0.0392、0.0218、0.0500、0.0477、0.0972、0.0453、0.0170、0.0238、0.0355、0.0234，均小于0.10。由此可知，专业学位研究生教育实践基地质量评估指标权重具有高度一致性，权重结果具有有效性。

根据表2 中各指标权重结果可看出，A3“人才培养”权重值最高，为37.43%，足以显示基地人才培养方面内容的重要程度。其次是A4“合作效果”，其权重值为22.14%。而A1“基地条件”和A2“管理体制”的权重值分别为20.14%和19.29%，权重值相差不大。由此可知，基地质量的提升需严管人才培养过程，创新培养模式，加强高校与合作单位间的合作，确保人才培养方案的真正落实。而人才培养是否有效，需通过“合作效果”即人才培养效果来体现，因此基地质量考核要注重其人才培养的实际效果。优良的基地条件和完善的管理体制，是基地人才培养的物质保障和制度保障，因此，需制定完善的基地遴选标准，选择具备一定基础条件的单位进行合作，同时共同制定规章制度，规范基地管理。

表2 专业学位研究生教育实践基地质量评估指标体系及各指标权重

表2（续表）

对专业学位教育实践基地质量评估指标体系的构建不应停留于理论层面，而要将其与实践相结合，体现评估指标体系在评估工作中的可操作性与可行性。为此，需要对已构建的专业学位研究生教育基地质量评估指标体系赋予统计意义。可以“1～100”或“1～10”分为标准得分给每项指标打分，并采用线性综合加权法来计算基地质量评估得分，公式为Y=×Xj。Y 值为专业学位研究生教育实践基地质量评估的最终得分，Wj表示第j个指标的标准得分，Xj 表示第j个指标的权重系数。在实际应用中可根据基地实际情况，合理划分分数段，设定基地质量评估等级。等级可划分为优秀、良好、合格和限期整改。

该指标体系的构建具有重要的现实意义。一是为基地质量评估提供了评估标准，推进基地评估工作的真正落实，以全面掌握基地建设现状，实现对基地建设的有效监督。根据评估结果，高校可对实践基地建设管理、运行成绩突出的学院、单位和个人予以表彰，对建设成效不大、不能保证实践教学质量的基地，学校应要求予以整改，整改不合格的，可予以撤销，最终实现以评促建，以评促改的评估目标。需要说明的是，在具体应用中，各专业各学科可结合自身实际情况，在该指标体系的基础上进行适当的修订，制定更具针对性的评估指标体系。二是为基地建设提供方向与依据。高校与合作单位可根据评估指标具体内容，在现有的生产经营实践场所、高素质员工队伍、专业的生产实践经验等资源基础上，为实践基地开辟出专业化的学习实践场所、本领过硬的授课师傅、配套化的生产学习设备等［8］，明确基地建设努力方向，推动基地高质量发展，提升基地人才培养质量。