研究生教育教学改革项目投入产出效率研究——以江苏省为例

尤莉娟，高田钦

(江苏师范大学 a.人文社会科学研究院；b.教育科学学院，江苏 徐州 221116)

2020年召开的全国研究生教育会议明确指出，深化研究生培养模式改革，着力培养研究生的实践创新能力是研究生教育教学改革的重中之重。为深入推进研究生教育教学改革，我国各级研究生教育主管部门和有关高校都通过设立专门研究课题，委托或立项开展围绕研究生教育教学改革的相关研究，促进研究生教育教学质量全面提升。如，江苏省教育厅已连续多年设立专项课题引导研究生导师、教育与管理人员就研究生教育教学改革重点难点问题，开展理论与实践研究。就全国范围来看，课题研究已成为促进研究生教育教学改革的重要途径之一。本文以江苏省2016—2018三年课题立项与课题研究成果产出情况为对象，分析研究生教育教学研究投入产出，开展效率评价，提出对策建议，为进一步明确研究生教育教学改革研究方向、优化课题组织管理、提升成果产出质量与影响力提供决策依据。

一、国内外研究综述

国外教育评价研究开展相对较早并形成较为成熟的评价体系。自美国教育家泰勒提出教育评价概念[1]以来，美国从20世纪50年代起致力于教育投入产出研究，形成了非官方独立高等教育质量评价认证体系；英国、法国等国家也在实践摸索中形成了较为完善的高等教育评价制度。[2]特别是随着国外大学教育规模的不断扩大，强调教育效率的教育评价方法不断得到完善优化。作为教育评价的重要组成，不同数据口径的投入产出分析是国内外学者分层分类开展研究生教育效率评价的重要来源与依据。比如，曲虹等依托教育部直属高校基本情况统计开展16所高校研究生教育投入产出效率评价[3]，彭莉君等基于5年面板数据开展部属高校研究生教育投入产出效率分析[4]，CN Ying等分析了84所中国重点大学教育效率[5]，谢友才等对66所大学研究生教育效率开展定量分析[6]。

开展研究生教育教学投入产出效率分析的归因是教育资源配置及其利用成效是否发挥到最大化或理想化，随着发展需求的不断变化，研究生教育教学改革的侧重点也在不断优化。比如，国外研究生教育教学方式向着重视交流合作与实践创新、开放教学活动、倡导教学信息化转变[7]；国内学者围绕研究生教育教学改革需要开展了不同研究视角的系统探讨，优化学科设置与提升创新实践能力是研究的焦点。比如：刘小强等建议通过赋权分散教育管理集中化，创新彰显研究生教育与学科特色的二级学科设置；[8]李忠建议研究生教育教学不能痴迷于规则性知识传授，要尝试接受不确定性知识，加大研究生创造性思维和创新能力培养[9]；宋力等提出理论知识和理性经验是发现和解决实际问题，拓展前沿专业空间、推进专业实践的科学力量[10]；邵光华等认为应通过理论课程实践化、实践课程结构化、实践基地平台化来提升研究生实践创新能力[11]。

围绕不同研究主旨，开展研究生教育教学效率评价的研究方法选择不尽相同。比如：廖文武等选择层次分析法、对比法等进行研究生教育教学系统分析研究[12],汪雅霜等利用IEO模型开展研究生学习成果评价实证研究[13]，罗杭等利用DEA模型评价“985”高校研究生培养效率[14]，李祖超等利用主成分分析法对研究生科研能力提升微环境进行了模糊综合评判[15]。结合不同研究目标、利用不同研究方法的评价分析，有学者强调开展研究生教育教学效率评价应重视和加强第三方的监督与评价。比如：兰珍莉认为针对研究生教学质量改进与资源配置各阶段、各环节的质量监控有实施必要性[16]，张伟认为从第三方视角开展研究生教育质量评价更加客观公正[17]。

综上，学者围绕研究生教育教学效率评价已形成不同研究视角的系列成果，涵盖学科建设、改革重点、分析方法、过程监管等，但研究生教育投入产出效率研究主要集中在以高校为单位，且研究要素主要为师生基本情况、各类资源配置等面板数据，以研究课题立项为主要对象的研究生教育教学改革效率研究尚无较为全面深入的分析思考。鉴于此，本研究以省级教育行政部门课题立项情况为考察对象，结合课题实施规模大与教师参与度高的实际情况，尝试开展研究生教育教学改革研究投入产出效率分析与评价。

二、研究对象与方法

(一)研究对象基本情况

以江苏省研究生教育教学改革课题为例，开展研究生教育教学改革研究效率评价实证分析。课题主管部门为江苏省教育厅，设立课题的宗旨是通过目标明确的研究，发现问题、分析问题，进而针对研究生教育教学开展创新性理论与实践研究，不断开拓研究生教育教学视野理念、提升理论与实践教学水平，为深化研究生教育创新改革发展提供支撑服务。课题分为重大(委托)、重点和一般三种类别，资助金额分别为5万、2万和1万。江苏省教育厅网站(http://jyt.jiangsu.gov.cn/)于2019年、2020年先后发布2016—2018年、2017—2019年立项未结题研究生教育教学改革研究与实践课题结题通知，由此得出，课题研究周期最长为3年。以江苏省2018年立项的36所普通高校为研究个体，依据省教育厅网站公布的相关信息以及《江苏省研究生教育质量年度报告》(2017—2019)，统计出2016—2018三年江苏省研究生教育教学改革课题整体立项与高校立项情况，具体如表1所示。

表1 2016—2018年江苏省研究生教育教学改革课题立项情况统计表

“双一流”建设高校在研究生教育教学改革重大问题研究上发挥着重要作用，2016—2018三年立项研究或委托研究占比前十位的高校中，“双一流”建设高校达到90%，南京大学以超出第二位66.65%的占比，成为研究生教育教学改革重大问题研究的主力。

统计2016—2018三年课题结题等级，因2017年结题课题仅有五项优秀，对比2016年和2018年优秀占比排前五位的高校，不难发现“双一流”建设高校越来越重视研究生教育教学研究投入，更加重视研究成效，在2016年无一排入前五名的情况下，2017年占到80%、2018年占到60%。南京大学作为江苏省综合实力排在前茅的高校，在2016年无结题优秀的情况下，2017年优秀占比位列第二位、2018年跃居第一位。结题优秀占比前五位的高校具体情况如表2所示。

表2 2016—2018三年江苏省研究生教育教学改革课题结题优秀统计表

(二)研究对象论文成果产出情况

论文成果是最为常见的研究成果形式，在“推行代表性成果评价，探索长周期评价”[18]背景下，依托期刊影响力仍是研究成果评价的主要依据之一[19]，科研成果分析既包含“质”又包含“量”，论文产出质量与数量并非完全对立[20-21]。在统计有课题编号标注论文总发文量的同时，综合考虑CSSCI通过定量与定性分析结合、遴选学术性强且质量高期刊作为来源期刊的基本特点[22]，以及社会科学“三大文摘”原发刊为CSSCI最低72.52%占比[23-24]、入选CSSCI期刊数不到期刊总数14%的实际情况[25]，用有课题编号标注的CSSCI发文数量作为另一项研究成果产出证明，进一步体现研究论文成果产出质量。

1.基本信息

根据课题结题要求所规定的发表研究成果必须标注“江苏省研究生教育教学改革课题”，以“江苏省研究生教育教学”为关键词在中国社会科学研究评价中心数据库、中国知网模糊检索有课题编号标注论文成果，经过二次筛选，剔除无关数据，统计出2016—2021年6年间有课题编号标注论文成果总数量以及CSSCI发文数量。具体信息如表3所示。

表3 2016—2018三年有课题编号标注论文发表情况统计表

将三年立项课题论文成果按发表年份统计，具体情况如表4所示。

表4 2016—2021六年立项课题论文成果产出情况统计表

2.数据分析

通过表3得出，2016—2018三年课题在立项当年均有论文成果产出，将立项当年设为第一年，以此类推，达到结题年限时为研究进行第四年，通过检索数据库发现，有少部分课题在结题后仍继续有研究论文成果产出，但篇数较少。将有课题编号标注论文成果总量与CSSCI论文数量产出情况进一步分析发现，两类论文产出具有图1、图2基本趋势。

从图1、图2不难看出，无论是总发文量还是CSSCI发文量从立项第二年出现峰值，2016年立项课题较后两年立项课题在第二年发文量达到峰值后有所回落的情况不尽相同，在立项第二年成果数量明显提升后，第三年继续上升出现整个研究进程的峰值，这一现象也一定程度上反映出课题研究的安排更加紧凑。立项第四年即研究周期满三年、达到结题时限的课题，论文成果产出数量明显下降，与课题管理规定的研究时限基本相符。

图1 2016—2018年立项课题论文发表情况趋势图

图2 2016—2018年立项课题CSSCI论文发表情况趋势图

已全部完成结题审核的2016年立项课题累计产出论文成果243篇，立项第三年发文占比44.03%、第二年发文占比33.74%，两年发文总占比为77.77%。CSSCI发文趋势类似，42篇有2016年课题编号标注的CSSCI论文中，第二年、第三年发表数量分别占到35.71%、45.24%，两年发文量占到CSSCI发文总量的80.95%。已达到规定结题时限的2017年、2018年立项课题发文占比具体情况如表5所示。通过数据库检索同时发现，2016年有课题编号标注CSSCI发文量的68.18%为2015年立项课题，也印证了第二年起为论文成果产出高峰这一初步结论。

表5 2016—2018三年立项课题不同年份发表论文占比情况统计表

从表5可以看出，研究论文成果产出提升明显。一是立项当年成果产出数量明显提升，2018年立项当年论文成果产出总量与CSSCI发文量较2016年、2017年立项当年发文情况明显提升；二是项均论文成果篇数有明显提升，无论是总的论文成果项均篇数还是CSSCI论文项均篇数，2018年立项课题较前两年有明显提升。历年项均篇数基本情况如表6所示。

表6 2016—2018年立项课题论文发表项均篇数统计表

统计发现，博士点高校CSSCI发文量占比高，CSSCI发文量占比排在前十位的高校中，拥有博士点高校占到100%，科研实力与能力凸显。在立项当年有博士点建设任务或发展目标的高校，更加重视论文质量，诸如常州大学、南京财经大学等CSSCI发文量占比明显靠前。

(三)研究模型选择与变量设置

1.分析模型选择

DEA模型适用于相同类型、不需要验证投入产出关联性的效率评估，较好地克服了主观设置权重不足，能够充分得出决策单元的最优投入产出。[26]选择DEA模型分析法测算研究生教育教学改革研究效率，传统的CCR模型假设规模报酬不变，通过线性规划，将多个DMU中最有效率的边界定义为技术前沿面，评价其他决策单元的相对有效性与实际发展情况存在明显缺陷与差异，为弥补此类不足，Banker等人在假设规模报酬可变的基础上构建了BCC模型，并将技术效率TE分解为纯技术效率PE与规模效率SE。[27-28]但CCR与BCC模型均为径向DEA模型，只关注无效率DMU投入与产出的等比例改进，Tone Kaoru在2001年提出了SBM模型[29]，即无效率DMU可通过松弛改进到达目标值，但在DEA模型分析中，若出现多个DMU效率值均为1，则无法再进一步区分效率高低。这种情况下，Andersen和Petersen在1993年提出了超效率模型[30]，可以将DMU的效率值有效区分。因此，本次分析采用超效率模型与SBM模型相结合的方法，对DMU的效率值进行测算，简写为Super-SBM模型，该模型表示如下：

(5)j=1,2,…,n(j≠k)

为研究动态变化，在Super-SBM模型基础上使用Malmquist指数，利用面板数据测算出研究生教育教学改革研究效率变化，得出效率变化EC与技术进步TC对Malmquist综合发展指数变动的影响，该方法多用于对全要素生产率(TFP)的变化分析，通常用相邻时期技术效率比值构造指数。某个决策单元t时期到t+1时期的Malmquist指数：

(1)

2.指标变量设置

综合考虑课题研究投入产出实际，投入变量主要包括当年立项总数、课题负责人职称以及课题研究参与人数等三类。“当年立项总数”主要包括重大(委托)课题数、重点课题数以及一般课题数，“当年课题负责人职称”主要包括正高、副高及中级，“当年课题研究参与人数”按照公开发表成果署名人数进行统计。产出变量主要包括有课题编号标注的论文总发文量以及CSSCI论文发文量、研究成果获奖情况、结题等级等四类。这其中“研究成果获奖”主要分为国家级、省部级以及其他三种类型，“结题等级”主要为优秀、合格、不合格。

投入变量和产出变量的数值有较好的区分度，才能使效率分析结果更具合理性与科学性。因此在变量取值上，结合综合因素对部分投入变量和产出变量赋值。在投入变量中，“当年立项总数”的取值以课题的批准经费代替，例如，重大课题经费为5万元，赋值为5，重点课题和一般课题取值以此类推。“当年课题负责人职称”的赋值，将中级职称赋值为1，结合课题批准经费设置以及课题负责人职称占比，调研高校中级、副高和正高职称人数比例与职称评聘要求，综合各方因素将副高职称赋值为2、正高职称赋值为5。“当年课题参与人”主要依托公开发表论文成果署名人数，一方面是由于课题申报书中计划的参与人数难以获得，另一方面是发表成果署名人员为课题实际研究推进人这一事实。结合结题要求，参考江苏省高校哲学社会科学课题结题标准，将发表1篇有课题编号标注CSSCI论文赋值为2，发表1篇其他论文赋值为1。“研究成果获奖”赋值综合考虑不同高校对各类成果奖的考核评价与认定计分，包括奖项的实际影响力，将国家级、省部级、市厅级和未获奖赋值为5、2、1和0。“结题等级”对优秀、合格、不合格的课题分别赋值5、2、0，考虑结题周期性与不合格占比极小的实际问题，将个别暂未有结题信息课题赋值为1以示区分。具体指标与赋值情况如表7所示。

表7 研究生教育教学改革研究投入产出指标与赋值情况统计表

三、数据分析比较

(一)效率得分与比较

因为使用Super-SBM模型不能出现投入产出数据有“0”的情况，分析2016—2018三年立项课题研究生教育教学改革研究投入产出情况时，需要将投入产出变量中的“0”，在不影响分析结果的前提下，修改为“0.00001”以便数据分析，这就需要结合初期导入数据对结果数据进行有效性筛选，主要筛选依据是四个产出变量的数量均不为“0”。经过二次筛选分析可以看出，引入非导向超效率SBM模型的必要性，2016—2018三年的排在前十位高校的超效率值均在1～2之间，除排在第一位的高校外，第二到十位的高校超效率值差距不大，特别是后五位的效率值变化不大，这说明排名靠前的高校研究生教育教学研究效率较接近。具体如表8所示。

表8 2016—2018三年研究生教育教学改革超效率静态分析统计表

通过36所高校2016—2018三年研究生教育教学改革超效率静态分析排名发现，拥有博士点高校的研究效率较高，排在前十位的平均占比超过50%，南京大学连续三年超效率值均排进前十位；南京体育学院、南京工程学院、淮阴师范学院三所高校连续三年超效率值均排进前十位，证明学校在研究生教育教学改革研究投入产出的重视程度高。

(二)指数因素分析与比较

表9 两个时间段研究生教育教学改革研究评价指标统计表

1.基本情况分析

省属高校在研究生教育教学改革方面重视较高。一是研究综合指标值高：排名前十位高校中，省属高校数2016—2017时间段占70%、2017—2018时间段占80%；特别是排名前五位高校中，省属高校2016—2017时间段占到60%，而2017—2018时间段占到100%。二是更加重视研究人才投入：结合课题负责人职称信息统计，2016—2018三年立项课题的负责人正高职称占比排在前十位的高校中，有80%为省属高校。

2.影响因素分析

(1)导师队伍的不断扩大是影响技术进步指标的因素之一。根据《江苏省研究生教育质量年度报告》(2017—2019)统计的导师信息，86.11%的高校导师数呈逐年增加态势，增加幅度平均在8%左右，通过计算，两个研究时间段的导师增加率平均达到了7.92%。

(2)课题立项数量的大幅度增加一定程度上影响了技术进步。根据统计报表，2016年高校共立项研究生教育教学改革课题221项、2017年为207项，虽然立项数下降了6.33%，但2018年立项数提升到263项，较2017年增长了27.05%，课题立项数量大幅提升成为TC变化大的另一个重要因素。

(3)课题研究效率提升是影响技术进步指数变化的主要因素。仅论文这一研究成果而言，项均论文篇数按照平均每年5.85%的速度增长，一定程度上能够代表研究质量的CSSCI论文，2018年立项课题的项均篇数较2017年增长了50%，无论从论文数量还是质量看，研究效率均提升显著。

四、对策建议

综合以上分析可以看出，研究生教育改革项目投入产出情况与资源利用、组织管理以及目标要求等因素有关，为了进一步提高课题投入产出效率，特提出以下几点建议：

1.要充分利用优质科研资源提升重大(委托)课题研究成效。“双一流”建设高校、教育教学研究综合实力强的高校拥有丰富的科研资源，应加大重点(委托)课题的人财物投入，重视研究目标的达成度，着力解决研究生教育教学实施与改革中的难题；要深入思考符合时代发展需求的研究生教育管理创新问题，拓展推进研究生教育教学改革的导向性思路，多产出具有引领性、先进性和应用性的研究成果。

2.主管部门与项目实施单位应要优化课题组织管理，抓住立项第二年的研究管理引导。分析已表明，立项第二年的成果产出特别是以论文为产出形式的研究成果在整个研究周期内呈快速提升且基本达到峰值的态势，结合管理规定的研究时限，立项第二年亦为研究中期，因此，无论是从提升研究质量还是把握研究进程来看，第二年是研究关键期，需要相关管理部门加强督促引导，通过适时开展中期检查、专家反馈等方式推进研究绩效提升。

3.重视能够有效支撑学科建设、具有一定影响力的高质量成果产出。根据以上统计分析，研究生教育教学改革研究以论文为呈现方式的成果中，能够代表一定研究质量的CSSCI论文产出占比不足20%，研究成果获奖更是偏少，虽然2018年起江苏省教育厅开展了“江苏省研究生教育改革成果评选”，但从国家和省教育教学成果奖评选结果来看，研究生教育教学改革研究质量仍需提升，对此，可通过进一步明确与提升结题要求予以促进。