赵红卫
绩效评价在高等教育领域的理论自证和实践建构正日趋完善,世界一流大学在高校绩效评价方面始终走在世界前列,多伦多大学作为较早开展绩效评价的世界一流大学,在实践中积累了丰富经验。通过对多伦多大学2016年度绩效评价报告的研究,表明其在指标构建、数据来源、信息发布、以评促建等方面具有鲜明的结构性、权威性、公开性、实践性等显著特征。镜鉴多伦多大学的绩效评价经验,对丰富完善我国高校绩效评价体系,持续推进高校信息公开工作,进一步加快我国“双一流”大学建设和高等教育管办评分离,均具有十分重要的实践价值和现实意义。
高等教育是一个复杂的、多样化的体系,对高校开展绩效评价,不仅存在着合理性的疑虑,尤其需要对用定量指标评价复杂办学活动的应然性反思,而且高校绩效评价要做到非常完美,是十分困难的,或者说是几乎不可能的。[1]尽管如此,从管理主义渗透到高等教育领域的那一刻起,高校绩效评价的理论自证和实践探索从来就没有停止过。从20世纪80年代起,美、英、加、澳等国开始对高校区别对待,探索经费拨款方式和监督教育目标实现的新机制,绩效评价由此进入高等教育政策与实践中。[2]
《国家中长期教育改革和发展规划纲要(2010-2020年)》要求高校“改进管理模式,引入竞争机制,实行绩效评价,进行动态管理”。[3]当前,我国正加快推进一流大学和一流学科建设,实现高等教育内涵式发展,这些均对高校绩效评价提出了更高更迫切的要求。
“他山之石,可以攻玉。”多伦多大学作为较早开展绩效评价的世界一流大学之一,在多年的实践中积累了宝贵经验。镜鉴多伦多大学的绩效评价经验,具有十分重要的实践价值和现实意义。
2017年4月,多伦多大学向社会公开发布2016年度绩效评价报告,指标体系涵盖研究与创新业绩、教学业绩、杰出人物、大学形象、资源与经费等方面,包括5个一级指标、31个二级指标和115个三级指标。[4]
1.排名
(1)大学排名。分别在五大世界高等教育机构中,将多伦多大学与世界一流大学排名相比较,列示加拿大Top15大学和世界Top25大学。
(2)学科排名。根据2016年泰晤士大学学科排名,进入学科排名前5名的加拿大大学共8个学科,多伦多大学有7个学科在国内排名第一,是唯一一所8个学科全部进入泰晤士学科排名前50的加拿大大学。
2.奖项和荣誉
(1)教师奖项。该指标统计出近十年(2006-2015年)多伦多大学教师获得的奖项,这些奖项均为久负盛名的国际和加拿大国家最高奖,共20项。多伦多大学虽仅占加拿大大学教师数量的7%,但在获奖份额中,占有绝对优势(图1-1)。
图1-1 多伦多大学占加拿大大学获奖总数量比例
(2)加拿大首席研究员项目。该项目是由加拿大联邦政府委托联邦三局(Tri-Agencies)——自然科学与工程技术研究理事会(NSERC)、社会科学与人文研究理事会(Social Sciences and Humanities Research Council,SSHRC)、健康研究院(Canada Institutes of Health Research,CIHR)[5]于2000年启动的永久性的国家战略人才项目,是加拿大国内名气最大、国际上具有相当知名度的高层次人才建设平台。[6]截至2015年,多伦多大学获得该项目人数稳居加拿大Top15大学之首。
(3)教师教学奖。该奖项包括加拿大本科教学优秀最高奖(3M奖)和安大略省大学教师协会联盟教学奖(OCUFA Teaching Award)。其中,3M奖自1986年设立以来至2016年间,多伦多大学共有17位教师获得该奖,在加拿大大学中排名第4位,占总数量的5.5%;安大略省大学教师协会联盟教学奖自1973年设立以来,多伦多大学共有62位教师获得该奖,在加拿大大学中排名第1位,占总数量的16.5%。
3.发表论文与引用
从论文数量和被引量看,多伦多大学5年间发表学术论文48,537篇,被引量达638,000次,在加拿大Top15大学中排名第1位,在国际Top40大学中仅低于哈佛大学排名第2位;按五大学科(健康与生命科学、工程与材料科学、自然科学、社会科学、艺术和人文科学)和31个子学科统计,多伦多大学分别与加拿大Top15大学、北美公立大学和北美所有大学比较,清晰反映出多伦多大学各学科所处位置,表明多伦多大学鲜明的多学科优势。
4.研究基金
从政府部门划拨看,多伦多大学2015/2016学年从联邦三局获得研究经费约占联邦三局研究经费总额的15.5%,远超第二位的英属哥伦比亚大学获得比例(9.6%)。自2010年4月到2016年3月,多伦多大学从联邦政府获得的创新基金(CFI)占联邦政府创新基金总额的13.3%,同样远超第二位的英属哥伦比亚大学获取比例(9.4%)。
从私营机构捐赠看,多伦多大学2014/2015学年获得捐赠1亿美元,在加拿大大学中排名第一。考虑到多伦多大学获得的政府研究经费远高于其他大学,因此私营机构捐赠仅占多伦多大学总研究经费的9%,在加拿大大学中排名第11位。
5.创新转化
多伦多大学除鼓励师生申请大学技术经理人协会(Association of University Technology Managers,AUTM)公布的创新披露、许可协议、创业公司、创业计划和方案等校外创新转化项目外;在大学内部亦多措并举,通过开设创业专业、创业孵化器和加速器等创业项目,以及开辟校舍空间开办基于研究的创业公司服务学生创新创业。近年来,多伦多大学各院系开设200多门创新创业课程和项目,仅在2015年就有超过11,000名学生注册学习和体验。
1.就业能力排名
该指标分别以泰晤士和QS世界大学排名机构的大学毕业生就业能力排名为依据,将多伦多大学与国内外一流大学进行比较,多伦多大学在2016年度泰晤士全球大学毕业生就业能力排名中位列第14位;在2017年度QS全球大学毕业生就业能力排名中位列第19位。
2.招生与入学
(1)入学平均分。用于反映大学对高质量学生的吸引能力。与安大略省大学进行比较,多伦多大学对平均85分以上的学生更具吸引力。
(2)课程项目Offer-rate和Yield-rate。该指标分为入学课程(First-Entry Programs)和专业课程(Second-Entry Professional Programs),按各年度和历年累计分别统计两类课程的学生申请数量、学校Offer数量、学生注册数量进行交叉测试。
(3)学生生源Offer-rate和Yield-rate。该指标将课程项目分为专业硕士课程(Professional Masters Programs)、硕士研究生课程(Doctoral-Stream Masters Programs)和博士课程(Doctoral Programs)三类,区分国际生源和国内生源将学生申请课程数量、学校Offer数量、学生注册数量进行交叉测试。
3.学生获奖
该指标奖项均为加拿大国内外久负盛名、声望最高的奖学金项目,获奖难度极高。如本科生奖项共包括TD Scholarship、Rhodes Scholarship、Commonwealth Scholarship和Knox Fellowship等4项奖学金。其中:TD Scholarship每4年评选1次,授予20位在大学社团中做出杰出贡献的学生干部;Rhodes Scholarship每年授予加拿大11名本科生,安大略省每年仅2个名额;Knox Fellowship每年资助15名来自澳大利亚、加拿大、新西兰和英国的学生到哈佛大学进行2年期的研究,限定英国学生占6名。
4.学生体验
(1)生师比。通过全时当量(Full-time Equivalent)转换,反映学生接近教师、与教师交流以及得到学习反馈的程度。
(2)本科生体验。包括保有率和毕业率(Retention and Graduation),基础学年课程(Foundational Year Programs)、教学参与度(Instructional Engagement)和班级规模(Class Size),全国学生参与度调查(National Survey Of Student Engagement,NSSE),实践学习(Experiential Learning)4个二级指标。
(3)研究生体验。包括学位研究生调查(Canadian Graduate and Professional Student Survey,CGPSS),跨学科学习研究(Interdisciplinary Learning and Research),如期毕业(Time to Completion and Graduation)3个二级指标。
(4)国际生体验。该指标统计国际生注册人数,2007/2008学年多伦多大学国际生注册人数为7,380人,占注册学生人数10.1%; 2015/2016学年国际生注册人数上升至15,931人,占18.4%,标志着多伦多大学扩大国际影响的努力取得了显著实效。
5.学生多样性
多伦多大学在NSSE历年调查的非白种人(Non-white)和第一代大学生(Neither Father nor Mother Attended College)2个指标方面的表现均高于加拿大其他大学。多伦多大学意识到,学生能否接受大学教育受社会经济、家庭环境、财务状况、身心障碍等因素的影响,大学应注重并努力吸引不同背景的学生,并为学生提供完成学业需要的支持。
6.无障碍辅助服务
多伦多大学无障碍服务办公室专门为存在精神健康、肢体和感官残疾的学生提供全方位无障碍支持服务,在无障碍服务办公室注册的学生数量可以反映大学成功吸引和支持需要无障碍服务的学生群体, 2006/2007学年注册学生数量为2,201人,2015/2016学年增加到4,901人。
7.学术路径
为帮助学生克服教育背景、语言背景等潜在因素对学生学术路径的不利影响,多伦多大学在本科课程中提供一些接入和支持课程。如过渡年度课程(Transitional Year Program,TYP)为无教育背景的成人提供接受文理学士学位教育的机会;学术跨接课程(Academic Bridging Program)为成年学生提供继续取得人文学院学位的机会;促进迁移课程(Facilitated Transfer Programs)为接受不同层次大学本科教育的学生提供集中式的、个性化的迁移课程服务。
8.在线课程
多伦多大学持续强化该领域的课程开发能力,支持教师对在线学习的设计、开发和教学,支持在线课程的基础设施建设。多伦多大学于2015年6月22日发布校园在线课程网络(Accessible Campus Online Resource Network,ACORN),该系统可以进行实时课程注册、财务和费用结算、学分和注册、更新地址和联系方式等,为学生提供更加便捷、更加个性化的在线课程体验。[7]
9.学生资助
净学费(Net Tuition)。净学费指扣除政府和大学资助后学生实际支付的学费。多伦多大学2014/2015学年本科生生均负担净学费占总学费的51%,全时当量(FTE)本科生生均奖助学金为$2,745,远高于安大略省其他大学的$1,690;博士生均财务资助$28,967,在加拿大Top15大学中居第3位,前2名大学博士生均财务资助额为$34,207和$29,086。
学生入学担保(Student Access Guarantee,SAG)。多伦多大学2015/2016学年实际提供的SAG为$65.7M,远高于政府部门要求的$35.5M;本科生生均担保额度为$5,205,远高于安大略省其他大学。
10.海外项目
为学生提供国际学习体验的海外项目包括学生交换项目(Student Exchange Programs)、出国留学项目(Study Abroad Programs)、国际间工作合作安排(International Work Co-op Placements)、访问学者授课模块等。2015/2016学年多伦多大学参加海外项目国际体验的学生达到1,648人。
1.员工满意度
在2014年度调查中,多伦多大学有79%的雇员感到非常满意和满意,高于加拿大其他公立大学的平均满意度(70%)和美国大学雇员的平均满意度(76%);在平衡私人生活和职业工作满意度方面,多伦多大学有69%的雇员感到非常满意和满意,与2010年调查相比,感到非常满意和满意的雇员比率提高了2%。
2.校友和捐赠人
(1)年度筹资总额(Annual Fund-Raising Achievement Over Time)。2015/2016学年筹资总额达2.33亿美元,截止2016年4月,多伦多大学筹资总额高达19.9亿美元,成为加拿大大学筹资的新标杆。
(2)年度筹资捐赠人占比(Percentage of Funds Raised by Donor Sector)。2015/2016学年筹资额中,校友捐赠占35%,企业捐赠占32.8%,研究资助占15.6%,基金会等组织捐赠占7.8%,其他支持者捐赠占8.7%。
(3)优先筹资占比(Fund-Raising Achievement by Priority)。2015/2016学年筹资额中,课程研究筹资额占32.2%,基础设施筹资额占26.6%,学生项目和财务资助占16.1%,研究资助占15.5%,教工支持占9.6%。
1.研究生扩招
多伦多大学将研究生教育作为大学的一个显著特征,认为研究生教育对实现大学愿景起着重要的决定性作用。2007年以来,多伦多大学学位研究生招录数量实现逐年增长。
2.大学空间
(1)资本化基础设施。安大略省大学理事会(Council of Ontario Universities,COU)每三年编辑大学总空间目录,设定总生成空间(Generate Space)和教学研究平均生成空间(COU Mean)比率。2013/2014学年,多伦多大学只有圣乔治校区的总生成空间比率(89.1%)高于COU平均总生成空间比率(78.6%);圣乔治校区和士嘉宝校区的教学研究生成空间比率(分别为89.1%和84.4%)高于COU平均比率(81.8%);多伦多大学3个校区总的生成空间和教学研究生成空间仍低于COU的标准。
(2)校舍空间利用率。COU要求的校舍空间利用率标准为60%,多伦多大学2016年度正常教学周(10月17日至10月21日)测算的校舍利用率,除小型专题研讨室外,其他4类校舍空间利用率均高于COU标准,反映多伦多大学的校舍超负荷运转状况(图1-2)。
图1-2 多伦多大学2016年度校舍空间利用率
3.递延维修
为缓解大学维修资金负担,安大略省政府自2014年开始将大学设施更新计划(Facilities Renewal Program,FRP)由每年2,600万美元提高到1亿美元,但仍无法满足历年来积累的递延维修工程需求。截至2015年12月,仅多伦多大学未来五年需要维修的设施项目,测算约需资金5.2亿美元。
1.图书馆资源
美国研究型图书馆协会(Association of Research Libraries,ARL)由北美100多家研究型大学图书馆组成,每年基于五个指标尺度公布图书馆资源排名报告。近年来,多伦多大学在ARL排名中始终位于前五名,位列加拿大大学第一名。
2.信息技术投资
该指标是反映大学对教师、职员和学生开展教学和研究支持程度的重要指标。自2003年以来,多伦多大学每年的IT投资额占总支出的比例始终接近4%,2016年度的IT投资额达到最高1.079亿美元,占当年大学总支出的4.0%。
3.经费与财务
(1)行政成本。根据COU报告, 2014/2015财年,多伦多大学行政成本占总运营支出比为4.34%,低于当年安大略省其他大学的平均占比5.34%(图1-3)。
(2)生均捐赠额。该指标采用美国高等教育数据综合系统(Integrated Postsecondary Education Data System,IPEDS)的统计数据。截至2014年4月,多伦多大学生均捐赠额仅为24,792美元,低于许多AAU成员大学的生均捐赠额。
图1-3 多伦多大学历年行政成本占总运营成本比例
(3)债务负担率(Debt Burden Ratio)、财务活力(Viability Ratio)和信息评级(Credit Ratings)。债务负担率是债务本金加利息占总支出的比例,是决定最大债务融资限额的关键财务指标,多伦多大学2016年度债务负担率为3.5%,低于限定的最高债务负担率5%;财务活力是消耗性资源除以负债的倍数,反映现有资金偿还未清偿债务的能力,多伦多大学2016年度综合财务活力为1.6,高于设定的财务活力倍数0.8;根据穆迪投资(Moody’s Investors)、标准普尔(Standard & Poor’s)和多美年债券(Dominion Bond)三家世界著名信用评级服务机构发布的北美大学2016年度信用评级报告,多伦多大学分别获得Aa2(仅次于Aaa和Aa1)、AA+(仅次于AAA)和AA(仅次于AA和AA+)。
(4)生均总收入。据美国大学数据交流协会(Association of American Universities Data Exchange,AAUDE)统计,2014/2015学年多伦多大学生均总收入为29,399美元,远低于美国公立大学生均总收入平均值64,615美元。
多伦多大学绩效评价在指标构建、数据来源、报告发布、结果应用等方面,形成了指标体系完整、数据权威广泛、报告信息公开、注重以评促改等显著特征。
自1998年多伦多大学首次编制绩效评价报告以来,其绩效评价指标体系经过不断建构已趋于科学完善。从2016年的绩效评价指标体系看,其范围已全面涵盖现代大学人才培养、科学研究、社会服务、文化传承创新、国际合作交流等五大基本功能。通过构建整体性、结构化、不同权重的绩效评价指标体系,大大降低了大学作为特殊社会组织开展绩效评价的难度。如:在研究与创新业绩一级指标下,设置创新、商业化和创业二级指标,并从创新披露、许可、课程和创业等三级指标专门评估大学服务社会的创新创业能力;反映人才培养的教学业绩一级指标在指标体系中体量占比最大,分为18个二级指标和68个三级指标,分别占全部指标体系中31个二级指标和115个三级指标的58%和59%,突显出多伦多大学绩效评价对大学人才培养核心工作的重视。
多伦多大学绩效评价数据采集,既有源于加拿大联邦三局等联邦和地方政府机构,又有来自全美大学技术经理人协会(AUTM)、美国大学生保有数据交换联盟(CSRDE)、美国大学联合会(AAU)、美国高等教育数据综合系统(IPEDS)、全国学生参与度调查(NSSE)、加拿大学位研究生调查(CGPSS)、安大略省大学理事会(COU)等30余家世界高等教育专业组织机构,极大增强了绩效评价结果的权威性、广泛性、可比性。我国在推进高校绩效评价中,不仅需要面向世界,积极与国际接轨,广泛采用权威世界高等教育机构和著名国际机构的数据;更要立足国情,注重国内培育,不断增强国内机构开展高等教育绩效评价的能力和水平。
随着信息公开在世界高等教育领域的广泛实施,绩效评价报告公开已成为高校信息公开的重要组成部分,绩效评价报告亦应与财务信息等高校其他信息一样,定期向社会公开发布。自2009年开始,多伦多大学将各年度编制的绩效评价报告作为信息公开和社会问责的一部分,集中公开于大学门户,社会公众可以自由免费获取、阅读、研究、使用。[8]这不仅体现出多伦多大学开展大学绩效评价的实力和对绩效报告公开的充分自信,敢于清醒正视与其他世界一流大学在相关指标方面的差距,不断改进绩效评价中暴露出的薄弱环节和不足之处,而且更加丰富了大学信息公开的框架体系,提升了多伦多大学的社会责任和社会公信力。
绩效评价既要面对历史,对过去事项有清醒的认识和反馈;更要放眼未来,对存在问题进行针对性地矫正和改进。多伦多大学通过绩效评价以评促改、以评促建,体现出鲜明的结果应用取向,注重用绩效评价促进大学制度建设和教学管理改革。如针对NSSE的调查结果,多伦多大学采取了14项改进策略。在师生交流方面,成立由来自各个学科和不同校区的22位指导教师组成的教学咨询组,为学生提供教师经验和教学法交流;在校园环境方面,通过校园数字看板、网络和社会媒体,利用课前和课间时间,向学生传递学校重要信息、辅助课程参与、校风、校园服务等方面信息。
绩效评价既是外部环境问责高等教育的一种主要方式,也是高等教育组织回应外部问责,基于自身特质提高效率的重要手段。[9]因此,绩效评价既可以看作是高校对办学理念的深刻内省,也可以看作是高校对社会问责的必然回应。大学通过绩效评价并向社会发布绩效评价报告,不仅能够提升大学提供高等教育服务的质量和水平,而且能够增强大学接受社会公共问责的信心和能力。
我国大学绩效评价无论在顶层设计还是在实践推进方面,都还处于不断探索完善的阶段。虽然一些机构和大学已经采取了一些实际行动和具体措施,并取得了一定成效,但总体而言,仍未得到权威和广泛认同,亟待借鉴吸收世界一流大学绩效评价的实践经验,加快建立完善既具有中国特色、适合中国国情,又具有世界范式、受国际社会认可的高等教育绩效评价新体系。
注释:
[1]张男星,王春春,姜朝晖.高校绩效评价:实践探索的理论思考[J].教育研究,2015,(6):19-28.
[2]王奇,冯晖,等.高等教育绩效评价研究[M].北京:高等教育出版社,2012:7.
[3]国家中长期教育改革和发展规划纲要(2010—2020年)[J].中国高等教育,2010,(Z3):4-17.
[4]University of Toronto.Performance Indicators for Governance[EB/OL].https://www.utoronto.ca/sites/default/files/PI2016_full_0.pdf.
[5]Western University.Tri-Agency Information[EB/OL].http://www.uwo.ca/finance/research/tri_agency/index.html.
[6]刘莉.加拿大首席研究员计划遴选制度的创新[J].复旦教育论坛,2015,13(5):93-98.
[7]U of T’s student information service.ACORN Help[EB/OL].http://help.acorn.utoronto.ca/.
[8]University of Toronto.Reports and Accountability[EB/OL].https://www.utoronto.ca/about-u-of-t/reports-andaccountability.
[9]郭芳芳,张男星.高等教育绩效评价的需求、内涵与机制[J].高教发展评估,2016,(1):22-32.