基于AACSB认证中AOL标准的学习效果评量机制设计

曹海涛 魏勤

［摘           要］  以AACSB国际认证中的AOL标准为基准，设计经管学院研究生学习效果的评量机制。同时，以管理经济学课程为例，具体说明此学习效果的评量机制如何实施。

［关    键   词］  AOL；学习效果；评量机制

［中图分类号］  G642                    ［文献标志码］  A                  ［文章编号］  2096-0603（2023）15-0109-04

一、AACSB认证中的AOL评估标准简介

商管学院的教育目标是为社会培养合格的经营管理人才。学生的学习成效是评估商管教育是否符合社会需求的重要环节之一。国际商学院促进协会（The Association to Advance Collegiate Schools of Business，简称AACSB）是著名的提供商管学科教育评估的国际认证机构之一，其评估准则现已成为众多国家商管课程学习成效评估的主要参照。AACSB的评估强调商管学院在参与、创新与影响力（Engagement，Innovation and Impact）等方面的表现。即借由评估过程，提高商管教育的质量，强化学校、师生和产业之间的互动，促进教育、学术或专业的创新，从而使学院对社会有所贡献。

本文主要目的就是以AACSB的第8项评估标准——学习确保（Assurance of Learning，AOL）为基准，讨论经管学院研究生学习成效评估机制的设计；同时，以管理经济学课程为例，就具体课程学习成效评估的实施进行讨论。

二、以AOL设计学习评量机制

AACSB的评估标准共计15条（2013年修订版），其中第8条主要关注学生学习成效衡量，其内容如下：学院利用健全的文书制度与系统化的程序，制定或修改各学位学程的学习目标；协助学位学程建立课程设计、教学方法与课程改进的机制来实现学习目标，并应体现学位学程的学习目标达成之效果。

此项评估标准强调课程管理（Curricula Manage-ment）和学生学习成效的保证（Assurance Of Learning）。首先，培养方案要能反映社会对学员的需求；其次，制订学习目标；最后，衡量学习结果是否达到学习目标，进而修订课程设计与教学內容。所以，AOL的评估过程就是衡量学生在参与课程学习中是否达到预期学习目标的过程。值得注意的是，AACSB关注的学习目标是整个学位学程层次的目标，而不是单一课程所设定的细节目标。借由衡量学习成效的过程，学院得以确认学习目标的达成情况，提供回馈和改善的指引，协助教师改善课程设计和教学内容。

借鉴AOL的评估准则，我们可尝试建构经管学院研究生学习成效的评估机制。这一机制主要由以下部分组成：

（一）设定学习目标（learning goals）

设立学习目标和/或子目标（learning objectives），制订学习目标和子目标的主要内涵。

（二）建立学习成果评估指标体系（rubrics）

此指标体系包括考察学习结果的不同维度（dime-nsions），以及针对每一维度制订的评量标准（criteria）。

（三）施测结果分析与讨论

每门课程的教师根据施测结果进行分析，并做成分析报告，交由各级教学主管部门讨论。

（四）反馈与改善

施测结果讨论后的改善意见，即成为各门课程后续教学中的改进措施，由此形成教学精进与学习成果评量的有效循环（loop）。

三、设立评量标准

根据前文的讨论，我们把经管学院研究生学习成效评估机制的具体操作步骤总结如下图：

（一）建立学习目标

以经管学院研究生教育为例，根据多年的教学实践以及借鉴国内外商管学院的经验，我们将学习目标总结为以下五项：

1.专业能力（Professional skills），指基本的实务知识与技能。

2.沟通能力（Communication skills），指口头沟通/演讲、书面沟通/写作。

3.分析与问题解决能力（Analysis and problem-solv-ing skills），指具有基本的分析思维与问题解决技能。

4.道德观（Code of ethics），指伦理认知与社会责任。

5.国际视野（Global perspectives），对国内外政治、经济、商业发展有基本的认识。

（二）学习子目标

每一个学习目标可发展出能具体衡量的学习子目标或学习目的。如专业能力的学习目标可以继续发展出两个子目标，包括：（1）本科生应能描述其专业领域之初级或中级专业知识与技能，以有助于其职业及（或）进阶的持续学习。（2）本科生应能展现其基本的能力，以一般及专业之管理技能与知识来处理问题。

（三）发展评量标尺

依据学习目标发展出多个学习成果维度的评量标准之评量标尺。例如，衡量专业能力这一学习目标的维度可设为：D1.具备本学科基础专业知识；D2.初步具备整合跨学科专业知识的基本能力；D3.具备本学科相关领域时事议题的基本创新思辨能力；D4.初步具备运用专业知识定义问题并进行决策的能力；D5.初步具备运用各种资源进行自主学习的能力；D6.初步具备判断不同情境案例中需要有效领导方式的能力。同时，每一个维度可分成三个等级的评量标准，例如：1＝弱，2＝中，3＝强。每一维度对应的评量标准都应提供相应的情况描述，例如：D4-3（强），可描述为“能够较充分应用专业知识、证据和所有相关情境因素，洞悉问题所在，并针对问题做出的决策能基本满足或符合不同层面需求”。

（四）执行评量作业

由授课教师于学期初始、学期中或学期末执行学习成效评量。使用的测量工具可以包括报告、简报、期中考、期末考、小考等多种测量工具或评量设计，但授课教师必须确认各测量工具或其中的某个特定部分是衡量评量标尺中的哪一个维度。例如：“管理经济学”课程期中考和期末考的纸笔测验，授课教师必须确认考题中的哪些题目是测量“分析与问题解决能力”的第一个维度，哪些题目分别测量第二和第三个维度。

（五）资料分析并依分析结果提供改进建议

根据评量标尺上的不同评量维度，授课教师对每位学生的表现评分。事后，教师统计修课学生分数，计算出各维度的达成比率及总达成比率是否高于当初设定的“目标达标率”。施测完毕后，依施测所得到的结果填写“讨论与建议”，包括重要的发现、改善方法、评量标尺或“目标达标率”的总结。最后，针对各项资料加以分析，就各项统计数据说明并提供改善建议，做成学习成效报告。例如“管理经济学”课程的学习成效在“专业能力”各维度皆有通过“目标达标率”80%，显示学生对管理经济学主要理论模型和基本的国际经济问题有较深入的理解，从而可以提出说明和建议，如可以适度提高达标率标准；同时，也可增加评量问题的深度、广度，以得到较高的鉴别度。

（六）召开各级会议讨论学习成效报告和审查改善建议

利用各项会议，如教研室会议、院系会议等讨论改善建议。会议完成后，评量结果必须有系统地收集、分析与传阅给教学主管部门和相关授课教师等，并依据改善建议和时程执行改进措施。例如管理经济学课程在“专业能力”学习目标的“目标达标率”完成80%的情况下，下一次授课时可将达标率提高至82.5%，或维持“目标达标率”80%，但增加评量问题中较困难题目的比例。

（七）学习成效评量的持续改善

本次课程学习评量后，应在下次课程教学中执行改善建议，并重新评量学生表现，检视是否确实改善。针对本次施测结果，检查学生尚未达成教学目标之处，教学单位要努力改进缺失，提出改进措施的执行方法与时间表，在下回执行学习成效评估后进行比较，由此完成一次循环（close the loop）。

四、管理经济学课程评量机制的具体运作

本节我们以管理经济学课程为例，详细说明某一具体课程如何根据学院设定的学习成效评估机制进行学习成效的评量。

（一）管理經济学课程评量与施测

假设管理经济学课程的学习目标是培养学生的专业能力和国际观，而专业能力中我们选择三个维度D1、D2、D4进行评量，国际观（假设共有六个维度）中我们也选择三个维度D1、D2、D5进行评量，对这两项学习目标评量和施测的操作如文末表1和表2所示。

（二）管理经济学课程评量的检讨

根据课程施测结果进行检讨，具体情形可以包括：

1.以评量标尺说明学生学习成效评估情形

（1）专业能力

管理经济学课程的专业能力评估结果中，三个维度平均通过率为79.7%，基本达到80%的目标通过率，显示学生已经具备管理经济学的专业知识能力。其中，表现较弱的维度是D4以本学科基本模型分析相关时事议题的基本能力，学生对时事议题的认知较为薄弱，学理的运用能力还可加强。

（2）国际观

管理经济学课程国际观的评估结果，三个维度平均通过率为67%，低于80%的目标通过率，可见学生对管理经济学中的国际观内容较弱。教学中，教师对全球化意识、管理经济学发展以及对产业的影响这些方面的知识可以多加补充介绍。

2.依据表格数据说明未来课程改善的对应方法

（1）专业能力

专业能力D4平均未达成目标通过率的改善方法：学生对把刚掌握的管理经济学模型应用到具体事例的分析能力还有所欠缺，教师可透过课堂讨论或习题演练等方式提高学生这方面的能力。

（2）国际观

D1、D2、D5全球管理经济学认知较弱的改善方法：全球化及世界经济的认知，可透过教师课堂上多讨论国际性案例和重大经济事件来补充增进，或是改以国际版之教科书教学。

3.举行会议进行讨论

举行课程教学会议讨论评估结果和改进措施。讨论内容可以包括在下次执行学习成效评估时是否有针对评量标尺或教学方法进行修正，以得到较好的评估结果。同时制成评估结果报告，分别送到课程委员会、各院系和教研室主管、相关授课教师参阅。最后，执行改善建议及设定时程，在本课程会议（由共同科目教学教师组成）上讨论并拟订改善措施，并于下一学年度执行改善。

五、结语

经管学院或商学院的研究生教育，目的是为社会培养合格的经营管理人才。如何衡量研究生的学习成果是否符合社会需求、如何持续改进和完善研究生教育，成为研究生教育评估的重要环节之一。本文以AACSB国际认证中的AOL标准为基准，设计经管学院研究生学习效果的评量机制。同时，根据我们多年的教学经验，以管理经济学课程为例，具体说明此学习效果的评量机制如何实施。

AOL的学习成效评估机制，是希望通过学习目标确立、教学过程管理、施测结果的检讨，使学生对课程有深入领悟，使教师对教学能持续改进。

参考文献：

杨宜，陈建斌.城市型、应用型大学商科教育质量提升的探索与实践：基于AACSB国际认证的视角［M］.北京：经济科学出版社，2018.