高等教育机构e－learning质量评估“标杆管理法”述略

刘路

(College of Business Massey University)

高等教育机构的传统教学方式正面临着dlearning(远程学习)、e－learning(电子学习，也称“在线学习”、“网络教育”、“数字化学习”等)、mlearning(移动学习)，u－learning(泛在学习)等多元介质冲击，其中最为重要的是e－learning。为了确保e－learning的教学质量，一些国家已成立了相关质量保证机构。但由于评价体制中存在的问题，也间接地成为某些机构实施网络教育失败的原因之一［1］。“标杆管理法”(Benchmarking，BMK)也称“标杆分析法”或“基准化分析法”，最早由美国施乐公司(Xerox Corporation)于1979年提出，是企业管理活动中支持企业不断改进和获取竞争优势的最重要的管理方式之一，2005－2006年开始应用于高等教育机构，最初在新西兰，后来应用到欧洲各国，并受到英国高等教育学会的支持，最近几年扩展到了美国［2］。e－learning Benchmarking(电子学习标杆管理法)在英国被视为大学转变的“关键促成者”。本文拟对目前国际上流行的一些电子学习标杆管理法进行简要介绍。

一、SEVAQ+

SEVAQ+于2009年产生于欧洲教育、视听及文化执行机构(EACEA)，是增强技术学习自我质量评估的方法。开发SEVAQ+的目的是将莱奥纳多·达芬奇试点计划(Leonardo da Vinci pilot project)(2005－2007)的结果—SEVAQ工具和电子学习质量自评估概念［SEVAQ+，2009］进行广泛的推广和开发。SEVAQ+可供不同的教育机构使用，评估任何受技术支持的教学和学习质量，无论其是完全的在线远程学习课程，还是“混合式学习”。

SEVAQ+确保向参与技术学习提高系统的主要利益相关者提供反馈分析，并且指出需要改进的地方、追踪学期间或年度间的进步、与其他机构比较标杆教学和培训的效果［3］。SEVAQ+评估方式是自我评估，评估重点是投入、过程、产出的结合，评估工具是在线工具Sevaq(问卷表在线生成器)［4］。2011年4月发布了SEVAQ+2.0版本。其优势是将一个单一的评估模型与不同使用者的需求联合起来，确保满足不同使用者和机构的不同需求，目前已被欧盟区内的高等教育机构所接受和使用，但对欧盟区以外(特别是第一语言并非英语国家)的高等教育机构来说，普及应用还有待时日。

二、Open ECB Check

Open ECB Check(开放式ECB检测)是2008－2010年间在德国实施的一个电子学习国际能力建设认证及质量改进计划。它倡导一种成员可参与式的质量评估环境，在不同成员组成的“社区”内，成员不但可以使用开放式ECB检测工具，也可以通过同行机构评审来对自己的机构表现进行指导，促使其教育质量有效改善和提高［5］。

开放式ECB检测共有7个标杆管理区，指标定性总数有52个［6］。在认证过程中，申请机构会得到一个“工具包”(基于Excel的在线数字标杆管理工具)，是该机构基于质量标准目录进行全面自我评估的基础。开放式ECB检测的概念性标记是使用五种核心方法(标杆管理、标杆学习、同行评审、自我评估和定性加权求总)进行网络教育质量的评估和验证。该方法既包括了电子学习自我评估方法，也包含了一个可供同行间进行评估和交流的虚拟社区，是经过检验并能满足电子学习项目改善需求的方法。其不足之处是，评估过程较为繁琐，被评估机构至少要经过7个阶段才能得到评估结果。

三、eMM

eMM是新西兰维多利亚大学Marshall S.教授在2002年提出的一个基于能力成熟度模型(CMM)和软件改进能力测定(SPICE)的方法，即“电子学习的成熟度模型“(E－Learning Maturity Model，简称eMM)。该模型主要用于评估高校是否有能力设计、开发和使用e－learning，用以满足学生的学习和教职工的教学、科研需求。针对高校在开发中存在的问题进行分析，从而确保高校能够有效的长期进行高质量的e－learning建设。eMM中的每一个领域都包括了不同的指标，用以评估高校每一个过程中的整体表现能力。

eMM有5个标杆管理区，35项指标，分5个等级。评估方式是自我评估与协作评估相结合，定性评估，评估重点是投入、过程、产出三方面相结合，使用的工具是eMM 2.3评估手册［7］。主要优点在于将高校中的复杂繁琐工作分割成了仅用于评估elearning的不同部分，从而在避免损失潜在信息的情况下，独立、有效、简单地进行评估。eMM的普适性有待验证，不同的评估机构和组织可对该模型中的指标进行符合自身情况的修改和完善，以提高电子学习评估的准确性和有效性。

四、E－xcellence

E－xcellence是欧盟资助的一个项目，由欧洲大学远程教育协会(EADTU)在12个合作伙伴支持下开发，2006年11月23－24日在爱沙尼亚的塔林正式推出。该项目的主要目的是建立网络教育质量标准，包括项目和机构层面的一套评估工具、内部质量监控系统的改善工具和卓越认证工具。评判标准包括对被评估机构的微观和宏观层面考察，比如机构的制度、课程表和课程内容等不同环节。总体而言，它是一种基于网络质量标杆管理评估的工具，包含了教学、组织机构及技术框架，重点关注可近性、可变性及互动性。

E－xcellence标杆管理区的数量有6个，50个excellence标杆管理指标，其中33个是门槛［8］，指标定性、明确，评估方式是自我评估，评价重点是投入、过程与产出的结合，使用快速扫描工具(在线快速评估)，被评估机构能够快速有效地获得全面的评估报告，研究人员能够对评估工具进行在线升级和完善，目前已升级为E－xcellence+。值得注意的是，如果被评估机构仅仅选择快速评估中的基本选项，尽管能够在第一时间内得到关于该机构在电子学习表现方面的大致情况，但是这些内容的改善还需要更多的人为关注;在线调查问题的设计也需要考虑管理机构、课程设计者、教师和学生等不同情况。

五、Pick＆Mix

为满足英国曼彻斯特商学院对电子学习质量改善的需求，Paul Bacsich教授于2005年最先推出了Pick＆Mix 1.0测试版的电子学习质量改善方法，用于12个机构与曼彻斯特商学院的对比研究。评估体系包含核心指标(20个)、辅助指标(5个)和局部指标(高校自身)三种。对于每一个评判项，都使用英国高校机构所熟悉的概念、结构、过程和词汇表达。指标项中，每项指标都用1－5级评分［9］。

Pick＆Mix的主要特征是:指标明确，定性评估，重点评估产出和过程，自我评估与协作评估相结合，目前使用的工具为Pick＆Mix 2.6版。由于没有内置的项目管理或参与方法，该方法没有受到方法上的限制，并且包含了其它方法中的定性标准、最佳实践及标杆管理，可以在项目管理方法范畴内被轻松地运用在所调查的高校中并赋予权重，调研人员还可以根据不同的评估情况制定新的指标。但由于评价选项的设置使用了与英国高等教育机构有关的内容、结构、过程和术语，对于其他国家和地区的高等教育机构来说，评价选项未必一定都合适。

除上述方法外，常见的e－learning指标管理法还有:Massive、Acode、Chiron、Elt1、Benvic、Bhe和Mit90s。限于篇幅不再一一分析。

［1］ Marshall，S.2012，Improving the quality of e－learning:lessons from the eMM［J］.Journal of Computer Assisted Learning，02/2012，Volume 28，Issue 1:65－78.

［2］ Stephen，M，2005，Determination of New Zealand Tertiary Institution E－Learning Capability:An Application of an E－Learning Maturity［R］.Model Report on the E－Learning Maturity Model Evaluation of the New Zealand Tertiary Sector.PP:1－130.

［3］ EACEA.PRESS RELEASE，2011，SEVAQ+LAUNCHES V2.0 OF ONLINE TOOL FOR QUALITY INELEARNING［EB/OL］.http://www.efodl.net/download/SEVAQ_Press_release_01.pdf.2014－01－07.

［4］ ［5］［6］［7］［8］［9］［10］［11］［12］［13］［14］University of Kragujevac Tempus project，2011，Enhancing the quality of distance learning at western Balkan Higher Institution［R］.E－learning benchmarking Methodology and tools review(Report 1.3).pp:33－34.