紧急医学救援培训结业考试质量分析

陈 锋，侯世科，樊毫军

我国国家卫生应急队伍分为紧急医学救援、突发急性传染病防控、突发中毒事件应急处置、核和辐射突发事件卫生应急4类。卫生应急队伍的成员来自医疗卫生等机构的工作人员，平时承担所在单位日常工作，应急时承担卫生应急处置任务。依据《全国卫生应急工作培训大纲(2011～2015年)》的要求，国家级紧急医学救援队每年培训一次，每次80个学时。培训内容包括“紧急医学救援总论、紧急医学救援队伍组织管理、伤员分检与后送、现场急救基本技术、常见创伤医学急救要点、救援现场公共卫生管理”7个方面。培训大纲中也明确“可根据每次培训班的特点确定培训和考核方式”，为此我们依托卫生应急综合培训演练中心制订了考核方案，开发实施了专门设计的OSCE对紧急医学救援培训人员进行结业考核，并对OSCE的质量和结果进行分析、解释，为构建规范化、标准化的紧急医学救援培训考核模式提供参考［1］。

1 对象及方法

1.1 对象 2012年6月7日至17日，某国家级紧急医学救援队共计36名队员(其中男队员29人，女队员7人;管理人员3人，临床医生25人，技师2人，护士6人)，平均年龄37±1.7岁。除3名管理人员外，33名医疗队员在卫生应急综合培训演练中心完成了80个学时的紧急医学救援全部培训，采用专门设计的OSCE进行操作技能结业考核，见图1。

图1 结业考核综合演练过程

1.2 方法

1.2.1 组织考试的方法 组织了包括灾害医学领域专家、中国国际救援队医疗分队队员在内的9人命题组，所有命题人对被测验的队员和所要达到的技能水平有充分的了解，所有病例都是以他们在紧急医疗救援实践中遇到的真实病人为基础设计的。设计的OSCE由10站组成，涵盖了国家紧急医学救援培训大纲的主要培训内容，每个考站都编写了相应的考试目的、考生指导、评分考核表、标准化病人指导、所需设备清单，并对考官和标准化病人进行了培训。随机确定33名队员的考试顺序，所有队员均按OSCE流程完成考试，考官依据评分标准评定成绩。考官用掌上电脑代替纸质评分检核表进行成绩评定，每个考生在每一站的评分会通过无限网络及时上传统计，提高了成绩的汇总和评定的效率。每个考站都安装了监控设备，对考试进行全程录音录像，便于考官和考生在考试后分析总结。

1.2.2 数据统计方法 将所有考生的成绩数据采用SPSS19.0进行录入和统计分析。

2 结 果

2.1 考试结构分析 该OSCE的考试时间为120分钟，分为三部分:第一部分为5个SP考站，病人全部采用SP，需完成病史采集、体格检查、以及5个病例相关选择选择题;第二部分为3个计算机模拟考站，队员在计算机上完成模拟考试;第三部分为2个临床技能考站，提供相关设备和器材，队员在医学模拟人上进行操作技能考核，见表1。在考站5和考站6之间、考站7和考站8之间各设1个轮换休息站。

表1 紧急医学救援培训结业OSCE结构表

2.2 考试成绩分析 汇总队员的平时成绩，总分100分，由考勤、理论课成绩、实践课成绩等3部分构成，其平均分为75.9±8.3。每个考站分数为100分，10个考站按每个考站所考核内容的重要性给出权重，依据权重整个OSCE满分为100分，33名队员的 OSCE 成绩在 59.1 至 89.9 之间(72.3 ±7.1)。33名医疗队员平时成绩接近正态分布，w检验P=0.554，Sk=0.232，Ku=0.477，见图 2;结业考核OSCE成绩接近正态分布，w检验 P=0.644，Sk=0.445，Ku=0.265，见图3。

图2 33名国家级紧急医学救援队队员平时成绩频率分布

2.3 合格标准的确定 由12名考官组成考核组，用基于考试内容(试题)的专家判断法来设定合格标准，即扩展的Angoff法。首先将10个考站的评分表作为单个试题对待，在此基础上参考培训目标的要求估计边界组考生的分数，12名考官分别对每个考站的得分进行估计，然后计算每个考站的平均得分，将这些平均得分相加就得出合格分数:63.2，见表2［2］。依据合格分数将队员的能力水平分为优秀(约10%，4 人)、良好(约30%，10 人)、合格(约50%，16 人)和不合格(约10%，3人)4个等级，见表1。

图3 33名国家级紧急医学救援队队员OSCE成绩频率分布

2.4 难度和区分度分析 难度(Difficulty)是指题目的难易程度，或说测验的难易程度。按主观题计算OSCE的难度，公式:P=X/M(X为试题平均得分，M为试题满分)，10个考站的难度在0.48至0.83之间，整体难度为 0.72。区分度(Discrimination)是指测验题目对学业水平不同的学生的区分程度或鉴别能力。按主观题用Pearson积差相关分析计算OSCE各考站区分度，10个考站的区分度在0.11 至0.89 之间，见表2。

2.5 信度和效度分析 信度(Reliability)是指同一个测验对同一组被试，施测两次或多次得分的一致程度。一般认为，标准化考试的信度系数应该在0.9以上。本文采用Cronbach α系数对OSCE的同质性信度进行检验，α值为0.941。效度(Validity)是指测验能够测出它所要测量事物的程度，即试卷准确地测量了考试目的及欲测内容的多少。本文采用积差相关法(Pearson法)求效度利用效标关联效度法进行分析，把队员的平时成绩作为效度分析的效标，得出OSCE成绩与平时成绩的相关系数为0.899。

表2 各考站平均分、总分和边界组分数

3 讨 论

考核是培训工作的重要组成部分。合理、高效的考核方式不仅可以准确反应考生的能力水平，还可以反馈教学中存在的显性和隐性问题。但是考试成绩本身不能说明这些问题，必须对考试结果进行统计分析并进行正确的解释，才能得到丰富的深层次信息，从某种角度来讲，这些信息比考试成绩更重要。

全国卫生应急工作培训的主要培训与考核方式有:集中培训考核分理论考试和操作考试两种形式;进修培训考核采取理论考试与专项调查报告相结合的方式，也可根据每次培训班的特点确定培训和考核方式。本研究将OSCE作为紧急医学救援培训的操作技能结业考试。考试结果显示，33名队员的OSCE 成绩在59.1 至89.9 之间(72.3 ±7.1)，成绩接近正态分布;OSCE的整体难度为0.72，10个考站的难度在0.48至0.83之间，区分度在0.11至0.89之间，OSCE的同质性信度进行检验 α值为0.941，OSCE成绩与平时成绩的相关系数为0.899。这表明，OSCE的难度适中，具有良好的区分度、信度和效度，考试结果真实可信，客观评价了国家级紧急医学救援队队员的操作技能水平，OSCE可以作为紧急医学救援培训操作技能的考核方式。

考试分数须与特定的参照系统比较才有意义。卫生应急工作培训的考核是为了评价培训人员是否己经充分掌握了培训内容，是否已经达到了既定的培训目标，因此OSCE是一种标准参照性考试。本研究运用考试后的扩展的Angoff法，确定了边界组分数(合格分数)为63.2，有3人不合格。如果按60分作为划界分数，就有1人不合格。这表明，在卫生应急工作培训考核中运用基于标准的教育考试对合格标准进行确定，更能准确地反映受试者是否达到了合格标准［3］。

由于《全国卫生应急工作培训大纲(2011～2015年)》中只列了国家级紧急医学救援队培训大纲，具体培训实施计划需要各单位结合实际制订，培训效果受到培训条件、培训内容、培训方式、师资力量、评价指标、考核方式等多种因素的制约。我国卫生应急队伍培训还处于起步阶段，还要进一步探索建立专业化、标准化的培训体系。本研究表明OSCE适用于紧急医学救援队培训结业考核，但是由于医学救援队任务的复杂性及多样性，较高的考核合格率并不能直接反映队员已经具备应对各种灾害的实际能力，在完善我国医学救援培训体系的过程中要重视这些问题。由于样本量的限制，以及队员自身不同的专业背景对OSCE成绩的影响，本研究还需要进一步深入研究，在此基础上建立全国卫生应急工作培训考核试题库，逐步建立规范化的卫生应急培训考核评估体系。

［1］ 安淑媛，张 阳，刘 强，等.OSCE在临床技能评价中的应用［J］.医学教育探索，2009，8(3):251-252.

［2］ 王晓华.基于标准的教育考试合格标准研究［J］.教育科学，2012，28(5):15-21.

［3］ 何 惧，何 佳，安 滔，等.Angoff法及其衍生方法在资格考试合格线设定中的比较研究［J］.中国考试(研究版)，2007(6):23-26.