涂文记,杨 萍*,潘 慧,赵 峻,李 琦,高小惠,管远志
(1.北京协和医学院 教务处 医学教育研究与发展中心; 2.北京协和医学院 临床学院 北京协和医院 教育处;3.北京协和医学院 基础医学院 北京协和医学院 医学教育研究与发展中心, 北京 100730)
无纸化客观结构化临床考试(OSCE)应用探索
涂文记1,杨 萍1*,潘 慧2,赵 峻2,李 琦2,高小惠1,管远志3
(1.北京协和医学院 教务处 医学教育研究与发展中心; 2.北京协和医学院 临床学院 北京协和医院 教育处;3.北京协和医学院 基础医学院 北京协和医学院 医学教育研究与发展中心, 北京 100730)
客观结构化临床考试在临床医学教育测评中应用日益广泛,但其复杂的组织流程也为考务工作者带来大量繁琐的考务工作,不利于考试的标准化实施。为应对这个问题,北京协和医学院设计了无纸化OSCE考试系统,该系统有无纸化考试的优点,也存在一些不足,最大的问题是对考试设备及网络太过依赖,如果考试设备故障或者网络系统瘫痪的情况下,无纸化考试将无法运行,考务工作者应还需要准备1~2套应对方案。
无纸化考试;客观结构化临床考试;医学教育
客观结构化临床考试(objective structured clinical examination,OSCE)又称临床多站考试(multiple-station clinical examination, MSE),是一种以客观的方式评估医学生和住院医师临床能力的考核方法,即在模拟临床场景下,使用模型、标准化病人(standardized patients, SP),甚至真实病人来测试医学生的临床能力,同时它也是一种知识、技能和态度并重的综合能力评估方法[1- 2]。在当今医学教育界,OSCE是一种被医学教育界普遍采用的信度和效度较高的临床综合技能考核方式。OSCE在临床医学应用日益广泛,其复杂的组织流程也为考务工作者带来大量的考务工作,也不利于考试的标准化实施。在此背景下,北京协和医学院在过去多年实践的基础上,提出无纸化OSCE考试流程的理念。
2003年,北京协和医学院参加了国际医学教育组织(Institute for International Medical Education,IIME)的评估计划——“全球医学教育最基本要求(Global Minimum Essential Requirements in Medical Education,GMER)”,此后,OSCE正式引入临床医学(八年制)的毕业考试中。北京协和医学院临床医学(八年制)毕业考试共分两个部分:第一部分是临床理论综合考试,采用机考的形式;第二部分是临床技能综合考试,采用OSCE的形式下面介绍无纸化OSCE设计的依据。
1.1 毕业考试之OSCE考站设置
我校临床医学(八年制)毕业考试的OSCE部分共设12个考站(表1)。
1.2 考试轮转示意图
根据毕业考试OSCE的安排,4个长站(2组)进行与8个短站(1组)同时进行(图1),每次考试考16个人,分16个考场。
1.3 考前准备
传统的纸笔OSCE在考前需要排考试轮转表、发通知征集考题、考题评审、考前考生培训、考前考官培训、打印考试试题(门贴、试题、评分表),考试前一天考场布置,毕业考试的OSCE部分需要耗时两天,才能将所有考生考完。OSCE考试团队在考前除了准备考题之外,需要做好大量的准备工作,考前准备清单(表2)。
表1 毕业考试之OSCE考站设置一览表Table 1 The blueprint of OSCE for graduation examination
图1 学生轮转示意图Fig 1 Rotation schematic diagram
序号内容1学生考试轮转表2根据学生考试轮转表安排各考站考生顺序表(给考官12个考站,共16个考场,每个屋子一份,分2天排序)3考试手册(考官版、考生版)4考题试卷(门贴、打分表),分A、B卷,每半天换一套题目
有经历OSCE考试组织的老师就会知道其工作量大的程度,而这些工作往往只有1~2个人在准备,大量而繁琐的工作需要经过长时间精密的准备,而在考试题目方面进行无纸化流程安排,会使考试安排简化。
根据OSCE考试目标及考试实施流程,北京协和医学院OSCE管理部门向软件制作方提出了实现无纸化OSCE的要求。目前在北京协和医学院临床学院临床技能与考试中心已经初步实现了无纸化OSCE的要求。根据考试流程,我们提出实现无纸化OSCE需要建立的考试系统,包括考务管理系统、考官评分系统、学生信息查询系统。现在详细介绍北京协和医学院无纸化OSCE系统的组成(图2)。
图2 北京协和医学院无纸化OSCE考试系统构成Fig 2 Constitution of paperless examination systemfor OSCE, PUMC
无纸化OSCE考试系统由3个部分组装而成,分别是考务管理系统、考官评分系统及学生信息查询系统。下面介绍这3大系统的具体功能。
2.1 考务管理系统
考务管理系统应该实现以下4个基本功能:
1)安排学生考试轮转时间顺序并生成表格、考站时间顺序表;
2)考试题库及考试评分表导入;
3)在系统后台可以实时查看考试情况和教师评分情况;
4)考试结果导出及考试结果统计及分析。
2.2 考官评分系统
1)查看考试手册、考试地点、考试要求等;
2)病例介绍、说明(考官版本的病例);
3)打分系统(打分并进行以往打分情况查看)。
2.3 学生信息查询系统
1)考试手册、准考证打印
2)候考大厅可以看到当前各考站考试情况及考生信息及候考考试信息
3)提供即时考试结果反馈
北京协和医学院无纸化OSCE考试系统在2014年毕业考试中试运用,基本达到无纸化考试的要求,无纸化考试系统充分利用了B/S模式的特点,实现将考试系统移植到因特网的功能,该系统的优势在于极大的简化老师出题的工作,减少考后的阅卷统计工作。减轻了工作量、严格了考试标准、组卷方便快捷。但是因为程序设计为首次运行,也存在一些问题,如多站考试轮转表的安排方面,不能根据实际考试变化随时修改时间建立轮转顺序,在今后的实践中应进行优化。无纸化系统最大的问题是对考试设备及网络太过依赖,如果学系设备故障或者网络系统瘫痪的情况下,无纸化考试将无法运行,所以在考试简化的过程中,还需要准备1~2套应对方案;此外,因为系统是通过网络公司做维护,保密性及知识产权保护方面应该做好预案及防护;再次,对第一次使用电子设备中的打分系统打分的老师要进行专门的培训。不过,尽管存在这些缺点,无纸化OSCE的应用具有良好的推广前景,是未来OSCE考试的发展趋势。
[1] 王莉英,陈志杰, 钟春玖.网络化OSCE初探[J],中国高等医学教育,2006:20- 21.
[2] Z.Khan, Sankaranarayanan Yanan Ramachandran, Kathryh Gauit,etal. The Objective Structured Clinical Examination (OSCE): AMEE Guide No. 81. Part I: An historical and theoretical perspective [J].Med Teach, 2013; 35: 1437- 1446.
An exploration on paperless examination system the practiceof objective structured clinical examination at Peking Union Medical College
TU Wen-ji1, YANG Ping1*, PAN Hui2, ZHAO Jun2, LI Qi2, GAO Xiao-hui1, GUAN Yuan-zhi3
(1.Dean’s Office & Medical Research and Development Center, Peking Union Medical College; 2.Educational Department,Peking Union Medical College Hospital & Medical Research and Development Center,Peking Union Medical College;3.School of Basic Medicine, Peking Union Medical College, Beijing 100730,China)
Objective structured clinical examination plays an increasing role in medical education nowadays, while its disadvantage of organizing is obviously, it needs much more resource. Its complex organizational processes bring a lot of tedious examination affairs for administers who in charge of OSCE, also it is not conducive to achieve standardization. A paperless examination system was established to address this problem at Peking Union Medical College. The system has its advantages and disadvantages. To address its disadvantages, 1-2 sets of solutions is necessary to respond potential accident like computer system malfunction.
paperless examination; OSCE; medical education
2015- 04- 16
2015- 05- 28
北京协和医学院2014年教育教学改革立项项目(2014zlgc0101);2014年度北京高等学校教育改革立项重点项目(2014-zd03)
1001-6325(2015)11-1576-03
医学教育
G424.74
A
*通信作者(corresponding author):pumchyangping@126.com