DOPS在临床操作技能培训中的应用及效果评价

陈凤 刘明 张丽娟

摘 要：目的：探讨操作技能直接观察测评（Direct observation of procedural skills，DOPS）在医务人员临床操作技能培训中的应用和效果评价。方法：选择2020年1月22日至27日金堂县第一人民医院在岗员工120名，开展“穿脱防护用品6项”操作技能培训，对他们培训前期和培训后期分别进行1次DOPS考核，通过对考核成绩、培训者和培训对象对培训结果的满意度进行分析，评价DOPS教学效果。结果：前期操作考核结果显示，120名培训对象因职系不同操作水平存在明显差异，其中护士考核成绩相对较高（P<0.05）;后期操作考核结果显示，全体成员各单项评分、总平均分均高于前期考核（P<0.05）;对DOPS结果的满意度测评，培训者前期得分为6.8±0.7，后期为8.0±0.5;培训对象前期得分为7.9±0.6，后期为8.6±0.4，培训双方后期测评满意度均高于前期且处于较高水平，培训对象高于培训者。结论：DOPS可有效运用于临床操作技能培训和考核，能够良好提高医务人员相关操作技能水平。

关键词：操作技能直接观察测评;临床操作技能培训;效果评价

中图分类号：R4 文献标识码：A 文章编号：1671-2064（2020）09-0216-03

操作技能直接观察测评（Direct observation of procedural skills， DOPS），是评估者通过直接观察教学对象操作技术过程并及时给予评估和回馈，兼具教学和考核功能的新型临床技能评价工具[1]。多项研究显示，DOPS具有评价周期短、反馈及时的优点，是培训与评估操作能力的重要手段[2-4]。为有效提高医务人员职业安全防护技能水平，金堂县第一人民医院于2020年1月22日至1月27日，运用DOPS对医务人员进行了“穿脱防护用品”系列操作技能培训，现将培训效果报道如下。

1 对象与方法

1.1 研究对象

120名培训对象：（1）成员组成：医生30人（占25%），护士64人（占53.33%），技师8人（占6.67%），工勤人员18人（占15%）;（2）年龄：23岁～53岁，平均年龄35.6岁;（3）性别：男43人（占35.8%），女77人（占64.2%）， 男女比例为0.56∶1;（4）在医院工作年限：3年～31年，平均年限8.7年;（5）学历：硕士1人（占0.83%），本科61人（占50.83%），专科41人（34.17%），中专/高中及以下17人（占14.17%）;（6）职称：副高级职称及以上10人（占8.33%），中级职称48人（占40%），初级职称44人（占36.67%），其他18人（占15%）。培训对象按报名序号随机分为6组，不同职系人员尽可能平均分入各组，均进行为期5d的培训。培训第一天由同一位培训者分组别进行操作示教后，每组每天集中培训80min，在培训第一天和第五天分别进行DOPS考核。

1.2 评分方法

培训由责任心强、受过专门培训且经验丰富的6位师资同时担任培训者和考核者，考核方式为考核者直接观察考核对象的操作技术进行评分，以平均分记作考核者成绩。6位考核者在考核前集中开展DOPS研讨，达成考核共识，并告知考核对象考核的内容、方式及评分标准，尽量保证评分的客观性和可比性。

1.2.1考核内容

确定了“手卫生、取用无菌帽子、取用N95口罩、取用无菌手套、取用护目镜、穿脱防护服”共6项穿脱防护用品操作考试科目，后5项操作各包括穿戴与脱下两个环节。

1.2.2评分标准

按照量表评估条目内容分项逐步考核，每个项目采用9分制评分，拟定1分～5分为不合格，6分～7分为基本合格，8分～9分为合格。

1.2.3测评反馈

每次操作考核结束后，考核者针对考核对象操作中的优缺点，面对面沟通，针对其不足之处，给予建设性意见、建议，同时注意倾听考核对象的想法与感受，必要时再次操作示范，达成纠正性改善共识。

1.2.4满意度评价

培训者及培训对象分别根据测评的反馈和结果，对满意程度进行9分制评分（最高为9分，最低为1分），满意度测评在考核结束后立即进行。

1.3统计学分析

DOPS评分表的信度采用Cronbachα系数为指标进行分析，当α系数信度>0.7时表示高信度;DOPS评分表的效度采用Bartlett球形检验和KMO进行分析，当Bartlett球形检验P<0.01及KMO值>0.5时表示效度好。数据录入使用Excel 2019进行，数据统计分析使用SPSS 25.0统计软件，计量资料以均数加减标准误（±S）表示，采用t检验行组间比较，当P<0.05时表示差异有统计学意义。

2 结果

2.1 操作测评

前期考核显示，120人中单项测評最高分为9分，最低分为2分，无各项成绩均合格人员;其中工勤人员成绩明显低于其他人员，以护士操作成绩相对较高（见图1）;后期考核高分占比明显提高，最低分、平均分均高于前期考核（其中不同职系人员成绩比较见表1，全体人员前期和后期DOPS考核单项平均分比较见图2），差异有统计学意义（P<0.05）。

评分表中各单项评分项目的α系数信度均>0.7、评分表的α系数总信度为0.819，说明评分表信度高，评分表的Bartlett球形检验P值为0、 KMO值为0.721，说明评分表效度好（见表2）。

2.2培训者及培训对象DOPS测评的满意度

培训者对DOPS测评结果的满意度，前期考核为6.8±0.7，后期考核为8.0±0.5;培训对象对DOPS测评结果的满意度，前期考核为7.9±0.6，后期考核为8.6±0.4;培训双方后期考核满意度均高于前期且都处于较高水平，并且培训对象（8.6±0.4）高于培训者（8.0±0.5）;两组之间的差异均有统计学意义（P<0.05）（见图3，表3）。

3 讨论

“穿脱防护用品”系列操作技能是有效防范医务人员在诊疗活动中暴露于感染性疾病、各种化伤因子的危害，保证职业安全的重要手段，也是临床操作培训中需常规开展的重要技能。DOPS作为一种形成性评价方式，由英国皇家医师协会设计，是通过在现场对操作者在操作过程中表现的行为与能力进行多维度的综合评价，真实反映操作者技能的熟练性及应用程度[5]。近年来，已在国内外各临床领域技能培养方案中推广使用，值得借鉴[6-9]。本次研究的培训对象有医生、护士、技师及工勤人员，他们年龄跨度大，专业背景差异大，学历层次不同，知识技能水平参差不齐，普遍存在院感防控操作技能不足的现状。本次采用DOPS进行“穿脱防护用品”操作培训，聘请接受过系统培训的专业培训者师资，多位考核者同时为考核对象评分，以平均分计作考核者成绩，避免了评分偏差，保证了考核结果的客观公正性。

本研究的前期测评结果显示，工勤人员的基础知识和操作技能最差，考核成绩显著低于其他职系人员;经过在校专业培训的医生、护士、技师，对“穿脱防护用品”技能的掌握也有不足，其中医生和技师较护士整体操作水平差;全体成员中，成绩最低的操作是“穿脱防护服”。这可能与县级医院缺少相关专业知识的系统培训有关，也折射出基层医院医务人员日常工作中院感防控意识不强，系统严格的临床操作技能培训不足。

本研究的后期测评结果显示，各项目单项评分及总平均分均高于前期，表明培训对象经过5d的强化DOPS测评，针对自己操作中的不足进行了归纳总结及良好改进，各单项技能操作水平较前有了明显提升并达到预期目标，其中，操作技能提升幅度最大的是工勤人员，培训后，与其他职系人员的技能水平明显接近，本批次培训结束后无不合格人员。这也说明，DOPS可有效应用于医院在职员工临床操作技能培训中。

同时，DOPS不仅是培训者对培训对象操作技能的测评，也反映了双方对测评结果的互动与反馈。采用DOPS测评，培训者通过前期评估能直观掌握培训对象操作技能和知识层面存在的不足，继而与其面对面进行个体化指导，双方共同达成改进共识，培训对象通过多频次的再考核测评，在技能操作过程中强化了职业精神，临床思维与专业素养也同步得到提升，使教学质量得以保证。本研究结果显示，培训者和培训对象对DOPS测评的满意度后期均高于前期，5d的DOPS培训测评过程显示，操作技能直接观察测评展现出简单灵活、以考促学、高效实用的特点，使教学质量得以充分保证。

参考文献

[1] 叶志伟，詹高房，钟树栅，等.操作技能直接观察评估（DOPS）在实习医师外科实践教学中的应用[J].广州医科大学学报，2019，47（02）：95-97.

[2] Barton J，Corbett S，Vleuten Cvd.The validity and reliability of a Direct Observation of Procedural Skills assessment tool：assessing colonoscopic skills of senior endoscopists[J].Gastrointestinal endoscopy，2012，75（3）：591-597.

[3] Villatoro E，Patterson JE.Training and assessment[J].Surgery（Oxford），2008，26（10）：419-423.

[4] 周毕军.形成性评价在外科学教学中运用的价值探讨[J].卫生职业教育，2017，35（10）：65-66.

[5] Awad Z，Hayden L，Muthuswamy K，et al.Does direct observation of procedural skills reflect trainee's progress in otolaryngology？[J].Clinical otolaryngology：official journal of ENT-UK;official journal of Netherlands Society for Oto-Rhino-Laryngology & Cervico-Facial Surgery，2014，39（3）：169-173.

[6] 张仁杰，李洪凯，钟小日，等.操作技能直接观察评估的应用研究进展[J].中国继续医学教育，2018，10（15）：37-39.

[7] Kumar N，Singh N，Rudra S，et al.Effect of formative evaluation using direct observation of procedural skills in assessment of postgraduate students of obstetrics and gynecology：Prospective study[J].Journal of advances in medical education & professionalism，2017，5（1）：1-5.

[8] Lee V.Maximising direct observation of procedural skills for learning in the emergency department[J].Emergency medicine Australasia：EMA，2018，30（1）：111-112.

[9] 李旻露，方進博，刘兰，等.操作技能直接观察评估在护理领域应用的研究进展[J].护理研究，2019，33（12）：2105-2108.