基于层次分析法-熵权法的护理本科临床实习形成性评价指标体系的构建

陈晓兵,李 烨,李圆圆,郭 薇,林陶玉

临床实习阶段是护理本科教育的重要组成部分,其质量在很大程度上影响整个护理教育的效果[1-2]。我国护理本科临床实习长期采用总结性评价的方式,以教师为主体,重结果轻过程,缺乏对学习过程的关注[3]。形成性评价是以教学目标为导向,对师生双方教学过程的互动及教学目标的达成情况进行的教师、学生、同伴等多维评价,能及时发现教学中的问题并通过反馈改进、调整教学方案,从而不断促进学生发展的过程[4-5]。国外形成性评价在护理教育领域得到广泛应用,已具备成熟的评价机构及特色评价体系[6]。近年来,形成性评价在我国护理临床实习领域备受关注,通过文献回顾发现,国内研究多以学习结局指标为评价焦点,缺乏较强的可操作性及指导性,如何构建科学、客观并值得广泛借鉴的指标体系仍是护理研究者亟待解决的问题。指标权重的赋值反映各指标在评价体系中的重要程度[7],可为后期的实证应用提供科学的量化分析。本研究以形成性评价的理论为基础,通过德尔菲法、层次分析法和熵权法,构建护理本科临床实习形成性评价指标体系,为护理本科临床实习的培养、考核和评价提供参考依据。

1 方法

1.1 成立课题小组 课题小组成员共4人,其中主任护师1人,在读研究生3人。负责拟定评价指标体系,专家遴选,编制、发放及回收专家咨询问卷,专家意见汇总以及数据统计分析。

1.2 初步构建指标体系 以形成性评价理论为基础,结合国内外文献研究及我国相关政策等资料,拟定指标体系初稿。以“形成性评价、护理本科生、临床实习、指标、评价指标、指标体系”为中文检索词,以“formative assessment,formative evaluation,nursing undergraduates,clinical practice,evaluation indicators”为英文检索词检索PubMed、Cochrane Library、中国生物医学文献数据库(CBM)、中国知网、万方数据库、维普等国内外数据库。经课题组反复讨论初步拟定4个一级指标,14个二级指标和42个三级指标的指标体系。

1.3 选择咨询专家 根据数理统计原理的中心极限理论并参考同类研究文献,在充分考虑研究的实际需要及可行性的情况下,邀请16名专家进行咨询。入选标准:①在医学高等院校、三级甲等医院从事医学教育、护理学教育、护理管理或临床护理工作10年及以上;②中级及以上职称;③硕士及以上学历;④愿意参加本次研究,并对研究有一定的了解和积极性。

1.4 实施专家咨询 采用微信和Email的方式进行2轮专家咨询,专家咨询表包括3个方面。①致专家信:研究背景及目的;②专家基本情况:专家的一般资料,专家熟悉程度和判断依据;③问卷主体:护理本科临床实习形成性评价指标咨询。采用Likert 5级评分法判断各项指标的重要程度,分为不重要、不太重要、一般重要、重要、很重要5个等级,依次计1分、2分、3分、4分、5分,在每项指标条目后设意见与建议一栏,并在每级指标后设“增删指标”栏。以重要性赋值均数>3.5分、变异系数(CV)<0.25、满分比>20%为指标筛选标准,结合专家意见及课题小组讨论对指标进行修改,形成第2轮咨询问卷。

2 结果

2.1 专家咨询结果

2.1.1 专家一般资料 第1轮咨询共发放16份问卷,回收15份。15名专家来自新疆维吾尔自治区、湖北省、陕西省、广东省中的6所三级甲等医院和4所医学高等院校,涉及教学兼科研、护理管理和临床护理3个领域;工作年限(24.13±10.19)年。见表1。

表1 专家一般资料(n=15)

2.1.2 专家的积极性 第1轮咨询共发放16份问卷,回收15份,有效回收率为93.8%,其中有11名(73.3%)专家提出修改意见。第2轮发放15份问卷,回收15份,第2轮咨询的有效回收率为100.0%,其中有1名(6.7%)专家提出修改意见。

2.1.3 专家的权威程度 本研究咨询专家的学术水平、熟悉程度和判断依据分别为0.833,0.827和0.953,经公式计算得出Cr为0.871。Cr>0.7,提示结果可信度高。

2.1.4 专家意见协调程度 第1轮专家咨询各指标的CV为0.07～0.32,根据专家意见讨论修改后第2轮专家咨询各指标的CV为0.00～0.24。2轮专家咨询指标的Kendall′s W值分别为0.249,0.306(P<0.001)。具体见表2。

表2 专家咨询的Kendall′s W值及显著性检验

2.2 确定指标权重 本研究采用层次分析法和熵权法相结合确定各级指标的权重,结果见表3、表4。最终形成了4个一级指标、13个二级指标和36个三级指标的护理本科临床实习形成性评价指标体系。

表3 护理本科临床实习形成性评价指标体系(第2轮)

表4 基于层次分析法-熵权法的组合权重

3 讨论

3.1 指标体系的科学性和可靠性分析 本研究咨询专家具有一定的地域代表性和广泛性。专家的学历和职称均较高,具备丰富的理论知识和实践经验,保证研究结果的可靠性。2轮咨询问卷回收率均>90%,可见专家的关注度和积极性较高。Cr远大于0.7,提示研究结果有较高的可信度。第2轮专家咨询的Kendall′s W值>第1轮,均P<0.001,且2轮专家咨询后各指标的CV均<0.25,说明随着指标条目的修改,专家对指标意见趋于一致。此外,运用层次分析法和熵权法相结合确定各级指标权重,层次分析法属于典型的主观赋权法,根据专家评分确定权重,易受决策者主观经验的影响;熵权法则根据各指标传递给决策者信息量的大小来确定权重,客观性较强,但缺乏主观经验的指导[8]。因此,主客观法相结合确定权重,取长补短,能提高指标权重的客观科学性,使权重结果更加客观准确。

3.2 护理本科临床实习形成性评价指标体系内涵分析 本研究构建的指标体系从权重构成情况来看,职业素养的组合权重最高。职业素养是保证护理本科生将理论知识和实践技能有效应用于临床的关键内在性因素,也是决定个人行为和表现的关键[9]。因此,良好的职业素养是护理本科生进入临床实习的前提和保障。其次,主观能动性强调学生成为积极的意义建构者,主动收集和分析相关知识从而形成自主学习意识,是决定学生学习容量和质量的重要驱动力[10],与形成性评价主张学生对知识的主动探索、发现和对所学知识意义的主动建构观念相同[11],其组合权重居第2位,是护理本科临床实习的重要评价指标之一。最后,理论知识和临床实践能力的组合权重并列居第3位,我国旨在培养能够成为临床应用型、专科型的护理人才[12],要求不仅能系统地掌握护理学基础理论、基本知识和基本技能[13],还注重解决临床实际问题的能力。临床工作环境较复杂,为有效胜任临床实习工作,护理本科生具备高水平的理论知识和临床实践能力就显得尤为重要[14],这不仅是专业自身要求,更是进一步提高自身发展能力的前提条件。

3.3 护理本科临床实习形成性评价指标体系的实际应用 临床实习是学生培养专业认同感、提高自身能力和信心的重要阶段[15],是一个循序渐进的学习过程,对学生的能力要求也在不断提高。比如护理科研能力是指发现、调查、发展或完善、评价与护理学科相关的知识体系的能力,其具备能为病人提供优质护理服务、适应现阶段医学专业的发展优势不可忽视,对临床护士来说越来越重要[16]。但初入临床实习的护理学生科研意识及能力较薄弱,至临床实习后期对其科研能力的要求应不断提高。因此,本研究构建的指标体系在实际应用中应根据学生的不同实习阶段制订评价细则,以真实反映临床实习质量。

3.4 构建护理本科临床实习形成性评价指标体系的意义 我国护理临床实习评价以结果为导向的总结性评价为主,在一定程度上制约临床教学质量的提高[17-18]。形成性评价可为教学提供反馈,以改进和调整教学[19-20],但应用经验还较少,现有研究面临指标体系不完善、评价主观性强、可操作性差等问题[21-22]。本研究构建的指标体系具有较强的科学客观性,符合护理专业人才需求,同时打破了传统总结性评价的瓶颈,为护理临床实习评价提供新思路;其次,指标体系能帮助医院管理部门进行科学、持续性的护理临床实习质量评价监测,为把握临床实习重点环节、加强护理教学管理提供参考;再次,为规范临床教师的教学过程提供一套标准化工具,提高教学质量的同时促进教师队伍质量的提高;最后,指标体系帮助学生有效调控自己的学习过程,从被动的接受评价者转为积极的参与者,从而促进学习目标的达成。

4 小结

本研究以形成性评价理论为基础,结合文献研究及德尔菲法专家咨询,构建护理本科临床实习形成性评价指标体系。采用层次分析法和熵权法相结合确定指标体系权重,过程科学严谨,且该评价体系具有较强的科学性和可靠性,为护理本科生临床实习评价提供一定的参考依据,以提高护理临床实习质量。后续应将指标体系进行实证验证,在实践中探讨其可行性。