湖北省兽医现场流行病学基础培训项目效果评估

2023-09-06 07:11:32李婷婷沈朝建
中国动物检疫 2023年8期

甘 喆,李婷婷,裴 洁,沈朝建,黄 涛,谢 军

(1.湖北省动物疫病预防控制中心,湖北武汉 430070;2.中国动物卫生与流行病学中心,山东青岛 266032)

兽医流行病学是研究动物群体中疾病或其他健康相关事件的原因、分布和控制的一门独立学科,适用于动物传染病、非传染病、人兽共患病、食品安全、公共卫生等多个领域[1]。在国际兽医领域,兽医流行病学是国际贸易及疫病防控中的通用知识语言,是保障动物健康养殖的重要工具。而我国兽医流行病学起步较晚,20 世纪60 年代兽医流行病学才开始成为一门独立的学科,与国际水平存在较大差距,至20 世纪末开设了兽医流行病学课程的高校不足三成[2]。2010 年起,我国先后启动中国兽医现场流行病学培训项目(CFETPV)和兽医流行病学大学师资培训计划项目,湖北省参加CFETPV 项目培训的仅有9 人。

动物疫病的发生和流行受复杂的自然因素和社会因素影响,呈现区域性差异[3]。湖北省地处我国中部,动物疫病流行情况复杂。疾病的控制和预防需要采取多种方法,这些方法要求对兽医流行病学有充分的认识[4]。而湖北省系统掌握和使用兽医流行病学知识的专项人才严重不足。新修订的动物防疫法明确指出,动物疫病防控要从免疫预防转向控制、净化、消灭。在兽医基本素质技能清单中,兽医流行病学能力是世界动物卫生组织(WOAH)要求的兽医首要必备素质,更成为了WOAH 所定义的11 个专业能力之首。在实际工作中,监测、流行病学调查、动物疫病净化都是动物疫病预防控制机构的法定职责,需要用到兽医流行病学知识。为强化湖北省兽医流行病学能力建设,提升兽医技术人员动物疫病流行病学方案设计、现场调查、数据分析等能力,2023 年3 月,湖北省动物疫病预防控制中心依托农业农村部青岛培训基地,参照CFETPV 培训模式和要求,举办了为期2 周的湖北省兽医现场流行病学基础培训班,并对此次培训及时进行了效果评估,以期为指导湖北省兽医现场流行病学人才培训项目提供数据支撑。

1 评估的理论基础

CFETPV 项目于2019 年8 月基于Kirkpatrick培训效果评估理论,从反应层和学习层两个方面,构建了CFETPV 项目基础培训效果评估方法[5]。2019 年12 月,在国内外相关模型的基础上,借鉴全球流行病学培训与公共卫生干预网络培训项目质量评估方法和柯氏四级培训效果评估理论,创新性构建了管理层、反应层、学习层、行为层、结果层5 个层级的培训效果评估模型,并形成拥有三级指标的培训效果评估指标体系[6]。2021 年完成了对CFETPV 的效果评估[7]。

湖北省的培训效果评估工作尚处在探索阶段,仅在2018 年和2020 年做过培训效果反馈的问卷调查,但未能形成系统的培训效果评估体系。本次评估借鉴CFETPV 构建的培训效果评估模型,采用心理测量与评估相结合的思路,从满意度和知识掌握度两个方面,对湖北省兽医现场流行病学基础培训项目进行评估(图1)。

2 评估内容与方法

2.1 评估内容

培训总体满意度维度对应的是层级评价模型的反应层[8],是学员对培训项目的整体反应和评价,由于满意是一种心理状态,影响培训满意度的因素具有多元性与复杂性,因此通过计算9 项指标的满意度和综合满意度来进行评估[5]。学员对培训满意度评分,满分为5 分,其中1 分不好、2 分不太好、3 分一般、4 分较好、5 分很好。另外,在培训内容的实用性上,对培训的17 项内容进行了评价反馈,满分为5 分,其中1 分不实用、2 分实用性较低、3 分实用性一般、4 分比较实用、5 分非常实用。

知识掌握度评估对应的是层级评价模型的学习层[9],是学员对知识技能掌握情况的自我评估,通过课前和课后对17 项培训内容进行自评,计算17 项指标的掌握度和综合掌握度[5],从而达到评估的目的。学员对知识掌握度评分的满分为5 分,其中1 分不了解、2 分了解、3 分基本掌握、4 分熟练掌握、5 分可用于实际。

2.2 对象与方法

2.2.1 评估对象 2023 年3 月5—18 日参加湖北省兽医现场流行病学基础培训的所有学员,共计43 人。

2.2.2 评估方法 分别设计培训前和培训后的调查问卷,通过问卷星对学员进行问卷调查。调查的内容包括,学员的基本情况、学员对培训内容的自评分、学员对培训的评价、每天用于学习的课余时间等。由于本次问卷采用的是自编问卷,因此在回收问卷后,对问卷进行了信度和效度(简称信效度)验证。

2.2.3 数据分析方法 采用Excel 和SPSSAU(Version 23.0,https://www.spssau.com)等软件,对数据进行统计分析。培训前后的调查问卷信度采用Cronbach 信度分析[10],效度采用KMO 和Bartlett 检验[11];学员的基本情况,采用描述性统计;满意度和知识掌握度,则分别计算分项和综合项的满意度和掌握度[5];培训前后的学习效果的差异比较,采用配对t检验[12]。

3 评估结果

3.1 问卷调查基本情况

培训前后分别发送问卷43 份,各回收43 份,共计86 份,有效应答率为100%。具体的信效度结果见表1。

表1 培训前后的调查问卷信效度

3.2 学员基本情况

参与本次培训的43 名学员来自湖北省15 个地市,平均年龄33 岁,均为兽医相关专业的本科及以上学历,其中硕士及以上学历的学员占比为51.16%,中级及以上职称的学员占比为60.47%,具体基本情况见表2。

表2 培训学员基本情况

3.2.1 培训前知识获取情况 参加培训前,有93.02%的学员通过一定的途径了解过兽医流行病学知识,学员获取兽医流行病学知识的途径主要是通过工作后参加相关培训、学校期间学习和自查资料,具体结果见表3。

表3 培训前获取兽医流行病学知识的途径

3.2.2 课后学习时长 培训期间,有76.74%的学员在课后每天学习培训内容的平均时间>2 h,半数以上的学员平均每天课后用在学习培训内容上的时间为>2~4 h,具体情况见表4。

表4 平均每天课后学习培训内容的时间

3.3 满意度评估

3.3.1 整体满意度情况 培训后从9 项指标进行了满意度问卷调查。调查结果(表5)显示,学员对培训班的综合满意度为95.15%,单项指标的满意度为88.84%~100%不等,其中达到预期程度的满意度也在80%以上,自评较为满意。

表5 满意度评估结果

3.3.2 培训内容实用性评估 对17 项培训内容进行了实用性调查。结果(表6)显示,各项培训内容的实用性评分为4.26~4.93 分不等,其中Excel数据透视表、GIS 绘图和抽样方法的实用性较强。

表6 培训内容实用性的评价结果

3.4 知识掌握度评估

通过自评方式调查了学员对17 项培训内容的知识和技能的了解程度。调查结果(表7)显示,培训前学员的综合知识掌握度为38.00%,培训后达到58.36%。配对t检验结果(表7)显示,学员对17 项知识技能的掌握程度在培训前后均有统计学差异(P值<0.01)。

表7 知识掌握度评估结果

4 分析与讨论

4.1 问卷的信效度满足分析基本要求

本次培训依据CFETPV 培训评估体系,从满意度和掌握度两个维度对培训课程进行了评价。经问卷的信效度分析,培训前后的Cronbach α 系数均高于0.8,说明问卷回答的可靠性高;培训前的KMO 值介于0.6~0.7,说明研究数据比较适合提取信息,从侧面反映出效度一般,培训后的KMO 值高于0.8,说明研究数据非常适合提取信息,从侧面反映出效度很好。分析结果说明问卷质量较好,可以用于开展课程评价。

4.2 培训的整体效果较好

本次培训的学员综合满意度为95.15%,尤其是在教师的专业素质和教学态度上得到了学员们极高的评价;17 项培训内容实用性评价中,有14项平均分高于4.5 分,说明培训内容设计合理;培训前后17 项知识技能的掌握度差异显著(P值<0.01),掌握度的提升范围为11.16%~37.21%不等,说明取得了较好的培训效果,初步达到了培训设计的预期。回顾分析,主要是在以下几个方面做了充分准备:一是学员选择。本次参培学员平均年龄33 岁,硕士及以上占51.16%,中级及以上职称占60.47%,具有学历层次高、年富力强、专业水平较高等特点。学员组成涵盖省、市、县三级疫控系统人员以及企业、研究所等非疫控系统人员,来源丰富,为彼此的交流提供了多样的视角。二是课程设计。本次设计参考CFETPV 基本班课程要求,增加了GIS 实操的相关内容,既有CFETPV 培训的基本框架,又结合了湖北省的特色需求,得到了学员的一致认可。三是师资组建。本次培训邀请的老师全部来自CFETPV 项目培训师资,有着长期的教学和丰富的实践经验,并安排省内参加CFETPV学习的3 位学员作为助教,参与辅助教学和指导。

4.3 本次培训的局限性

本次培训对象覆盖了12 个市州12 个区县,另有5 个市州因时间冲突无法派人参加,各地参与人数不均,使得各地流调人才队伍发展可能存在不均衡情况。虽然17 项知识技能的掌握度从培训前的1.19~2.44 分到培训后的2.42~3.23 分有不同程度的提高,从了解(2 分)达到了基本掌握(3 分)的程度,但离实际运用(5 分)还有一定的差距。兽医现场流行病学强调的是“干中学”,故对学员们提出了实践作业要求,一方面巩固理论知识,另一方面也可以检验理论学习的效果。另外,由于本次基础班培训的内容覆盖面较广,难度以入门为主,在后续的培训设计上可考虑以专题的形式,针对不同的群体开展更有深度的培训。本次评估是在培训后立即进行,真正的培训产出和长期效果无法进行评价,需要后续进行跟踪效果评估。

5 结论

本研究基于CFETPV 项目基础培训效果的评估方法,与心理测量相结合,从满意度、知识掌握度两个方面,对湖北省兽医现场流行病学基础培训效果进行了评估。从评估结果看,学员对培训整体较为满意,对兽医流行病学相关内容的掌握有了不同程度的提高,培训的内容与学员的工作息息相关,具有较高的实用性。今后需要继续总结经验,跟踪后续培训效果,丰富教学形式,优化课程结构和时间安排,适时更新培训内容,扩大师资队伍,不断使培训向着科学化、多元化和持续化方向发展。