胡艳琼,陈先华
·护理教育研究·
护理专业课程教学形成性评价指标体系权重赋值研究1)
胡艳琼,陈先华
[目的]对已建立的护理专业课程形成性评价体系指标进行权重赋值。[方法]对工作5年的护理专业教师进行调查,利用层次分析法和专家评分法相结合的方法来计算各指标条目的权重系数。[结果]在保证信度和效度的前提下,通过3轮调查计算出护理专业课程形成性评价体系指标的权重系数。[结论]根据体系的特点将层次分析法和专家评分法有机结合的方法应用于护理专业课程教学形成性评价指标权重赋值研究,保证此指标体系的科学性。
护理专业课程;形成性评价;指标;权重
形成性评价和终结性评价是教育评价中两种不同的方式,他们在教育评价中的地位是同等重要的。虽然目前有研究已表明形成性评价有利于提高护生的学习能力、学习效果、沟通能力以及学生的全面发展等[1-3],但是护生仍然会更加重视终结性评价[4]。对形成性评价的研究将会打破这种以终结性评价为主导的教育评价,Rushton[5]也呼吁要改变现行的终结性评价为主导的评价文化。目前,形成性评价在我国护理教育的研究多为应用性研究,缺乏科学的、系统的理论与体系[6,7]。在护理专业课程教学中建立形成性评价体系是促进形成性评价在我国科学化、规范化发展的一个重要里程碑。在护理专业课程教学形成性评价体系的研究中,指标权重的研究是一个非常重要的步骤,它可以区分各个指标在这个体系中的重要程度,还可以使指标体系在应用中进行量的分析。现将层次分析法和专家评分法有机结合起来对护理专业课程教学形成性评价体系指标权重进行赋值,结果如下。
1.1 对象 对华中科技大学同济医学院、湖北中医药大学、武汉科技大学、郑州大学护理学院14名工作5年的教师进行调查,均为女性,年龄36.6岁±8.3岁;职称:副高级5人,中级8人,初级1人;学历:博士研究生2人,硕士研究生9人,本科3人。
1.2 方法
1.2.1 层次分析法 一级、二级指标权重的计算采用层次分析法。列出一级、二级指标两两对比的相对重要性评分调查表,评分标准如表1。回收后再转化为两两对比的判断矩阵。例如:一级指标中师生因素、教学过程和教学效果3个指标,建立两两对比判断矩阵如表2。
表1 目标树各层次评分标准
表2 两两对比判断矩阵
1.2.2 专家评分法 三级、四级指标采用专家评分法。各位专家直接给各个指标打分,0分代表不重要,100分代表极为重要,所有评分均为整数。
1.2.3 Delphi法 通过几轮的信函或电子邮件调查征求教师意见,然后对每一轮意见进行汇总并在下一轮中反馈给各位教师,如此反复得到一个较为可靠或稳定的结果。
2.1 层次分析法确立一级、二级指标权重 发出问卷11份,回收问卷11份,回收率100%。一般认为一致性检验(CR)<0.1,则该专家评分的判断矩阵一致性是可以接受的[8]。根据Yaahp 5.2分析软件,删除2份判断矩阵不一致的问卷,并计算出一级、二级指标权重及组合权重并进行排序。
2.2 专家评分法确立三级、四级指标权重 发出问卷14份,回收13份,回收率92.86%。将每一份问卷的专家评分进行归一化处理,计算出各个指标的权重及组合权重值并进行排序。该轮回收的数据通过SPSS18.0分析,Kendall’sW为0.193。一般和谐系数在0.5以上可认为专家评分的一致性较好。所以,继续进行反馈调查,第2轮的调查中Kendall’sW为0.711,专家评分的一致性较高,专家评定法得到的和谐系数见表3。采用第2轮调查数据计算权重值。
表3 专家咨询的和谐系数及其统计学检验结果
2.3 指标体系及权重 一级指标包括3项。A1:师生因素,权重0.339 7,包括教师因素、学生因素两个二级指标;A2:教学过程,权重0.361 4,包括教学准备、教学活动两个二级指标;A3:教学效果,权重0.298 8,包括教学目标、教师教学评价、学生对教学的评价3个二级指标。其二级、三级、四级指标权重情况见表4。
表4 护理专业课程教学形成性评价体系指标权重及排序
3.1 形成性评价体系指标权重系数 本研究结果显示,在一级指标中教学过程是处于首要地位的,其次是师生因素和教学效果。这与形成性评价也被称为过程评价的内涵是相符的,这也提示在护理教学过程中引入形成性评价的精髓就在于教学过程的设计与组织;在二级指标中教学准备的权重系数最高,其次是教师因素和教学活动。这与教师在教学活动中教师处于主导地位有关。教学准备的上级指标教学过程的权重系数在一级指标中也是最高的。可见,指标权重系数的内部关联性也是很强的。三级指标中,权重系数处于前3位的教师的教学能力、专业素质、教学态度均在二级指标教师因素下。这体现了教师在形成性评价过程很重视自身因素的影响;在四级指标中,合理选择教学方法的能力、护理教师的专业知识与技能和教学组织能力位于前3位。说明不仅教学能力在整个教学过程中非常重要,同时教师自身的专业知识背景也是教学效果的重要影响因素。
3.2 形成性评价体系权重系数的研究方法 层次分析法是将定量与定性结合起来通过统计学方法来确定权重系数,利用层次分析法确定权重系数需限制指标体系层次和指标条目的数目[9]。层次分析法可以通过一致性检验的方法来保证专家判断结果的信度和效度[10]。专家评分法是通过各位专家根据自身的经验对指标条目的重要性进行直接评分。这种方法可以利用专家的知识背景和经验,但也存在着主观性强的缺点。一级、二级指标为本体系的框架而且指标条目较少,适合用较为客观的层次分析法来确定权重系数。三级、四级指标体现了护理专业特色,必须利用专家的知识背景和经验来确定权重系数。国内指标体系构建中很少将两者结合来确定权重,这也是本研究的创新点之一。
3.3 形成性评价体系及权重系数的应用 护理专业课程教学形成性评价体系是对教师教学效果的评价,其评价的结果可以帮助教师修正教学计划和教学活动,以期提高教与学的效果。从二级指标中大体将指标体系的应用分为教师自评、学生自评、同行评价、管理者评价、学生评价。教师因素为教师自评条目;学生因素为学生自评条目;教学准备、教学活动为同行评价条目;教学目标和教师教学评价为教学管理者评价条目;学生对教学的评价为学生评价条目。三级、四级指标为二级指标展开的条目,其作用是通过具体条目帮助评价者进行评价。评价问卷
可以根据体系的不同评价者进行设计,可以是十分制或者百分制,最后根据本体系的权重系数进行计算来综合评价。
总之,对护理专业课程教学中形成性评价体系的指标条目进行权重赋值是整个体系确立的关键步骤,将给应用者提供直接指导。
[1]Ghanzi F,Henshaw L.How to keep students nurses motivated[J].Nursing Standard,1998,13(8):43-48.
[2]王庆华.形成性评价在护理管理学教学中的应用[J].护理学杂志,2011,26(14):77-78.
[3]赵志清,刘以娟,陈先华,等.形成性练习在急救护理教学中的应用[J].护理研究,2010,24(9B):2415-2416.
[4]Duers LE,Brown N.An exploration of student nurses’experiences of formative assessment[J].Nurse Education Today,2009,29(6):654-659.
[5]Rushton A.Formative assessment:A key to deep learning?[J].Medical Teacher,2005,27(6):509-513.
[6]胡艳琼,陈先华.护理教育中形成性评价的研究现状与展望[J].护理学杂志,2010,25(10):95-97.
[7]郭晓霞,隋树杰,孙晶.形成性评价在我国教学评价中的应用现状[J].护理研究,2007,21(11A):2840-2842.
[8]孙振球.医学统计学[M].北京:人民卫生出版社,2002:510-514.
[9]张翠萍,李笃武,胡善菊.层次分析法在护理人员绩效评价指标体系构建中的应用[J].护理学杂志,2010,25(13):14-16.
[10]刘兴太,杨震,程洪海,等.层次分析法判断矩阵在确定科研绩效评价指标权重系数中的应用[J].中国科技信息,2008(19):185-186.
Study on weight assignment for nursing professional curricula teaching formative evaluation index system
Hu Yanqiong,Chen Xianhua
(
Tongji Medical College of Huazhong Scientific and Technical University,Hubei 430030 China)
G642.0
C
10.3969/j.issn.1009-6493.2012.19.038
1009-6493(2012)7A-1804-03
1)为2008年省级教学研究立项项目,编号:2008054。
胡艳琼,护师,硕士研究生在读,单位:430030,华中科技大学同济医学院;陈先华(通讯作者)单位:430030,华中科技大学同济医学院。
2011-12-21;
2012-06-18)
(本文编辑 李亚琴)