合理设计高等医学院校学生评教量表探讨

2014-10-20 09:18魏屹晗李敬永天津医科大学公共卫生学院办公室天津300070天津医科大学教务处通讯作者
基础医学教育 2014年10期
关键词:评教效度信度

丁 宁,张 浩,魏屹晗,李敬永 (天津医科大学公共卫生学院办公室, 天津 300070;天津医科大学教务处; 通讯作者)

高等院校教学质量评价是学校为增强教学质量、提高教师教学能力、检查教学目标达成情况的一种评价体系。它包括领导专家评价、同行互评、教师自评、学生评教等四个方面,而学生评教是其重要的方式之一[1]。

学生评教是指学生根据教师课堂讲授,通过自身学习体会和收获,对教师的课堂教学进行质量和效果的评价,内容主要包括教学态度、教学内容、教学方法和艺术、教学效果、教书育人等方面[2]。一般采取无记名方式填写评教量表(纸质版或网络版)。通过学生评教,促进教师端正教学态度、更新教学内容、调整改进教学方法,以期提高教学质量。

在学生评教过程中,最为关键的就是评教量表是否能够反映所要评价的各个方面。一般来讲,应用于实践中的量表要具有三个特性即具有可行性、效度和信度。可行性即调查量表具有简单性,条目少且容易理解,调查表内容为被测者所熟悉、认为有意义,调查表容易填写完成调查表所需的时间较少,一般认为5-30分钟较适宜。效度是指测量结果与试图要达到的目的之间的接近程度,反映调查的真实性,效度高表明调查结果真实地测量到调查对象的实际情况和特征。信度是对同一事物进行重复测量时,所得结果一致性的程度,即测量工具的稳定性或可靠性,一个具有良好信度的测量,使用在不同的主试者、评分者、时间、情境或使用类似的问题,其所得的分数应该接近相同或一致。我们以某医学高等学校学生评教量表为例进行了分析。

1 研究方法

1.1 调查对象 调查对象为某医学高等学校一年级至五年级的本科生共800名,教师共150名。

1.2 调查方法 收集近2年学生应用评教量表对某医学高等学校公共卫生学院教师评教结果。采用自行设计的问卷,问卷内容涉及对某医学高等学校学生评教量表中两级评教指标的评价。

评教量表中4个一级指标为教学态度、教学内容、教学方法和手段、教学效果。教学态度相关二级指标为:①老师遵守教学纪律,准时上下课,不擅自停课、调课;②老师对学生要求严格,组织课堂纪律;③能感受到老师很重视教学,课前准备充分,着装得体,精神饱满。教学内容相关二级指标为;④老师的教学目标明确,对教学内容娴熟,重点突出,层次分明;⑤老师授课内容安排合理,理论联系实际,恰当举例帮助学生加深对知识的理解(临床课程列举恰当病历与教学内容相符);⑥老师的知识面广,能结合本课程内容介绍相关的前沿知识和发展趋势。教学方法和手段相关二级指标为;⑦老师讲课使用普通话,表达清晰,语速适中,具有感染力;⑧老师能根据教学内容应用灵活多样的教学方法提高教学效果(如启发式、病例式、讨论等);⑨老师能有效地使用各种教学手段辅助教学(如多媒体、板书、模型等)。教学效果相关二级指标为;⑩通过听课,学生基本掌握了老师授课章节的知识要点和内容;瑏瑡老师与学生互动,能有效调节课堂气氛;瑏瑢老师的讲解、提问能启发学生的思路,使之独立思考,引发求知欲。

1.3 数据分析方法 数据录入整理后,采用SPSS软件统计分析。

2 结果

2.1 可行性分析 该医学高等学校学生评教采用网络方式,各学生宿舍都分布有校园网络,每位学生都可注册登录教务处网站进行网络评教。评教量表较简练,包含4个一级指标,每个一级指标又包含3个二级指标。回答所用时间在10分钟以内。在实际操作中,评教量表可达到100%回收率。通过以上分析,表明此评教量表可行性很高。

2.2 效度分析 从评教量表的内容效度(表面效度)来看,除了教学效果相关的二级指标瑏瑢外,学生和教师对评教指标的认识一致(P>0.05),均认为二级指标的评价符合一级指标内容,符合度均>95.7%,具有较高的内容效度(表面效度)。对于教学效果相关的二级指标瑏瑢,经统计分析,χ2=5.807,P=0.016,说明学生和教师的认同度差异有统计学意义(P<0.05),但是认同的符合度也很高,分别为96.2%和100%,见表1。

表1 学生和教师对评教量表中相关指标的认同 人(%)

2.3 信度分析 收集了2011-2012学年和2012-2013学年学生应用相同评教量表对35名公共卫生学院教师评教结果,分析相同课程同一位教师得分的相关性。不同学年相同学期教师总分相关系数分别为0.662和0.599(见表2),不同学年相同学期评教量表二级指标得分的相关系数均大于0.5(见表3),但仍有一些二级指标的相关系数没有在0.7以上,说明评教量表的重测信度一般。

表2 不同学期相同课程的评教结果的相关性分析(分,珋x±s)

表3 评教量表对教师评教结果的相关性分析(分,珋x±s)

3 分析与讨论

3.1 效度和信度的测量 量表的效度测量主要包括内容效度(表面效度)、结构效度、准则效度的测量。本次调查是从学生和教师的角度研究他们对学生评教的理解程度也即对相关指标是否能反映教师的教学态度、教学内容、教学方法和手段、教学效果,是对评教量表的内容效度(表面效度)的测量。

量表的信度测量主要包括复测信度(或重测信度)、复本信度、折半信度、内部一致性、专家评价法测量。本次调查研究主要是对评教量表的重测信度的测量。一般来讲重测信度测量时,两次测量的时间间隔最好在两周左右。但是,在我们调查研究的该医学高等学校,此评教量表近年来一直在应用,任课教师也较稳定,所以不同学年相同学期同一课程的任课教师的评教结果之间的相关性能够评价此评教量表的信度。

调查研究的结果显示,该医学高等学校学生评教量表具有可行性,具有一定的信度和表面效度,但是还有需要进一步改进的地方。在实际应用中此评教量表有一定的实际意义。

3.2 学生评教量表的现存问题及建议 通过本次调查研究发现,学生评教量表还存在一些问题,为了更好地发挥学生评教对教学的促进作用,必须要注重学生评教量表的合理性。

3.2.1 评教量表在应用以前必须有可行性、信度和效度的测量。其重要性是关系到评教结果的真实性、可靠性、稳定性。

3.2.2 在评价指标体系中有一些指标具有一定的学术性与专业性,使学生难以评价[3,4]。例如“能结合本课程内容介绍相关的前沿知识”,如果没有专业的深入研究不会了解所谓的前沿知识,特别是医学前沿知识让本科生来判断有些模糊,资料会缺乏真实性,需要进一步改进这样的指标。

3.2.3 评教指标中存在多重装填的问题即在一个项目中实际存在多问,有学者也曾发现此类问题[5]。例如二级指标“老师授课内容安排合理,理论联系实际,恰当举例帮助学生加深对知识的理解”中实际上包含了三个问题。建议分解二级指标,每一个二级指标只有一问。

3.2.4 进行多元化评教和多渠道评教,学生评教量表应与教师同行评教量表、专家评教量表相结合[2,5],并适当采用座谈会、学生会评价、建议栏、意见箱等形式[6],避免学生评教的片面性,充分体现评教的综合性、客观性。

3.2.5 从评教量表最终的结果来看,教师之间的差距很小,一般都在90分以上,这样对教师评价的可辨识度较差。建议完善评教指标体系设计,加强评教结果的可识别性。

3.2.6 评教量表是从学生的角度评价教师,应体现学生的主体地位,在指标中应该包括从学生接受知识的角度评价教师的指标[7,8]。另外,评教内容相关指标应该注重合理性,要充分体现教师水平[9]

3.2.7 加强评教量表中指标的客观性。除了应该有体现学生主动性的指标以外,还应该有一些客观指标。避免因教学以外的其他因素影响评教结果。

3.2.8 为了使学生评教量表真正反映真实资料,还需要加强学生评教的实施环节控制。加强学生教育,端正学生评教态度,让学生认真对待评教。例如控制学生的代评行为,因为代评行为会严重影响评教结果的真实性[10]。另外,还要控制好评教人数、评教时间等。

[1]刘子龙,谢玉爽.学生评教的发展与研究综述[J].当代教育论坛,2010,(2):60 -62.

[2]李巧萍,王军涛.高等院校学生评教的现状分析[J].北京电力高等专科学校学报,2010,(2):11 -12.

[3]王智勇,于越.中医院校开展课堂教学质量评价的研究与实践[J].中医药管理杂志,2010,18(2):133 -135.

[4]刘铁英,钱科颖,任佳伟,等.高校学生评教工作存在的问题及对策探析[J].中国科教创新导刊,2010,(8):248 -249.

[5]吕国光,王成军.高校学生评教中的问题及改进建议[J].大学:学术版,2010,(9):58 -59.

[6]黄建军,黄继东,尹加帮,等.美国、加拿大和日本高校学生评教的特点与启示[J].医学教育探索,2010,9(5):621 -625.

[7]王靖,陈怡君.高校学生评教指标体系初探[J].西安邮电学院学报,2010,15(5):170 -172.

[8]周继良.试论高等学校学生评教制度设计及改进[J].高教发展与评估,2010,26(1):21 -28.

[9]项丹丹,朱亚丽,倪霜玲,等.高校临床医学专业学生“网上评教”现况调查[J].中国高等医学教育,2008,(10):101 -103.

[10]蒋章营.高等学校专业课学生评教调查分析[J].安阳工学院学报,2010,9(2):105 -107.

猜你喜欢
评教效度信度
地方高校教学评价指标制订与评教数据分析
《广东地区儿童中医体质辨识量表》的信度和效度研究
慈善募捐规制中的国家与社会:兼论《慈善法》的效度和限度
高校学生网上评教的探索与实践
科技成果评价的信度分析及模型优化
高校学生评教的问题与对策——以中国矿业大学为例
耳鸣残疾问卷中文版的信度和效度检验及其临床应用
被看重感指数在中国大学生中的构念效度
外语形成性评估的效度验证框架
评教,别忘记站在教师的立场上