如何设计和应用背景因素问卷

2017-07-17 06:18贾玲赖寒
人民教育 2017年15期
关键词:信度量表指标体系

贾玲 赖寒

基础教育质量监测是提升教育质量的重要手段。为达到这一目的,基础教育质量监测中的背景因素问卷调查显得尤為重要。通过背景因素问卷,全面反映学生学业质量、身心健康、兴趣特长、品德、学业负担等多方面内容,同时收集与学生相关的学校、教师、家庭等信息,探索影响学生发展的相关因素,科学诊断当前教育教学存在的问题,提出改进教育教学的科学对策,从而促进学生的全面发展。

确定问卷调查的目的及问卷类型

编制问卷之前,需要确定问卷调查的目的,即希望通过问卷获取什么信息,并根据调查目的确定需要研发的问卷工具类型。监测的问卷工具一般包括学生、教师(校长)、家长三大类。

学生问卷一般作为学生学业质量的补充,用于更全面了解学生的学习与发展;教师问卷是为了调查哪些教师因素和学校因素会影响学生的学习与发展,以及这些因素的现状如何;家长问卷是为了调查不同群体学生的发展差异,以及家庭环境对学生学习与发展的影响。

调查问卷应包含哪些指标

由于基础教育质量监测希望通过背景因素问卷调查全面反映学生的综合素质,并了解影响学生发展的众多因素,涉及的范围较广、内容繁多,需要对多个指标体系进行筛选。

一是参考国家、地方相关文件或政策。例如,《教育部关于推进中小学教育质量综合评价改革的意见》提出中小学教育质量综合评价指标框架,为设计学生综合素质评价的指标体系提供了参考;同时,也可设计指标体系查看相关政策的落实情况,如学校规范办学、课程开设、学生负担等状况。

二是根据学生的年龄特点考虑学生发展的重要因素。不同年龄阶段学生的指标体系设计存在差异。例如,相比小学生而言,中学生发展中的早恋行为、考试焦虑、网络成瘾等情况应得到更多关注。

三是考虑对学生发展有显著影响又可改变的相关因素。例如,学校的整体氛围、教师的教学行为、家庭的教养方式等。通过监测结果反映哪些因素对学生有积极的促进作用,哪些因素会阻碍学生的发展,从而引导学校、教师、家庭进行改变。

四是考虑影响学生发展差异、教育公平等因素。例如,从学生层面调查不同性别学生在不同学科发展方面是否存在差异,留守儿童与非留守儿童是否存在差异。从学校层面调查城市、乡镇、农村学生的差异是否显著。

五是关注社会热点问题。例如,校园欺凌现象。

对所有筛选出的指标体系进行整理,一般包括一级指标、二级指标和测量指标。同一级指标是并列关系,应相互独立;上下级指标则是包含关系,下一级指标是将上一级指标体系更加细化。表l为学生问卷中数学学习相关问题的部分指标体系设计。

编制题目应注意的问题

有了指标体系后,需要对具体题目进行设计和编制。一般分为两种情况:一是查找指标体系中已有的国内外通用的信效度较好的量表,并对相关内容进行本土化修订后直接使用。二是对需要自行命制的题目和选项根据题目设计原则进行命制。

由于基础教育质量监测问卷调查的最主要被试为中小学生,阅读能力和理解能力受到一定限制,同时间卷会涉及不同地区、不同背景的家长,水平参差不齐,因此在问卷题目设计时需要满足以下原则:(1)语句尽量简单、简洁;(2)语义清楚明了,无歧义;(3)避免双重否定;(4)不能带有倾向性,不直接问敏感性问题;(5)选项之间不存在包含关系;(6)问题的排序应由易到难,层次分明,合乎逻辑,先行为后态度;(7)设计必要的测谎题。表2为存在问题的几个案例。

如何对题目进行质量分析

题目编制完成后,对问卷进行预试,预试对象应是正式监测对象全体的一个代表性样本,一般要确保每道题目至少有300个符合要求的预试对象参测。预试目的是通过数据对问卷的质量进行分析,对质量不高的题目再修订。一般质量分析包括量表信度分析、选项分析等。

一是量表信度分析。预试后,计算问卷中所有量表的信度。信度系数越高,则表示测验结果越一致、稳定、可靠。信度系数的标注如下:(l)信度系数>o.85,说明量表信度非常好;(2)信度系数在o.7-0.85,说明量表信度比较好;(3)信度系数在o.6-0.7,说明量表信度一般;(4)信度系数

信度分析结果显示,师生关系这6道题总体信度为o.58(CronhachsAlpha系数为o.58),说明量表信度不高,需要修订。进一步对量表中的每道题进行分析,结果如表4所示,最后一道题与其余题的相关度最低,且删除最后一道题后,量表的总体信度会提高到o.838,所以建议删除最后一道题目。最终该量表由前5道题构成。

二是选项分析。预试后,计算问卷中所有非量表型题目每一个选项的选择百分比,通过选项分析判断问卷的题目或者选项编制是否合理。

例1:数学老师给你们留的家庭作业主要有:(单选题)

A.需要书写的作业

B.阅读书籍

C.口头作业

D.体验式作业

E.实践性作业

选项分析显示,本题为单选题,但是选择多个选项的学生比例较高,有超过28%的学生选2个或2个以上的选项,所以建议将题干改成“数学老师给你们留的家庭作业最主要是”,并在“最”下面加着重符,或者直接将此题修改成多选题。

例2:周一至周五,你每天放学后学习数学的总时间是:

A.O小时

B.30分钟及以内

C.半小时-1小时

D.1小时-1个半小时

E.1个半小时-2小时

F.2小时-3小时

G.3小时以上

选项分析显示,选择F的学生比例只有3.5%,选择G的学生比例只有o.2%,这些选项选择的比例较低,说明G选项设置的意义不大,建议将F和G合并。

猜你喜欢
信度量表指标体系
2022城市商业魅力指标体系
自助图书馆选址评价指标体系研究
生态旅游景区服务场景的量表开发研究
积极人格教育量表编制与现状调查研究
应用技术大学教师评价指标体系构建与应用
交通强国建设评价指标体系
CSE阅读量表在高中生自我评价中的有效性及影响因素
议论文评价量表的设计思路与使用方法
大学生积极自我量表初步编制
论高职英语多元化综合评价模式的效度与信度