廖仕贤,邓 辉,朱谢鹤,胡荣党
(温州医科大学附属口腔医院,口腔医学院, 浙江 温州 325027)
·教学研究与管理·
浅谈如何保证问卷调查的质量
廖仕贤,邓 辉,朱谢鹤,胡荣党@
(温州医科大学附属口腔医院,口腔医学院, 浙江 温州 325027)
问卷调查作为获取信息的一种重要手段得到了越来越广泛的应用。但在实际操作过程中,由于诸多因素影响,问卷调查结果很容易与真实情况发生偏差,影响研究结论,进而影响相应的决策制定。因此,保证问卷调查结果的可靠性意义重大。本文从问卷设计、调查员执行能力、调查对象的配合程度3个方面探讨如何保证问卷调查结果的可靠性。
问卷调查; 问卷设计; 调查员; 调查对象
Abstract: Questionnaire survey as an important means of accessing information, which has been more widely used recently, but there are many influence factors in the course of the investigation, which lead to the survey results do not match with the real situation, which will impact the research findings, even will affect the corresponding decision-making. Therefore, to ensure the reliability of questionnaire results is of extraordinary significance. In this paper, we will discuss the method of ensuring the reliability of the survey results in detail according to our previous experience in questionnaire design, implementation capacity of investigators and the degree of cooperation of investigation targets.
Keywords: questionnaier survey; questionnaire design; investigators; investigation targets
问卷调查是研究者以问卷为载体,通过所选定调查对象的答卷,来达到了解某一情况的研究方法。问卷调查能在较短时间得到想要了解的真实信息,且成本低廉。目前,问卷调查得到了越来越广泛的应用,如消费调查、民意测验、医疗服务满意度调查、学生课堂质量调查、经济预测等。但现实的调查过程中,由于诸多因素影响,问卷调查结果与真实情况容易发生偏差,影响研究结论,并进而影响决策的制定。因此,保证问卷调查结果的可靠性有着重大意义。本文根据我们的实践经验,对如何保证问卷调查质量浅谈几点看法。
问卷调查作为科学研究常用的一种方法,在当前的科研中占了相当的比例。2013年6月中国学术期刊网络出版总库(CNKI中国知网),以“问卷调查”为主题词实行全文精确检索,共检索到各类论文223913篇。但是这类文献中所做的问卷调查研究很多并不规范,如对问卷调查的对象没有区分、样本的数量没有交代等,直接影响到这些研究结果的可信度。
在现实中,很多研究人员常直接对问卷调查的统计结果进行分析、推断和总结,很少对调查结果的可信度和有效度进行论证,因而使研究结论的正确性大打折扣,少数甚至与客观事实不符[1]。此外,由于问卷设计没有严格遵循程序,问卷的信度和效度也得不到保证,问卷质量不高;问卷发放到回收的过程缺乏监督和规范,导致调研结果数据的质量没有保障[2]。同时,还有相当的受访者对问卷调查并不配合,常敷衍了事,答卷不全甚至直接拒答,致使问卷的回收率或有效问卷的数量偏低。因此,使问卷调查规范化,保证问卷调查结果的可靠性,是问卷调查的使用者必须解决的问题。
问卷作为整个调查实施的关键环节,其设计的好坏直接影响问卷调查结果,因此必须确保问卷的科学性以及信度和效度。笔者认为,要做好问卷,必须注意下列事项:
2.1.1 认真做好前期规划 在设计问卷之前,要全方位了解所要调查项目的研究背景,明确此次调查目的及所要收集的信息,并确定调查对象。同时成立问卷设计小组,成员最好来自多个不同专业,通过集体智慧,来完成问卷设计,以避免问卷内容的局限性。问卷题目设计要紧扣调查目的,问卷内容应从当前实际出发,充分考虑调查时间、调查环境以及调查对象的年龄结构、文化水平、职业等对调查结果的影响,例如问卷题目包含受访者未曾经历过的事情,受访者如给予回答,那么其真实性肯定不高。
2.1.2 明确题型,规范语言表述 对于问卷,首先要明确说明题型(单选、多选),尽量避免开放式的问题,因为在实际问卷过程中经常遇到调查对象嫌麻烦而不愿回答的情况。提问要尽量避免否定式问题,如开展儿童口腔卫生现状的调查时,问卷题目“睡觉前是否不吃糖果类食物?”,在调查实践中经常有受访者把这否定句看成肯定句。此外,还要避免出现需要受访者计算的题目,比如在进行学生消费观调查时,题目问及“您平均每月用于购买学习资料的费用占您月开销的比重有多少?”,这些需计算的问题往往会引起调查对象的反感。对于一些个人隐私或其他敏感性问题,最好也不要提及,以免调查对象拒绝接受调查。但当敏感性问题不可避免时,采用文献[3]所述的沃纳和西蒙斯的随机化回答技术进行设计,尽量减少给受访者带来心理负担。同时,在问卷开头最好加上一小段言简意赅的说明,除了说明本次调查的目的、意义,调查者的身份、监督电话以及答卷的要求和注意事项外,还附上对受访者隐私的保密承诺,以能让受访者放心地接受调查。另外,为进一步验证问卷调查结果是否合格,我们可以参照文献所述方法[4-5]在问卷中穿插校验型问题,以识别虚假答卷。
对于问题答案的选项要涵盖所有可能的情况,而且答案不能凭空想象,语义不重叠或包含。不过为了避免调查对象对问题的想法和我们所提供的选项不一致,研究者在设计问卷时最好在选项中再增加“其他”或“说不清”等类选项,但是我们在设置这类选项时一定要确保其被选择的概率很低。此外,问卷语言表达要符合大多数人的习惯,通俗易懂,无歧义,不带任何倾向暗示。问卷题目不宜太长,题量也不宜太多,对于一些可有可无的问题,坚决去掉,对于题中出现的专业术语要提供必要的注解。
2.1.3 合理编排题目顺序 整个问卷题目要按逻辑思维顺序编排,先易后难。比较能引起受访者兴趣的问题在前,校验型问题放在中间或靠后,敏感性问题以及开放性问题则尽量放在最后。例如我院学生之前做的几次问卷调查,因为不注意问卷题目的编排,把一些涉及个人信息等的敏感问题放在最前面,结果使得个别受访者一开始就中止答题,从而大大地降低了有效问卷的数量。
2.1.4 全力做好预调查和评估 问卷设计好后,要先选择和调查目标对象特征相近的人群进行预调查以检验问卷内容能否满足研究需求(语言是否通俗易懂,结构是否合理,题量是否合适等)。并根据文献报道的方法[1, 6]进行问卷有效度和可信度分析。如果可信度和有效度不高,则须对相应的问卷题目进行修改,然后再进行评估,直至结果满意为止。
一份设计完美的问卷只有付诸于实际调查行动才能体现其真正的价值。问卷怎样执行及执行得如何,直接关系到调查结果的质量。调查员作为问卷调查执行主体,其素质的重要性不言而喻。然而在现实调查中,很多问卷调查员对调查的程序认识模糊,甚至部分人员对调查目的、对象以及所要收集的信息都不甚了解。他们只一味追求问卷的回收率,而对调查过程执行的质量并不很在意,因此其调查结果得出的结论很可能与客观实际不匹配。
要保证问卷调查顺利进行,必须要有合格的调查员,即敬业、具备较宽广的知识面、较丰富的社会阅历和较熟练的访谈技巧的调查员[7]。并且一位好的调查员往往能调动调查对象的兴趣,能打消其疑虑,使之配合调查。但现实中的调查员往往都是临时借调而来的非专业的调查员。例如我院在组织问卷调查活动时,经常会选择有责任心、沟通能力强,并且有相关专业背景和调查经验的学生充任调查员,但是具备这些条件的学生数量甚少。因此我们在问卷执行之前,都会对这些“调查员”进行培训,让其了解调查项目的背景,明确调查目的和要求,熟悉问卷的结构和内容,了解所要调查对象的一些信息。此外还进行必要的访问技能、应变能力和沟通技巧的培训,并在培训中让大家进行模拟演练。比如当调查过程中出现尴尬局面时,调查员要能及时调节现场气氛,让调查对象能继续配合并客观真实地回答问卷。在我院问卷调查实践中发现,经过培训的调查员对调查更负责、更有耐心,言谈举止、沟通能力和专业水准也更胜一筹。
当然,为保证调查更好地开展,我们建议要对调查员进行监督和考核。对表现突出的调查员(比如问卷回收率和回收的问卷有效率都很高的调查员等)给予奖励,以此激发调查员“想干好”,并且“能干好”的热情,使之能保质保量地完成调查任务。
2.3.1 调查对象的选择 调查对象是调查研究的重点,调查对象的选择是否合理将直接影响调查结果的准确性。我们总结多次的问卷调查实践发现,调查员在“选择调查对象”上出现的问题主要体现在以下两个方面:
一是容易选择人情对象。由于人情对象利于沟通,问卷回收率高,因此有调查员会选取自己的亲朋好友或者同事、下属作为调查对象,但因有人情因素的干扰,从而影响了调查的准确性。
二是选择的调查对象不具代表性。例如对农村百姓就医行为的问卷调查,比较富裕的和贫困群体的情况即不一致,高文化程度和低文化程度群体的行为和回答也不一样,如果只选择比较富裕的或文化程度较高的进行调查,其结果显然是有问题的。因此选择对象时要考虑各类不同人群,以使调查结果能反映全面情况,并且在条件允许的情况下要尽可能多地收集样本。
2.3.2 改善调查对象的配合程度 调查对象是否配合也是影响调查结果准确性的因素之一。调查对象没有义务牺牲自己的时间去配合完成调查,调查员也没权利要求别人必须接受调查。针对调查对象不肯接受调查或对问卷调查敷衍了事,答非所问的情况,我们有如下几点建议:
一是积极做好事前宣传。调查对象范围一般在调查之前就已确定,因此很有必要在调查开始之前先进行宣传以让公众了解调研的目的,消除顾虑,获取信任,提高其参与热情。并且在调查过程中要积极向调查对象宣传此次调研的保密规定,以打消其疑虑并获取支持。
二是确保调查对象充足的作答时间。例如我院之前做的“课堂教学质量”问卷调查选择在下午课间时,因课间休息时间很短(一般5分钟),从而造成学生匆忙应付。有时选择在上午第五节课后放学时(时间已是中午12点),因学生急着要去吃饭所以同样造成了学生仓促应付或敷衍了事的局面,影响了调查结果。后来我们为了保证学生有充裕时间答题,特地减少了题量并把调查时间放在早上3、4节课之间(因这课间有15分钟的休息时间),从而确保学生能从容作答。
三是给予调查对象适当的物质奖励。问卷调查对象与调查员一般彼此为陌生人,并且调查对象对调查缺乏了解和信任,因此很容易产生提防心理而拒绝调查。还有些人因“事不关己,高高挂起”而拒绝接受调查,即使接受,也显得很勉强,敷衍了事,尤其对一些敏感问题更是刻意隐瞒内心想法而不做客观回答,以上情况在网上调查或邮寄调查中表现的更为突出。因此针对有较多人不愿接受问卷调查的状况,我们特地划拨经费去购买礼品作为对接受调查者的奖励,此举的确大大提高了调查对象参与问卷调查的积极性,取得了较好的效果。
问卷调查作为一种有效收集信息的手段,在一定程度上影响着很多决策的制定,因此在做问卷调查时务必要从实际出发,保证调查过程的规范性,确保调查结果数据的可靠性,从而充分发挥问卷调查的作用,为社会发展做更大贡献。
[1]茹鹏新, 张鹏. 关于问卷调查可信度计算分析方法[J]. 新疆广播电视大学学报, 2011, 15(51): 46-50.
[2] 静恩英. 调查问卷设计的程序及注意问题[J]. 湖北民族学院学报(哲学社会科学版), 2009, 27(6): 99-102.
[3] 纪竹荪. 随机化回答技术调查“敏感性问题”的博弈分析及设计改进——对一次沃纳方法调查实践的分析思考[J]. 统计与信息论坛, 2008, 23(5): 82-86.
[4] 徐长恩, 王晓萍, 张华, 等. 设计校验型问题提高问卷调查质量[J]. 中华医学科研管理杂志, 2005, 18(6): 341-342.
[5] 陈晓萍, 徐淑英, 樊景立. 组织与管理研究的实证方法[M]. 北京:北京大学出版社, 2008:172-173.
[6] 曾五一, 黄炳艺. 调查问卷的可信度和有效度分析[J]. 统计与信息论坛, 2005, 20(6): 11-15.
[7] 曾琪. 谈谈问卷调查法在实际运用中的几点认识[J]. 消费导刊, 2008, (21): 242.
Howtoensurethequalityofquestionnairesurvey
LIAOShixian,DENGHui,ZHUXiehe,HURongdang@
(School and Hospital of Stomatology, Wenzhou Medical University, Zhejiang 325027, China)
G465
A
1672-0024(2014)01-0001-03
廖仕贤(1982-),男,浙江瑞安人,硕士,助理研究员。研究方向:教育管理
胡荣党 353978071@qq.com