教学满意度调查问卷在外科学教学质量评估中的应用及新问卷设计

邓 姣,杨 柳,杨谦梓,苏斌虓,董海龙,雷 伟*

(1.空军军医大学西京医院，陕西 西安 710032；2. 空军军医大学基础医学院，陕西 西安710049)

为分析我校外科学教学质量，评估教学改革的作用以及进一步形成便于录入、便于分析的数字化调查方法，筛选分析了2008—2017年外科学学员调查问卷的总结报告，将统计资料详实可比的代表年份单独列出，分析了不同学年教学质量的变化趋势及原因，对比了两种评分方式的优劣并总结了学员建议，提出了未来改进防线。

一、资料与方法

1.资料来源。选取第四军医大学2008—2017级不同学年外科学教研室教学质量调查表的统计分析报告。

2.方法。根据满意度问卷对外科学整体教学质量的评估，分析了不同学年教学质量的波动并回顾其波动的原因。总结学员建议，对教学方法改进提出建议；提出问卷的局限性，并设计了新的电子问卷。

3.数据处理。将满意度结果按照：很满意=4；满意=3；一般=2；不满意=1；很不满意=0进行计分，并按照单项评分结果录入Prism 6.0，采用Two-way ANOVA进行分析。对比结果分析两种评分方式的差异和优缺点。

二、结 果

1.一般情况。每学年调查人员数、调查问卷数、教师人数和调查表项目数(见表1)。

表1 2007—2017年外科学教学质量调查报告基本情况

2.调查问卷的问题归类和分析。2008—2014年满意制评分采用百分制，按教师职称，对比历年教学质量变更(2013年资料缺失)；2015—2017年采用抽样调查满意制，评估整体教学质量，不针对教师个人。

3.评估结果分析。通过对2008—2017年历年教学质量调查总结报告的回顾，发现百分制全面调查虽然数据量大，但由于打分差距过小(大多数学生为教师打分均在95及以上)，但同职称不同年度及同年度不同职称间评分均无明显差异，且对个人无提示作用。而满意制抽样调查问卷数量虽小，但便于反应教学技术的不同方面的差别，且由于转换后属于等级资料，个体差别较大，可以出现统计学差异。在跨年比较及改进同类教学技术的方面有很大优势；缺点是抽样调查无法体现不同课程、不同授课教师之间的差别。而开放“点名”式的问题，可能可以发现榜样课程、榜样教师，但对于要改进的课程和教师无提示作用。同时，该问卷设计单一，除教学技术外，对教学表现、学习效果等方面均没有进行评价，在调查范围上有明显缺陷。而就分析结果来看，2016年教学在重点突出方面有明显下降(3.27±0.09降至2.92±0.13，P<0.05)，通过改进，2017年恢复正常水平(3.30±0.08)，且2017年启发式教学质量较2016年显著上升(2.92±0.13升至3.28±0.07，P<0.05)。相信以满意制进行评价和转化，在增加问卷数量(样本量)的情况下，可以在统计学上表现出更多的差异。

4.新型电子教学质量调查问卷的设计。使用“问卷星”应用，在线设计调查问卷，对以往我校教学质量评估的调查问题进行归类和增补，分成课程总体满意度，教学技术，教学表现力，学习效果和教师特征五个方面，结合生动、多样化的形容词汇，加深学生理解和接受测评时的耐心。由于每位教师讲授一个或几个章节的内容，本着学生匿名、评估不针对个人的原则，问卷没有关于教师姓名、职称等相关内容的设计，根据课程，将一个完整的教学内容作为一个模块，对不同课堂不同模块的教学质量进行评估，分析时可根据模块(所在教室和教学内容)追溯教师，可将个人结果和整体结果发给其个人，以促进其自身成长。具体问卷内容见开放测试网址：https://www.wjx.cn/jq/21343417.aspx。

三、讨 论

满意制问卷抽查，优势在于转化为评分时，等级资料差别明显，因此变化易出现统计学差异。但缺点在于每学期仅发放几十份，对课程整体评估，对教师教学质量和效果的评估则属于开放式，由被抽查到的学生写下表现比较突出的教师名字，因此调查报告总结中没有具有统计学意义的信息，或可量化评估每一位教师的教学情况。学生反馈由于抽样样本量较少，也存在偏倚。因此调查问卷改革的主要内容应在以下几点：(1)以课程模块为单位；(2)全面评估教师的教学内容、教学技术、课堂表现力和学生的吸收掌握能力；(3)充分发挥群众调查的优势，吸纳学生建议，采用无记名形式开放学生对每一位教师的建议和对整个课程设计和编排的建议，并反馈给教师和教研室；(4)问卷量大、信息全的同时便于填写和统计、分析。

总结设计新调查问卷时，应从以下几个方面入手[1]：(1)调查问卷整体设计目标：应注重应答率，从整体到细节，由浅入深，由客观到主观，优化填写感觉，以反映受调查人真实的感受，不仅要明确感兴趣的问题。(2)影响关键信息评估结果的因素问题：还要增补能的内容，如学生自己的学习方式，对该门课程的接受程度，以获得更加准确的信息。(3)如何设计问题：应注重填写人感受，包括简约，避免混淆，提问精确，确保该问题是可以理解并回答的，细节程度及敏感问题数适宜，以尽量使偏倚最小化。(4)应答格式：有开放式和封闭式(选择)两种，也可以混合，如填写选择某项的原因。但在选项的类别设计中，实际上描述性分级选项是应用最少的，因为记录和分析都相对困难。而由于个人理解和对课程要求的不同，学生回答时的判断标准可能有差异，导致对每个教师、每一节课的评价可能都不一样。但在电子问卷的设计中，将登记资料直接赋予打分性质，可以直接得出统计结果，并且在交叉分析的过程中可以直接筛选一个自变量和一个因变量，对比不同课程内容之间、单项评估内容之间的差异，也可以对整体效果进行分析和对比。(5)问卷长度可能会影响应答率和应答效果：BMJ一项研究显示较短的问卷(6 vs. 34)可能更容易获取更多的完整答卷[2]。为提高应答率但又能全面评估课程质量，我们最终设计了全长20个问题。(6)问题的排布：从普遍到特殊，从简到难，从实际到抽象，从封闭式题目开始，优先排布和主题关系最密切的问题及避免从个人问题开始。因此问卷排布为学生对课程总体的感受，到教师教学技术、教学表现力，再到学生个人的学习效果，最后对教师的特性(教师个人特征)进行总结。(7)问卷的发放方法和时机[3]：大学课堂教学效果问卷一般采用当堂发放或经电邮发放；发放频率可以从每章节结束后，定期(如周、月)或该门课程结束后发放。更改为电子问卷后，避免了分发、收集的繁冗工作，将二维码发送给各班组长，请其负责在每次课内容结束后提醒组员进行评估，以提高应答率。

本问卷在实施过程中可能还会针对学生的反应及建议进行修订，以期获得真实、可靠且有效的数据支持，调查结果反馈至全体教师以利今后改进，鼓励教师不断改进教学方法，使学生既能将重点内容在课堂上消化并记住、增进对临床病例的理解，又能从疾病角度出发掌握重点和常见疾病的外科学诊治原则，进一步提高我院外科学教学质量。