变权层次分析法的高校英语教学效果评价

贺玉婷

(西安思源学院 英语教学部， 陕西 西安 710038)

0 引言

大学英语教学是针对高校中各专业学生设置的一项基础类型课程[1]。英语课程的开设有助于高校扩大学生知识面，提升学生素质教育，培养对社会有用的综合型复合人才，英语教学在整个高校教育体系中担负着重要的角色，因此高校英语教学效果直接影响高校对相关人才的综合培养[2-4]。构建合理有效的高校英语教学效果评价体系是目前各高校重点研究的目标。在已有研究中通过问卷调查法对数据实行分析，构建指标体系，使用定量分析方法对这些指标体系实行评价，设定一种评价教师教学效果的标准，具有极强的现实意义[5]。有研究表明，通过提升学习者的综合认知能力提高英语教学效果。在该研究中认为，如果部分英语基础较差的学生把注意力都放在理解英语词义与语义上而忽视了对专业知识的学习，这种情况导致教学效果较差，若要改善教学效果应该从提升学生学习能力出发[6]，但是这种方法过于强调学生学习主观性，忽略了教师的主导性。

层次分析法常常被用于解决复杂的定性定量相结合的问题，但是在实际过程中常常会出现方案逆序问题。很多学者通过研究发现，对固定权重进行排序时使用的复合排序方法可能是导致这一情况发生的主要原因[7]。准则、方案、指标这些内部因素常常包含许多动态性、非线性关系，即使做出相关近似假设，也不能保证评价方案是合理适用的[8-9]。综上所述，使用变权思想改进固权层次分析法，克服传统层次分析法存在失败可能性的问题。

本文将层次分析法作为基础，结合变权综合评估，分析高校英语教学效果评价。

1 基于变权层次分析法的高校英语教学效果评价

1.1 建立指标体系

将学生作为中心，突出其评价中心地位，从学生角度出发构建高校英语教学效果评价指标体系[10]。按照高校中英语教学特点，教学效果评价指标体系结构如图1所示。

图1 教学效果评价指标体系结构

(1) 教学态度：高校教师教学过程中工作态度、敬业精神等素质特征经教学态度体现。在高校实际教学时，学生与教师之间的交流是双向的，教学任务中，教师主导课堂教学流程，学生是教学的主体，教师需要时刻注意与学生之间的交流。从教学责任感、课堂准备情况以及教书育人四个方面对教师的教学态度实行评价[11]。

(2) 教学水平：高校教师教学过程中知识面程度、业务水平等本质特征经教学水平体现。高校教师英语教学水平主要从口语水平、教学内容与教学用语三个方面实行评价，根本目的是为了评价教师课堂教学内容以及对相关领域是否熟悉；课堂教学是否具有条理性与逻辑性；在教学工作完成后，学生是否接受并理解教学内容等。

(3) 教学方法：教学方法与教学内容无关，鼓励教师在教学过程中不断改革和创新，避免教学方法过于模式化。目前高校也越来越认同教师之间存在个体差异，要求教师教学具有自己的风格。对于教学方法的评价主要从教学手段、教学方式和互动性3个方面展开。

1.2 建立比较判断矩阵

指标体系建立完成后，需要专家判断和比较一级指标层和二级指标层因素，以此作为依据构建判断矩阵。针对一级指标评价范围由等级确定，实际评价结果由作为教学主体的学生确定；针对二级指标需要根据实际教学效果实行评价[12]，依据教学效果可以划分为5个评价类别。

A类：评价状态为优，教学效果各项指标都符合，评分为80-100分。

B类：评价状态为良，只有个别指标没有满足，评分为60-80分。

C类：评价状态为较好，能够满足大多数评价指标，评分结果为40-60分。

D类：评价状态为合格，仅能满足极少数评价指标，评分结果为20-40分

E类：评价状态为不合格，基本不能满足评价指标，评分结果为0-20分。

由于高校英语教学效果评价中学生是评价中心，因此本文邀请10位高校大学生，依据1-9比例标度法对指标体系进行成对比较打分。1-9比例标度法含义如下：标度为1时，表示两因素相比重要程度相同；标度为3时表示两因素相比，一个稍重要于另一个；标度为5时表示两因素相比，一个明显重要于另一个；标度为7时表示两因素相比，一个强烈重要于另一个；标度为9时表示两因素相比，一个极端重要于另一个；标度为2、4、6、8时表示相邻标度的中间值；标度倒数值表示假如因素x和y因素相比较得到axy，那么因素y与因素x相比较得到1/axy。将评价指标两两比较得出判断矩阵，如式(1)—式(4)。

(1)

(2)

(3)

(4)

式中，G代表经计算后各判断矩阵的权重。

1.3 一致性检验

U是特征向量，一般与判断矩阵中最大特征根μmax相对应，对判断矩阵实行一致性检验时依据以下步骤：

(a)一致性指标CI的计算为式(5)。

(5)

式中，m表示判断矩阵的列或者行数。

(b) 针对对应的平均随机一致性指标RI实行查找，即：根据1至10阶正互反矩阵，反复实行1 000次计算，获得平均随机一致性指标RI的具体数值。

(c) 对一致性比例CR实行计算，如式(6)。

(6)

若要判断矩阵的一致性合理并且可接受，需要保证一致性比例值小于0.1，此时才能把特征向量当作一个因素对向量加权。在同一级别上的各个指标，按照重要程度或者优良程度划分成不同等级，对其实行量化值赋值，判定已构建的判断矩阵是否符合完全一致性条件[13]。

1.4 变权综合评估

通常情况下，综合评估时为反映高校英语教学效果的真实状况，使用变权综合方法适当调整评价指标的权值，变权综合模式为式(7)。

(7)

式中，λj与aj分别表示第j个指标权重与评价值；γ表示为参数。假如评价者(学生)评价英语教学效果时比较保守，该种情况下，会过多考虑各个指标受到的影响情况，此时γ<1/2；如果评价者(学生)比较开明，能够容忍部分教学缺陷，此时γ>1/2；如果γ=1/2，那么评价指标权值与常权综合模式相同，如式(8)。

(8)

使用常权综合评估，不能明确显示某个评价指标出现“合格”或者“不合格”的情况，容易忽视英语教学效果评价中的某些细节，导致评估结果不准确的情况出现。通过不断实践分析，如果参数γ为0.2可以普遍应用于英语教学效果评估[14]。

将层次分析法结合变权综合评估的方法与层次分析法结合常权评估法的综合评价方法相比较，更能反映由于个别指标变化而对总体评价结果造成的影响，参数γ取值表现出对均衡性的需求，对于个别指标缺点容忍度越低参数取值越小。

1.5 变权层次分析法综合评估

计算高校英语教学效果时是逐步从二级指标层向目标层计算，运用权重与评分值相乘，得出二级指标的计算结果，利用变权综合模式，得到高校英语教学效果评估结果[15-16]。确定各二级指标对于目标层的权重后，还需要获得各个指标的评分，计算出英语教学效果总体得分，通过分数高低评价教学效果的优劣，如式(9)。

(9)

式中，F表示教学效果总体得分；Gi表示第i个指标影响教学效果的相对权重；Ri表示第i个指标评价得分。

为了使评价结果更加具有客观性，应该获取多方面评价结果，可以运用问卷调查等形式获得Ri值。

2 实例分析

将某985综合性质大学2018级外语系师生作为研究对象，该系分为英语师范专业、日语专业和商务英语专业，总计学生人数为220人，男生73人，女生147人，英语专业人数为141人，教师团队人数12人，实验只针对基础英语课程的一位教师实行，对其英语教学效果实行评价。该教师已在高校教学20年，近年被评为副教授职称，积累了丰富的教学经验，知识面广泛，在教学手段上具有自己的特色。在141位2018级英语专业学生中选取50位，男女比例各一半，依据本文方法对该教师教学效果实行评价，该评价开始时间为2018年10月17日。评分结果如图2所示。

图2 英语教学效果评估结果

通过图2可以看出，除去口语水平指标与互动性指标，该教师的教学效果评估均在90分以上，口语水平指标和互动性指标评分分别为89分和88分，对该结果进行分析，可能是由于该教师方言习惯影响其口语发音，同时，该教师年龄偏大，与学生之间存在代沟，因此课堂互动性评价较低。依据评价类别可以判定该老师的英语教学效果类别为A类。

为记录教师英语教学效果情况，使用本文方法每个月对各英语教师教学效果实行评价，通过问卷调查统计实验对象师生对本文方法评价效果满意度，结果如图3所示。

a 教师对本文方法满意度

从图3(a)可以看出，大部分教师对本文方法的评价效果满意度较高，统计结果中达到满意的教师人数达到85%，多数教师认为，通过学生评价，获得教学效果反馈，再根据这些反馈调整自己的教学态度和教学水平，有助于良性循环；部分教师反应对本文这种评价方法并不满意，统计发现这部分教师多数为德高望重的老教授，不满意自己的教学情况被学生评价，经校方协调，也逐渐接受这种评价方法。由图3(b)可知，绝大多数学生对本文评价方法满意，不满意人数为0。多数学生反映，经本文方法评价教学效果的老师，接受评价后，修改了教学方法，提高了学生学习积极性，学习成绩得到有效提高。

自2018年9月使用本文方法评价教师教学后，教师根据评价结果对自己的教学方法和教学内容作出部分修改和调整，自2018年9月至2018年12月，每个月都组织学生对英语教学效果进行评价。其中抽取三位英语专业教师实行跟踪统计，每个月的统计结果如图4所示。

图4 评价跟踪统计结果

通过图4能够看出，各教师每个月根据本文方法评价结果反馈，修改自己的教学方法，使得评价得分每个月都有所提高，由此可以证明，使用本文方法评价高校英语教学效果能够有效提高教学质量，改善目前教师已经形成的固定教学模式，同时也能促进学生学习热情和学习能力的提高。

3 总结

本文以学生作为评价主体构建评价指标体系，将层次分析法作为基础构建判断矩阵，把各指标重要性由定性化问题转变为定量化问题，降低了主观因素对评价结果的影响，通过计算得出判断矩阵的权重值，变权处理各指标的初始权重，评价者对评价内容缺陷的容忍程度通过均衡系数反映，通常情况下取值0.2可以普遍应用于英语教学效果评估。结合综合评价法与层次分析法，改善层次分析法中评价方案中可能存在不合理的情况，使得高校英语教学效果评价结果更符合实际，在针对教学效果评估方向具有良好的应用前景。本文对于高校英语教学效果评估只做出了初步研究，在今后的研究中可以从以下几个方面开展进一步研究。

(1) 从多角度多方位构建更为完整、可操作性更强、更全面的指标体系，对评价内容做出整体性、全局性的整体评价。

(2) 高校教师在开展英语教学时并不是单单为了实现教育信息的传播，更重要的目标是实现语言能力、学习能力的训练，教师应该根据学生评价结果总结教学缺点，增加师生互动，调动学生学习积极性。

(3) 教师可将语言与肢体活动相结合，增加语言练习机会，实践学习内容。

(4) 今后研究中可与其它评价方法相结合，如模糊评价方法，进一步提高评价效果。