(1.重庆理工大学管理学院 重庆 400054 2.重庆理工大学经济金融学院 重庆 400054)
本次的现状调查以问卷调查的形式展开,调查对象为重庆理工大学和其他高校的教学管理人员、行政部门管理人员、教师和学生,本次共发放问卷120份,实际回收有效问卷116份,有效回收率为96.67%,其中教学管理人员问卷发放15份,回收有效问卷13份;行政部门管理人员问卷发放12份,回收有效问卷12份;教师问卷发放70份,回收有效问卷68份;学生问卷发放22份,实际回收有效问卷22份;实际回收用人单位有效问卷1份。主要调查内容及结果如下:
(一)对督导主体的调查
在“您认为研究生教学督导主体是?”一题中,如图1,选择教师、学生、学校行政部门、用人单位、第三方机构、政府教育管理部门和兄弟院校的占比分别是68.1%、53.45%、53.45%、16.38%、14.66%、12.07%、6.9%,由此可见,教师、学生和学校行政部门作为督导主体的呼声较大。
图1 研究生教学督导主体
(二)对督导内容的调查
在“您认为学校的教学督导应在哪些方面加强?”一题中,如图2,选择教学工作督导、学校制度建设督导(规章制度建设、落实等)、学校硬件设施督导(教学经费、校园建设、教学设备等)、教职工队伍建设督导、学校办学思想督导、其他情况的占比分别是:71.55%、68.1%、62.07%、55.17%、50%、3.45%,由此可见,大多数调查对象都认为教学督导应在教学工作督导、学校制度建设督导和学校硬件设施督导这三方面加强。
(三)对督导方式的调查
在“每次实施督导制度后,督导员有无及时反馈?”一题中,如图3,选择偶尔有、经常有、每次都有和没有的占比分别为:37.07%、29.31%、25%、8.62%,由此可以看出,在进行督导工作后,依然存在着督导员没有及时反馈的问题。在反馈形式上,如图4,选择面对面交流、书面形式、会议(座谈会)的形式、匿名评分、其他的占比分别为:62.07%、53.45%、43.1%、19.83%、7.76%,占比依次递减,说明反馈方式较为单一。
图3 督导员及时反馈的频率
图4 督导员的反馈形式
(四)对督导效果评价的调查
在“您认为哪些会影响督导效能?”一题中,如图5,选择督导方式方法、督导结果的正确使用、督导理念、督导人员素质、督导部门隶属、督导时间选择的占比分别是:68.1%、66.38%、64.66%、63.79%、31.9%、18.1%,这说明,督导方式方法、督导结果的正确使用、督导理念以及督导人员素质对督导效能充分的发挥具有重要的影响。
图5 影响督导效能的因素
(一)指标体系构建
本文选取了三个维度的指标作一级指标分别进行了分析。
1.以教学目标为一级指标的层级表(见表1)包含二级指标2个,三级指标4个。
表1 教学目标维度指标层级表
专业建设3专业设置依据国家的需要和学校的条件,在每科之下设置的若干专业专业结构与布局合理,有优势专业,适应社会发展及需求专业结构与布局基本合理,比较能适应社会发展及需求4培养专业学科特色思维能力学校对于专业学科培养学生思维能力所开展的专业建设在专业建设方面,注重培养具有专业特色的思维能力,并取得良好成效在专业建设方面,有意识开展具有专业特色的思维能力培养的专业建设
2.以教学元素为一级指标的层级表(见表2),其中包含三个二级指标,12个三级指标。
表2 教学元素维度指标层级表
3.以教学环节为一级指标的层级表(见表3),其中包含了4个二级指标,20个三级指标。
表3 教学环节维度指标层级表
通过专家提出意见并使其基本达成一致,对指标体系或无修改意见,或给予较高评价意见反馈,因而最终确定评价指标体系。
(二)专家权威性分析
1.专家积极系数。专家积极系数用应答率表示。
应答率越高则说明专家的积极性越高,通常应答率大于70%即可判断为专家积极性良好。
2.专家意见集中程度。专家意见集中程度用满分率、得分均数表示指标的重要程度,满分率越大,得分均数越大,则指标的重要程度越高。
满分率计算公式
其中,Kj为指标j的满分率,m'j表示给予该指标满分的专家数,mj表示给予该指标评价的专家总数。满分率在0-1之间,满分率越大说明给该指标满分的专家比例越大,则该指标重要程度越高。
得分均数计算公式
其中,Mj为指标评分值的均数,mj表示给予该指标评价的专家总数,Cij表示第i名专家对j指标的评分,得分均数越大,则指标重要程度越高。
3.专家意见的离散程度。专家意见的离散程度用标准差、变异系数来表示。
变异系数CVj表示专家对j指标相对重要性的离散程度。标准差、变异系数越小,则专家意见的离散程度越小,同时可综合极差来衡量专家意见的离散程度。
标准差计算公式
其中,σj为指标j的标准差,mj表示参加评价指标j的专家数,Cij表示第i名专家对指标j的评分,Mj表示指标j的算数均数。
各评价指标得分变异系数计算公式
4.专家的权威程度计算。专家的权威程度用权威系数表示。
专家的权威程度是根据专家对指标体系进行评价做出判断的依据和专家对所评价内容的熟悉程度来共同确定的,权威系数为判断依据系数和熟悉程度系数的算术平均值。参考相关文献,权威系数大于0.7即可认为评价依据可靠。
权威系数计算公式
其中,Cr为权威系数,Ca为专家对指标体系进行评价所做出判断的依据,也称作判断系数,Cs为专家对所评价内容的熟悉程度。
专家权威程度基于专家的自我主观评价,评价标准见表4专家判断依据判断系数赋值表。
表4 专家判断依据判断系数赋值表
表5 专家对所评价内容的熟悉程度赋值表
对每一指标专家评价进行赋分转化评价,其中,非常熟悉—5分,比较熟悉—4分,一般—3分,比较不熟悉—2分,非常不熟悉—1分,计算专家对评价指标评分的算数均数,得到其对整个指标体系的熟悉程度评分,其中4—5分为非常熟悉,3—4分为比较熟悉,2—3分为一般,1—2分为比较不熟悉,0—1分为非常不熟悉,藉此完成从专家对指标的熟悉程度评价转化为对指标体系的熟悉程度。
(三)指标体系权重赋予
指标体系权重的确定方法常见的有客观赋权法和主观赋权法。客观赋权法是指利用指标体系样本数据,通过相应的数理方法整理分析自动赋权的方法,常见的客观赋权法有主成分分析法、熵值法和均方差法等。主观赋权法是指专家对被评价指标体系各层级的各因素按重要程度,根据经验及相关专业知识直接确定权重系数的赋权法,常见的主观赋权法有专家调查法、二项系数法、环比分析法和层次分析法等。两种方法各有特点,客观赋权法用数据客观形成,但有时会与实际情况相左;主观赋权法依赖专家判断,但通常更容易解释。
本文针对高校教学督导现状以重庆理工大学为例进行了调查与分析,然后结合调查结果进行了研究生教学督导评价指标体系设计,旨在为提高我国研究生课程教学质量、人才培养质量、加强督导队伍假设、优化教学督导内容、提升教学督导工作水平和效率等方面提供理论价值参考,从而促进我国高校研究生教学质量的稳步提高。