赵 静,田 欢
(兰州职业技术学院 a.电子信息工程系; b.现代服务系, 甘肃 兰州 730070)
创新创业教育作为符合时代发展和社会进步的教育理念和教育模式,已在全国高职院校广泛开展。持续深入地推进高等职业院校创新创业教育改革是我国实施创新驱动发展战略,促进经济提质增效的迫切需要。为此,对高职院校创新创业教育质量进行合理评价,构建创新创业评价指标体系和评价模型,已成为当前职业教育研究的重点内容[1]。
CIPP理论亦称决策导向型评价模型,由美国学者斯塔弗尔比姆(Stufflebeam,D.L.)于1967年在对泰勒行为目标模式反思的基础上提出。 CIPP评估模型由四项评估活动组成:即背景评估(Context evaluation)、输入评估(Input evaluation)、过程评估(Process evaluation)和成果评估(Product evaluation)。
根据高职院校创新创业教育评价目标,从中国知网(CNKI)搜索创新创业教育相关研究成果,关键字为“创新创业”“教育评价指标”与“评价模型”“高职院校”进行研究,仅有五篇,多数创新创业评价的研究,仍处于理论探索阶段 (见图1)。
图1 研究文献共现矩阵分析
路晓丽(2015)认为,我国创新创业教育评价首先需要树立质量观,而后建立质量评价框架,进而发现问题,有的放矢地开展创新创业教育质量评价纵向追踪研究[2]。王经纬(2017)运用 BP神经网络模型(Neural Networks)评价了高校旅游专业创新创业教育实施情况,认为应用人工网络神经法的评价创新创业教育的结果会直接受到样本数量的影响,需要选取更为合适的方法对样本数据进行初始化处理。仿真实验结果也表明,应用 BP神经网络模型评价创新创业教育仍缺乏有效检验,说服力不足[3]。
21世纪以来,创新创业教育已成为高等职业教育的重大任务和全新课题。党和国家高度重视培养高等教育创新创业人才的任务。
高职创新创业教育评价体系是根据高等职业院校创新创业教育评价目标,确定能够反映现代职业教育质量的具体评价指标[4]。本研究采用文献研究法明确高等职业院校创新创业教育目标,运用德尔菲法构建CIPP理论基础上高等职业院校创新创业教育质量评价体系。通过层次分析法对高校创新创业教育质量评价指标进行权重分配,从而建立系统化、科学化、可操作性强的高职院校创新创业教育质量评价指标体系。
1.过程评价指标与结果评价指标相结合的原则
CIPP评价理论重视评价的形成和改进。“评估最重要的目的不是证明,而是改进”(Staff Beam)。各高等职业院校创新创业教育需要与时俱进,以适应职业技术人才培养模式的改革。同时,由于环境资源背景不同,各高等职业院校创新创业教育质量的提升方案也不尽相同。相应地借助CIPP模型的过程评价与结果评价相结合,可以满足高校创新创业教育质量不断优化和提升的需要。
2.客观评价指标与主观评价指标相结合的原则
在基于CIPP的创新创业教育质量评价体系中,背景评价、投入评价、过程评价和成果评价应充分考虑主观评价指标和客观评价指标[5]。因此,客观评价指标与主观评价指标相结合,有利于建立科学的评价体系。
3.教学评价指标与实践评价指标相结合的原则
高校创新创业教育教学评价指标是指理论教学、专业学科课程等创业过程中使用的价值判断标准和理性评价载体[3]。此外,高校创新创业教育实践指标是指在创业实践中用于提升高校学生创新创业能力的价值判断标准和理性评价载体。在考虑高校创新创业教育评价指标的过程中,需要引入教学评价指标,包括创新创业课程的数量和学生选择创新创业课程作为选修课的比例[6]。结合各级各类创业计划和创新创业实训室、科技园、创业园、孵化器等一批实践性评价指标获批的项目数,推动全纳、普惠的高校创新创业教育的公平理论教学与实践探索[7]。
结合国内外专家经过多轮调研和反复筛选的研究成果,最终根据相关理论建立了基于CIPP模型的高校创业教育水平评价指标体系。包括4个一级指标、11个二级指标和25个三级指标,如图2所示。
图2 高等职业院校创新创业教育水平评价模型
1.评价指标体系构成
高校创新创业教育水平评价指标体系主要包括环境基础能力、资源配置能力、过程行动能力和绩效能力四个主要指标[8]。每个主要指标包括若干二级和三级指标,如表1所示。
2.调查问卷与评价标准
在此基础上设计《高职院校创新创业教育实施现状评价调查问卷》及评价标准。本文高职院校创新创业教育评价问卷采用李克特量表,各项评价指标分别为:1-5分,对应实施效果为:“非常好”“好”“一般”“较差”“差”。
3.评价指标体系创建
基于AHP层次分析法,对高职创新创业教育质量进行评价。创建创新创业教育质量评价层次分析模型,如表1。
表1 高职院校创新创业教育评价指标体系
指标权重是指评价指标在整个评价体系中的重要性和比重的值。本文通过德尔菲法,层次分析法为指标分配权重。
研究中选取10余名从事创新创业教育研究工作3年以上的专兼职教师和创新创业教育管理者进行专家访谈,设计访谈问卷,回收数据并对各项评价指标的权重值进行统计,得到权重平均值。遵循层次分析法原理将高职创新创业教育评价指标的权重,设定为五个级次,数值越大,越重要。以此构建判断矩阵,利用特征根法得到具体结果。最终确定了三级指标权重。如下:
2.归一化,得到特征向量
3.求判断矩阵的最大特征值λmax
aij是原始判断矩阵中第i行第j列的元素。n是指标个数。Wi是第i个指标的权重。λmax是判断矩阵的最大特征值。最大特征值:λmax=4.000
4.一致性指标:CI 和一致性比率:CR
5.评价模型
通过线性加权,对指标做综合评价。评价模型如下:
根据高职院校创新创业教育质量评价指标体系,以及各级指标权重一致性检验,一致性检验通过。得到高职创新创业教育质量评价指标体系,及其指标权重。由综合权重数值可知高职院校创新创业教育评价标准符合实际需求,有进一步推广应用的价值,如表2所示。
采取内部评价法,检验创新创业教育评价指标体系,及评价模型。面向对象为主管负责人、创新创业课程教师,上课学生。收集数据后进行综合评价。
背景评价是指,对特定环境中的需求、问题、资源和机会的评价。它本质上是对项目目标的诊断性评估[9]。
外部支持环境。社会环境影响着高校的创业活动和创业教育。区域环境创新创业活动的活跃程度,直接影响着高校创业教育的开展和效果。
学校实施环境。是否将创新创业教育纳入学校发展规划和培养方案。体现面向全体学生的理念,是制约创新创业教育成效的重要因素。
学校创业能力。包括发明专利授权数量和签订的技术转让合同数量。作为高校创新能力的重要体现,发明专利授权金额体现了高校师生的创新能力,而技术转让合同的签订数量则体现了属于教师的科技转化能力和高职院校学生动手创新能力。
表2 高职院校创新创业教育评价指标综合权重
输入评价是为了评价需要和可能获得的资源、工具、方法而规定的。本质上是对实施方案的可行性评估。
师资队伍建设投入。首先,创业教育双师型教师人数是指既有理论基础又有企业实践经验的教师人数。其次,创业教育高级职称教师比例是指具有正高级职称和副高级职称的创业教师占总数的比重。最后,具有高学历的创业教育教师比例是指具有硕士以上学位的创业教育教师比例。
创业教育经费投入。创新创业教育需要大量资金投入。创业教育经费来源包括创新创业教育教育经费和财政拨款以及高等学校划拨的创新创业教育经费。此外,各级政府财政拨款、国家创新创业培训计划国家拨款、校企合作基金等均可视为高校外部创新创业教育基金。高校创新创业教育经费主要包括创新创业教学科研投入、创业活动经费、创新创业项目经费等。
实践平台建设。高校创新创业的组织保障主要体现在创业咨询指导服务中心的数量上。
过程评价是指对实施计划执行情况的监督检查,本质上是对实施计划效率的评价。
创业课程设计。新创业课程是实现育人目标的重要载体,也是衡量教育过程和效果的载体。课程设计,应包括必修课和选修课,覆盖所有学生,确保学生普遍接受创新创业教育和提高教育。另一方面,创业课程用两个指标来表示:创业教育课程的数量和全校选择创新创业课程作为选修课的学生比例。
创业服务指导。校开展的创业项目主要包括国家级创新创业培训项目、互联网+竞赛项目以及政府组织的各级各类创新创业大赛。创业计划项目数和学生参加学校各类创新创业计划项目(竞赛)的比例是反映大学生参与积极性、主动性和主动性的两个指标。
学生参与。高校创新创业实践平台是促进高校创新创业教育成果转化,实现从创意到创新、创新到创业的跨越,实现高校教育向社会成果转化的平台.高校创新创业实践平台包括创新创业实训室、科技园、创业园、孵化器数量等。
成果评价是对目标实现程度的评价,本质上是对项目的形成性评价[10]。
社会反馈。是高校创新创业教育成果在社会层面的体现。全国大学生创业计划大赛的获奖数量可以在一定程度上反映高校培养创新人才、促进产学研融合的实际效果。此外,大学生创业心理特征的改善可以通过定量的创业心理评估工具来呈现大学生创业心理特征的改善程度。创业率与就业率之比反映了创新创业教育通过创业带动就业的实际效果。此外,优秀创业校友的数量也能体现高校创新创业教育培养了创业精英,发挥了创业榜样的示范引领作用。
创业成效。创业成效是高校创新创业教育成果在学校层面的体现,包括在校学生自主创业比例、科技园孵化企业累计数量、孵化器和高校的创业园。
本文基于国内外相关领域文献研究成果,采用 Delphi法和CIPP模型的相关理论,利用 AHP层次分析法,建立了基于CIPP模型的高校创新创业教育水平评价指标体系,主要指标有4个一级指标、11个二级指标。在高职创新创业教育评价过程中,持续改进评价模型及调查问卷,从环境基础、资源配置、教育过程、成果表现四个维度进行综合评价,发现问题,不断改进,提升高等职业院校创新创业教育质量。