翟亚宁
摘 要 结合北京工业大学研究生科技基金的特点,其评估活动开展应坚持定量与定性评价相结合原则、各相关主体共同参与评估原则,与研究生成长规律相结合的原则。宜采用问卷调查法、文献分析法和德尔菲法等方法,围绕基金的管理情况、基金运行情况和实施效果情况开展评估活动;明确科技基金评估的前期准备阶段、评估实施阶段和撰写提交评估报告阶段的相关事项,对保证后续具体评估活动的开展很有必要。
关键词 北京工业大学 研究生科技基金 评估
中图分类号:G644 文献标识码:A DOI:10.16400/j.cnki.kjdks.2015.12.020
Beijing University of Technology Graduate
Students' Technology Fund Assessment
ZHAI Yaning
(School of Marxism, Beijing University of Technology, Beijing 100124)
Abstract Combine with the characteristics of graduate students of Beijing University of Technology Fund, the assessment activities should adhere to the principles of quantitative and qualitative evaluation of the combination principle, the relevant body involved in the assessment of common principles, combined with the growth pattern of the graduate. Should adopt the questionnaire, document analysis and Delphi method and other methods, the management of around fund, the operation and effect of the situation assessment activities carried out; clear the preparatory stage technology fund evaluation, the implementation stage and submit an assessment report writing related matters stage, to carry out specific evaluation activities to ensure follow-up is necessary.
Key words Beijing University of Technology; graduates technology fund; assessment
0 引言
北京工业大学研究生科技基金(以下简称“科技基金”)已实施13年,通过每年征集自主项目和委托项目的方式,在培养研究生创新能力方面取得了一定的成绩,提高科技基金的运行效率,发挥科技基金的最大效用,已成为科技基金管理面临的主要问题之一。科技评估是提高科技基金运行效率的重要手段,运用科技评估理论,在科技基金的评估原则、评估方法、评估程序和评估内容方面开展研究,为后期的评估实践开展奠定基础,十分必要。
1 科技基金基本情况
1.1 科技基金管理情况
在研究生科技基金的规章制度方面,北京工业大学分别制定了《北京工业大学研究生科技基金章程》、《北京工业大学研究生科技基金经费管理办法》,有效保证了研究生科技基金的顺利运转。在研究生科技基金的管理架构上,北京工业大学要采用了院校两级的管理体系。各学院主要负责对研究项目的初审、管理等。校研究生工作部主要管理重点项目和对一般项目进行抽查。从项目管理的角度看,北京工业大学对基金研究项目的管理覆盖全过程,包含项目的立项管理、中期管理、结题管理等。
1.2 科技基金主要特点
在项目来源上,自主项目与委托项目并存。北京工业大学研究生科技基金项目来源主要有自主项目和委托项目。自主项目即研究生根据自身兴趣和特长,自主设定研究方向、研究内容和预期研究成果等。委托项目,每年研究生工作部发布委托项目指南,对所属委托机构、项目名称、委托人、委托项目内容、预期成果、考核指标和项目要求做了详细的描述。
在支持对象上,主要面向研究生一年级学生。从北京工业大学研究生科技基金的支持对象上看,主要支持硕士一年级和博士一年级的同学,研究生二年级的科技项目一般不予支持。同时在支持项目的研究内容上,一方面不能够与导师的研究课题相关,另一方面不能够与研究生毕业论文相关。
在目标定位上,着眼于研究生熟悉科研过程。从《北京工业大学研究生科技基金管理章程》分析来看,北京工业大学研究生科技基金主要定位于研究生对科研过程的熟悉上,并非像首都经济贸易大学、对外经济贸易大学等高校研究基金明确提出要“形成一批创新性成果”。
2 科技基金评估基本原则
2.1 坚持定量评价与定性评价相结合原则
定量评价是采用数学的方法,收集和处理数据资料,对评价对象做出定量结果的价值判断。定量评价相对比较客观,人为影响因素相对较少,具有一定的可比性。定性评价是不采用数学的方法,而是根据评价者对评价对象的现实和状态或文献资料的观察和分析,直接对评价对象做出定性结论的价值判断。
在对研究生科技基金评估时,应该对研究生科技基金的投入、产生的成果、立项数进行一些量化的处理,从而判断其成效。同时,在研究生科技基金实施过程中的一些隐性影响和一些非量化成果是无法用定量的方法进行评价,应对其进行定性评价。endprint
2.2 坚持各相关主体共同参与评估活动原则
该原则源自利益相关者理论。①一般认为,利益相关者是能够影响一个组织目标的实现或者能够被组织实现目标过程影响的。对研究生科技基金的各相关主体进行分析,让各相关主体共同参与到评估活动中去,有利于评估结果的更加客观公正。经过初步分析认为,研究生科技基金相关主体主要有以下几个方面:
获得立项的研究生。研究生科技基金是面向研究生设立的,研究生是主要受益者。研究生从科技基金中获得项目支持和训练,进而取得研究成果。
基金管理单位。基金管理单位是研究生科技基金的组织运行者,主要负责对研究生申报项目的培训、支持,以及科技基金的运行管理。
研究生导师。研究生导师在整个科技基金的实施阶段,拥有“双重身份”。一方面研究导师需要在科研期间,给予研究生指导;另一方面研究生导师也是研究生能力提升的最直接见证者。
2.3 坚持与研究生成长规律相结合原则
研究生科技基金的主要目的是了提升研究生的科研能力,在对研究生科技基金进行评价时,应系统考虑研究生的成长规律,保证基金评估的客观性。需综合考虑以下两个方面:(1)研究生科研能力的提升不是一蹴而就的,具有一定的周期性。因此,我们在对研究生科研能力层面的评价时,不能忽视一些细小的提升,同时也应综合评价研究生科研能力的后期溢出效应。(2)研究生科研能力的提升是多方面综合努力结果。研究生科研能力需要自身不懈努力、导师的辛勤指导等等多方面因素,研究生科技基金作为一种学术研究平台,对研究生科研能力的提升起着十分重要的作用,但不能把研究生科研能力的提升全部归功于研究生科技基金,应合理判断。
3 科技基金评估方法
3.1 问卷调查法
问卷调查法是在评估过程中比较常用的方法。在对研究生科技基金评估过程中,主要针对已经结题的研究生项目进行问卷调查,问卷调查的方式主要通过电子邮件的方式进行开展。问卷调查的内容主要围绕以下几个方面:(1)科研项目的产生。主要调查科研项目来源情况,是自己感兴趣的问题还是导师提供的参考项目等。(2)科研项目的立项。主要调查研究生对整个立项过程是否满意,有什么建议,如何应对科研项目的立项以及在参与立项过程中的收获等。(3)科研项目的研究。主要围绕科研项目研究过程中的三类问题进行调查。一是在科研项目研究过程中,团队合作是否密切;二是在碰到困难时,采取什么样的方法进行解决;三是科研项目的研究占用的时间等。(4)科研经费的使用。主要围绕当前的科研经费管理是否便于进行科学研究进行调查。可设置研究生对科研经费支出科目设置情况、科研经费拨款程序的认知,研究生科研经费的实际使用情况等观测点。(5)科研项目的结题。主要调查研究生对当前研究生结题程序的看法以及研究生应对结题的实际状态。(6)科研成果的管理。主要调查研究生取得科研成果的用途及管理情况。
3.2 文献分析法
在该评估过程中,需要对一些文献资料的整理获取研究生科技基金的相关信息。经过初步分析认为,需要通过资料的整理,需要获取以下几方面的信息:一是北京其它高校同类科技基金的运行管理情况,从而便于从宏观上把握北京工业大学研究生科技基金的整体定位情况;二是研究生科技基金的近年来经费投入、立项数目和成果产出情况;三是研究生科技基金的管理运行机制情况。
3.3 德尔菲法
德尔菲法也称专家调查法,是在20世纪40年代由O.赫尔姆和N.达尔克首创,经过T.J.戈尔登和兰德公司进一步发展而成的。②德菲尔发具有以下几点特征:一是能够充分利用专家的专业知识;二是采用“背靠背”的方法,能够保证专家独立做出判断;三是在不同专家的意见基础上,进行综合判断,能够更加保证评估的合理性与客观性。
在对研究生科技基金评估时,拟选取从事基金运行的管理人员和从事研究生培养的导师作为专家,围绕以下几点内容进行访谈和调查:研究生科技基金在研究生科技创新体系中的定位;研究生科技基金运行的经验与不足;研究生科技基金对研究科研能力提升的作用;研究生取得的成效。
4 科技基金评估程序
4.1前期准备阶段
在科技基金评估的前期准备阶段主要开展以下几方面的工作:(1)评估对象特征的分析。对评估对象特征的分析是开展评估活动的首要程序。在对科技基金这一评估对象的分析过程中,主要分析以下几个方面:一是科技基金的历史发展过程。纵向分析科技基金的发展过程。设立的缘由以及发展过程中的相关信息和重大事件等。二是科技基金的同类比较分析。横向分析北京工业大学研究生科技基金同其它高校类似基金的设置、运行和管理的异同,帮助提高对科技基金的认知;三是科技基金的外部特征分析。主要分析科技基金在大学研究生创新体系所处的位置和扮演的角色;四是科技基金的内部特征分析。主要分析科技基金的运行细节、管理模式等。(2)评估方法、指标确定。经过对评估对象分析后,需确定评估活动所采用的方法和指标。在对评估方法和指标的确定时,应本着科学合理、易操作的原则。(3)评估小组的搭建。评估小组主要包括工作组和专家组两部分。(4)评估文件的准备。评估文件主要包括评估方案、评估指标体系、评估报告框架等。
4.2 评估实施阶段
在科技基金的评估实施阶段主要开展以下几点工作:(1)相关资料的分析评估工作。主要针对评估范围内的项目立项、结题、产出、相关管理文件的分析整理工作。(2)相关人员的访谈工作。主要针对基金管理人员、导师、基金项目承担研究生等开展访谈工作。(3)问卷的发放与回收。主要针对科技基金承担研究生发放调查问卷,并对问卷进行有效分析。
4.3 撰写提交评估报告阶段
在撰写评估报告阶段主要分为两个步骤,一是撰写评估报告初稿,交由相关专家进行咨询论证,二是根据专家咨询论证意见,修改评估报告并提交。endprint
撰写评估报告时需注意以下三个方面:一是评估语言要清晰明确,采用第三方独立的角度对评估结论进行描述,慎用情感类、模糊不确定类词汇。二是评估结论要客观。每一个评估结论提出的背后,都有一条完整的证据链。三是评估报告要全面。能够细致全面客观地反映科技基金在评估范围内的运行情况。
5 科技基金评估内容
科技基金的实质是为了提高研究生的科技创新能力,学校拿出一笔资金支持学生自主选题、申报、立项和研究,从而提高研究生的创新兴趣和创新能力。为此,选择较为科技评估工作中常用的“目标—管理—效果”逻辑框架,结合实际情况将科技基金评估内容分为基金管理评估、基金运行评估和实施效果评估。
5.1 基金管理评估
基金管理评估主要针对基金的全过程管理环节进展评估。基金全过程管理评估可分为项目立项管理、中期管理、结题管理和经费管理。根据上述管理环节,对基金管理下设四个二级指标:项目立项管理情况、项目中期管理情况、项目结题管理情况和项目经费管理及使用情况。
5.1.1 项目立项管理情况
项目的立项管理情况主要评价从组织项目申报到项目确认公布这一时段的所有管理工作。在评估活动中,重点关注学院、学校的项目立项评审工作。主要从以下三个方面考察:第一,项目立项程序情况。主要评价项目的立项程序是否合理,如答辩时间安排能否满足实际需要等。第二,项目立项公正性问题。主要从评审内容设置、评价专家选择等方面进行判断。
5.1.2 项目中期管理情况
项目中期管理情况主要评价项目在中期考核所开展的管理工作。主要从以下三个方面进行考察:第一,中期考核是否有所计划还是具有突发性,发布中期考核公告是否具有缓冲时间段;第二,中期考核是否能够按照相关规定顺利进行。第三,针对与预期研究有所偏差的项目,如何应对,是否具有沟通渠道,举措等。
5.1.3 项目结题管理情况
项目结题管理主要评价项目结题评审、未按时结题处理办法、相关成果管理办法等主要节点。
5.1.4 项目经费管理情况
主要评价项目经费管理支出范围设定,项目拨付程序是否满足研究生科研过程的需要等。
5.2 基金运行评估
基金运行评估主要针对项目实施过程中的一些重要节点进行评估,包含项目申报前期的宣传培训工作。主要有基金宣传培训、导师参与情况和项目实际运行情况等。
(1)基金宣传培训。该指标主要反映基金管理单位的工作成效。主要考察基金宣传培训的受众范围和宣传培训的效果(2)导师参与情况。该指标主要反映导师在项目实施研究过程中参与和发挥的作用情况。(3)项目实际运行。该指标主要反映科技基金科技项目的实际运行情况。可从以下两个方面进行考察:一是项目是否能够顺利按照预期计划进行;二是项目进行过程中,项目团队合作是否有效进行。
5.3 实施效果评估
实施效果评估是本指标体系的重点,是针对研究生科技基金运行的效果进行评价。在设计实施效果评估指标时,采取“顾客导向”的设计思路,③围绕研究生取得的效果方面进行评价。二级指标主要设置为:“研究生科研兴趣培养情况”、“研究生科研氛围营造情况”、“研究生科研过程熟悉情况”、“研究生科研成果取得情况”。
(1)研究生科研兴趣培养。培养研究生的科研兴趣和创新意识是研究生科技基金设立的主要目的之一,该指标主要考察通过参与研究生科研项目后,研究生的科研兴趣是否得到了培养。(2)研究生科研氛围的营造。该指标主要反映研究生科技基金对全校研究生科研活动的带动情况。该指标可从历年参与研究生科研项目数量变化情况和调查问卷分析而得。(3)研究生科研过程熟悉情况。该指标主要考察通过研究生科技基金的支持,研究生是否熟悉了整个科研过程和一些研究方法等。(4)研究生科研成果取得情况。主要考察研究生的论文、专利等科研成果取得情况。
表1 科技基金评估内容
6 结语
科技评估是一项复杂的系统工程,针对科技基金评估得基本原则、评估方法、评估程序和评估内容的研究,是保证科技基金评估活动开展的重要条件。本文由于精力有限,在评估指标的权重设置等方面还需进一步开展研究。
北京工业大学研究生科技基金支持项目: 北京工业大学研究生科技基金整体情况评价研究,基金编号:ykj-2014-11422
注释
① 吴月.利益相关者视角的公共品供给绩效评估主体研究[J].山东社会科学,2011(10):153-156.
② 李志河,张宏业等.高校教学科研人员绩效考评体系指标权重确定研究[J].现代教育技术,2008(6):36-42.
③ 李素利,张金隆,刘汕.多维多层视角下我国社会保障政策执行效果测度研究.2015(3):24-38.endprint