基于AHP的管道应用研究类科技项目后评价体系研究

高山卜 王禹钦 王乐乐 冯学书

（1.中国石油管道公司科技研究中心；2.中国石油管道公司科技信息处）

科技项目后评价作为科技项目闭环管理的重要环节，是对已完成的科技项目进行综合评价，总结经验，反馈有效信息并及时发现问题[1-2]。管道企业科技项目应用性强，其后评价指标体系是一个多层级的指标体系[3]，需要从项目前期调研与立项、实施过程、完成情况、推广应用4个主要环节入手建立科技项目后评价指标体系。在评价过程中，各项测评指标的权重至关重要，需尽量客观、公正，层次分析法（AHP）能够满足这样的需求，因而选用该方法对定性的指标进行量化配比相应的权重。

1 管道企业科技项目后评价指标体系设计

目前，根据项目研发目的与成果的特点，管道企业科技项目可分为基础研究类、应用研究类、决策与管理类3种。本文以应用研究类项目为例，根据管道科技项目运行周期涉及的主要环节，从项目前期调研与立项、项目实施过程、项目完成情况、项目推广应用情况4个方面构建了管道科技项目后评价指标体系（表 1）。

表1 应用研究类项目后评价指标

续表

综上，给出了各指标定义及二级指标的评分划分等级，各二级指标具体诠释如下：

（1）项目前期调研与立项决定了科研方向、目标及任务，反映在：①生产需求程度，这一指标是指企业面临的生产问题的重要性、迫切性程度，与科技项目立项的意义相匹配；②研究目标及内容的覆盖性，是指科技项目的研究目标和内容对于解决企业面临生产问题的覆盖性程度；③考核指标的合理性，是指科技项目设立的技术指标、经济指标、有形化成果指标是否合理，能够体现出项目的研究价值；④开题设计专家意见整改情况，是指科技项目立项开题后，是否能够遵守开题专家意见进行相应的修改和完善。

（2）项目实施过程决定了项目的组织、计划及经费的实现程度，其有效性直接关系到科技项目实施成功的关键，反映在：①组织管理情况，这一指标是指项目进展过程中对项目组成员的分工管理情况，以及为保证项目质量组织召开的专家研讨会及技术交流情况；②计划执行情况，是指项目研究进展按照计划进度的完成情况；③项目经费决算和使用情况，是指经费使用是否合理，决算控制占比预算多少。

（3）项目完成情况决定了项目是否达到预期目标、完成质量、成果产出等，给出了科研项目完成情况的结论性评价，反映在：①目标实现程度，这一指标是指项目的研究成果是否达到了项目立项设定的研究目标，解决了对应的生产问题；②对外协作情况，是指项目开展过程中的核心技术是否借助对外服务或技术服务获得，自主研发的核心技术占比情况；③成果有形化，是指项目研究过程中形成产品、专利、标准、软件著作权、论文等情况；④材料归档情况，是指项目结题后按照有关要求将整套验收材料进行归档的情况。

（4）项目推广应用情况决定了项目产出成果的效益、作用及影响，反映在：①成果应用频率，这一指标是指项目的研究成果在试用阶段被不同单位应用的频率；②效益、效果及应用单位评价，是指项目的研究成果应用后，安全生产效果或经济效益的提高程度；③国内外市场前景，是指成果在国内外是否具有通用性，且指标达到国际/国内何种水平。

2 管道企业科技后评价指标体系量化

AHP又称为多目标决策法，该方法可将较为复杂的问题中相互关联的各要素进行有序的层次划分，使问题简单化、条理化，其划分的重要环节体现在使用者可以结合专家意见或经验对同属于一层级的元素进行两两比较，构造判断矩阵后使用数学方法计算出层级元素的权重[4-5]。该方法简便、灵活，能够将科技项目后评价中无法量化的定性指标进行量化处理，且各指标因素经过两两对比后显示更具公正性、客观性。

以表1所示的应用研究类科技项目为例，确定因 素 集 为A=｛P1，P2，P3，P4，P5，P6，P7，P8，P9，P10，P11，P12，P13，P14｝，将因素集按属性分为 4 个子集，其 中B1=｛P1，P2，P3，P4｝，B2=｛P5，P6，P7｝，B3=｛P8，P9，P10，P11｝，B4=｛P12，P13，P14｝，对应的权重集为W1，W2，W3，W4，且A=｛B1，B2，B3，B4｝，对应的权重集为Wn。

构建完矩阵集合后，需要科学确定各指标之间的相对权重，科技项目后评价小组根据工作经验，将各指标因素间的评价尺度采用1～9标度法[6]进行两两比较，构造出的判断矩阵如表2所示。

表2 A—B判断矩阵

通过计算判断矩阵中每行元素的几何平均值，并进行归一化处理，得到主评价矢量Wn=（0.06，0.15，0.28，0.51），对判断矩阵进行一致性检验，得出判断矩阵一致性比例CR=0.01<0.1，符合一致性原则，所以认为矩阵A层次总排序结果具有满意的一致性。

重复以上过程，构建B1—P判断矩阵，经计算其对应的权重集为W1=（0.51，0.31，0.11，0.07），判断矩阵一致性比例CR1=0.01231<0.1，符合一致性原则；构建B2—P判断矩阵，经计算其对应的权重集为W2=（0.11，0.58，0.31），判断矩阵一致性比例CR2=0<0.1，符合一致性原则；构建B3—P判断矩阵，经计算其对应的权重集为W3=（0.39，0.13，0.35，0.13），判断矩阵一致性比例CR3=-0.0134<0.1，符合一致性原则；构建B4—P判断矩阵，经计算其对应的权重集为W4=（0.43，0.43，0.14），判断矩阵一致性比例CR4=0<0.1，符合一致性原则。由此可得管道企业应用研究类科技项目后评价指标及权重配比（表 3）。

表3 应用研究类项目后评价指标及权重

结合表3中给出的各指标权重，科技项目后评价计算公式为：

式中S——科技项目后评价的最终得分；

w1、w2、w3、w4—— 分别为第一层指标B1、B2、B3、B4的权重；

ωi——第二层指标的权重；

si——第二层指标的得分。

3 管道企业科技后评价指标体系的应用

研究选取中油管道公司已验收的18个应用研究类科技项目，课题组依据上述构建的指标体系，首先根据第二层指标的评分依据对各项二级指标进行评分，然后根据科技项目后评价计算公式计算出各科技项目的最终得分（表4）。表中科技项目的最高分为94.12，最低分为74.50，平均值为84.06，标准差为4.77，将该组数据进行分组，组数选为10，经计算得到组距=（最高分-最低分）/组数=2.18，将各科技项目后评价得分频率分布情况拟合成光滑曲线（图1）。

表4 科技项目后评价得分情况

图1 管道科技项目后评价得分频率分布情况

经过拟合，得到图1曲线上的函数符合总体平均数μ为84.06、标准差σ为4.77的正态分布。该条曲线上的纵向坐标值可用如下公式计算得到：

式中x——科技项目后评价得分；

f（x）——科技项目后评价得分分布频率；

μ——科技项目后评价得分的平均值；

σ——科技项目后评价得分的标准差。

经验证，本次基于层次分析法构建的科技项目后评价指标体系科学、合理，其评价结果符合正态分布的科学规律，能够较为客观地反映科技项目总体研究水平。

4 结束语

管道科技项目后评价小组目前已累计开展公司科技项目后评价近200项，取得了一定的实践经验。为了客观、科学地评价科技项目，优化后评价指标，提升后评价质量，此次研究根据科技项目周期各环节构建后评价指标，从指标属性入手定义其分值，引入层次分析法量化各指标层级的权重，经各层级指标加权求和得到最终科技项目的得分结果。选取目前油气管道所属科技项目（应用研究类）作为样本进行初评，评价结果符合统计学中正态分布的科学规律，得到了业内专家一致认可。研究建立的科技项目后评价指标能够客观、公正地反映科技项目的综合研究水平，为科技管理者后期查看科技项目执行及应用情况、进行科技奖励评级，以及科技项目研究人员及时发现问题并进行相应改进提供了重要的决策依据。该成果目前已推广至公司科技项目后评价中。该指标构建方法及权重配比方法同样适用于基础研究类及决策管理类科技项目，但由于课题属性的不同，在构造层级指标的判断矩阵上会略有调整。