一种新的电力科技多项目后评估体系及其应用

周 柯 姜 飞 董泰青

（1.广西电网公司电力科学研究院，南宁 430072；2.湖南大学电气与信息工程学院，长沙 410082）

随着电网企业科技创新投入的持续增大，科技项目管理工作变得越来越重要，迫切需要一套符合自身电网特征的后评估理论与方法[1-4]。

目前，国内外很多先进企业针对项目后评估工作已进行了富有成果的探索和研究。后评估方法大致分为：定性评价、定量评价、半定量评价以及定性与定量相结合评价四类[5]。研究内容包括后评估指标体系建立、指标权重确定及后评估应用。文献[6]提出了一种模糊区间层次分析的电网改造项目综合后评估模型。文献[7]运用层次分析法建立了综合评估质保。文献[8]研究了电网技术性能后评估指标体系，通过熵值法对初步给定的指标权重进行调整。但是，现有研究仅局限在单个科技项目，较少涉及多个科技项目的综合后评估工作，无法准确描述由多个子项目构成的一类科技项目。

本文结合某电力公司科技项目管理工作的实际，首先建立了一种科技项目后评估指标体系模型，介绍了层次分析法确定指标权重的步骤；重点建立了多项目的后评估模型，提出了多项目综合评估贡献度因子概念，并介绍了开发的一种符合电网实际特征的科技项目后评估软件。某电力公司科技项目的实例应用证明了所建立模型和后评估软件的有效和实用性。

1 科技项目后评估指标体系建立

科技项目后评估工作作为公司科技项目管理机制的重要组成部分，科学客观的评估过程是科技活动中的重要环节[9-10]。根据电网公司科技工作指导思想要求，结合科技项目后评估实际特点，本文采用专家法确定科技项目后评估指标体系。

1.1 指标体系模型

广西电网公司科技项目后评估指标体系由5 个一级指标，12 个二级指标，20 个三级指标构成，包含了对科技项目进行后评估的各个关键要素，能够解决科技项目后评估管理的要求。指标体系模型详见表1。

表1 某电力企业科技项目后评估指标体系模型

1.2 各级指标细则说明

通过实际工作调研，资料查阅和专家交流的途径确立了科技项目后评估模型的各指标描述。

1）技术价值

（1）技术水平。技术重要性：所提出的研究方向、研究内容与电网安全生产与运营联系的紧密程度与重要程度。技术先进性：指所提出的新知识达到的技术水平，技术的创新性。技术可行性：指技术实现的难易程度。

（2）研究结论。项目建设：指项目是否按照实施方案建设成功，系统运行稳定性情况。项目推广使用：研究成果的推广使用情况。

（3）成果。科技奖励：指获得科技奖励（包含科技进步或技改贡献）层次。科技论文：指符合电网公司项目实际情况的论文档次及质量。著作、标准与规程：制定标准、规程，出版著作情况。专利和软件著作权：指申请专利、软件著作权数量。

2）推广价值

技术成熟度：所采取技术的成熟水平，是否具有良好的推广价值。设备应用效果：项目实际运行情况。

3）组织管理

（1）前期工作。指项目工作完成时间是否合理，各项工作是否按照规范流程完成。

（2）经费管理。指经费结算的规范性。

（3）运维管理。指运维职责是否明晰、规程制度是否健全。

（4）档案管理。资料档案是否齐全，存在地点是否符合相关规定。

4）综合效益

（1）经济效益。指投资收益比。

（2）环境效益。项目研究成果改善环境（社会、自然）程度，企业社会形象是否显著提升。

（3）其他效益。降低安全风险，优化管理流程等无法量化的效益。

5）人才培养

参与程度：公司系统人员在研究工作过程中的深入参与程度和对关键技术的掌握程度。人员培训：成果应用人员对研究成果的使用熟练程度。

2 后评估模型

2.1 指标权重设置

后评估指标权重的确定可参考层次分析法。根据指标体系的层次结构构造判断矩阵，按照1～9 级的标度法采用专家打分的办法对建立的后评估指标进行权重设置[11-12]。

从专家打分的调研表中获取判断矩阵B，以计算一级指标对于评估目标的权重为例说明该工作方法。倘若bij，(i,j= 1 ,2,3,4,5)表示由调研表得到的判断矩阵，即i元素对j的重要程度。具体计算如下。

步骤1：计算判断矩阵每一列元素的乘积

步骤2：Mi的5次方根

步骤3：将矩阵B的列正规化

步骤4：将正规化后的矩阵按行相加，得到列向量

步骤5：再对向量s正规化，得特征向量

式中，w表示第二层对于第一层的相对权重系数。

步骤6：检验比较判断矩阵一致性。设有n个（此处为5个）进行比较的指标，对任意一个判断矩阵A，当矩阵完全保持一致时，最大特征根λmax=n；当矩阵不完全保持一致时，λmax＞n。于是一致性检验指标

式中，CI为矩阵的一致性检验指标。由以上规律：当矩阵完全保持一致时，CI= 0；当矩阵不完全保持一致时，CI＞ 0。

步骤7：重复步骤1至6，可求得二级、三级指标的权重值。

2.2 单项目后评估模型

假若第i层的第j个指标wij权重计为rij，且有对于该指标若干个专家打分平均值为tij，则单项目评估结果为

对于专家打分值采用10 分值，因此0 ≤T≤ 10，对于科技项目后评估结果等级描述如表2所示。可见，项目后评估结果按照得分高低，共分：不合格、基本达标、良好、优秀、标杆项目五个等级。

表2 科技项目后评估结果等级描述

2.3 多项目后评估模型

与单项目评估相比，多项目评估是一种全新的评估模式，它是站在整个组织层面上，对一大类项目开展情况进行综合评判。多项目评估的核心是如何确定各子项目之间的权重关系。本文将多项目间的关系采用定量和定性两方面描述。

定义1：倘若项目A可表示为

其中，Ai表示项目A的第i个子项目，n= 1 ,2,3,···，则对项目A的后评估包含了对各个子项目Ai的后评估。

其中各个子项目的后评估模型如表1所示，然而对于项目A所开展的后评估工作应该包含了各个子项目的评估及各个子项目对其贡献度大小，由贡献度因子λ表示。

定义2：假若各子项目Ai对于项目A成功所做出的努力程度为贡献因子λi，计

其中，αi为定量因子，为子项目金额所占总项目金额的比例大小，且0 ＜αi＜ 1；βi为定性因子，由专家经验确定，且0 ＜βi＜ 1。

若各子项目Ai的得分已计算出为φi，则项目A的得分Φ为

其中，表示 {λ1,···,λi,···,λn}归一化后的值。因此，由Φ大小可以得出项目A开展的优劣程度。并且，Φi的大小表征出了各子项目对项目A成功的实际贡献值。

3 科技项目评估的主要步骤

在上所述评估方法基础上，根据层次分析的方法和原理，确定广西电网公司科技项目后评估指标权重，然后依据专家打分原则确定各指标得分具体实施如下。

1）依据2.1 内容，确定后评估体系中各指标权重系数rij。

2）组织专家严格依据项目评分细则对各指标进行打分，分值介于0～10。

3）计算评估结果，求得单项目得分φi。

4）循环步骤2 至3，确定多个单项目得分值。

5）依据公式（9），计算子项目Ai的贡献因子λi，并求得归一化后的值。

6）由公式（10），求解项目A的得分。

7）同理，依据参考表1，给出科技项目后评估结论。

4 软件开发

为实现后评估工作的软件智能化，研究开发了广西电网公司科技项目后评估软件。其软件管理界面，如图1所示。

图1 科技项目后评估软件管理界面

本软件设置评分员和管理者两种权限。系统主要包括：指标管理模块、项目管理模块、项目评估模块和系统管理模块。各模块的结构功能图如图2所示。

图2 软件模块结构图

图3 多项目后评估流程图

5 实例

选择某电网公司近5年完成的“一类在线监测项目A”，其包括4 个子项目：大跨越导地线微风振动在线监测系统A1、输电线路综合状态在线监测系统研究开发A2、输变电设备外绝缘表面污秽在线监测技术应用研究A3、电网主设备安全预警监测平台建设及应用A4，即A={A1,A2,A3,A4}。

项目后评估过程

选择相应的后评估体系模型，其中后评估专家为6 人，首先按照单项目后评估流程得出各单项目后评估结果，如表3所示。

表3 单项目后评估结果

由于各子项目对项目A的贡献度不同，依据公式（9），按照各子项目的投资金额，求得定量因子α= (0.4646,0.0491,0.4432,0.0432)，并且由专家综合给出的定性因子β= (0.3,0.15,0.15,0.4)，归一化后得贡献因子λ= (0.6045,0.0321,0.2884,0.0750)。如图4所示，综合考虑定量因子和定性因子后，虽然定量描述中A1和A3所占比重较为接近，但是考虑定性描述后更加突出了A1对项目A成功的贡献度。这说明了项目成功与否并不完全由其金额所占大小决定，还牵扯到项目的对整个系统的重要程度。

图4 定量因子、定性因子和贡献度因子对比

依据式（10），可求得项目A的得分为8.9017，各子项目得分分别为5.598、0.2410、2.3937、0.6690，可得出本类项目整体达到了优秀程度，具有良好的社会推广价值。

6 结论

文本建立了一种新的科技项目后评估体系模型，并对模型的各指标进行了详细说明，最终开发了一套科技项目后评估软件，通过具体项目实例验证了评估体系及方法的有效性。实践证明，本文研究理论与方法可推广应用到后评估工作中。

[1] 陈志莉.电网建设项目后评价理论及应用研究[D].北京:华北电力大学(北京),2005.

[2] 张文泉,王泓艳,程美山.项目后评估方法与项目后评估制度[J].电力技术经济,2005(5):42-45.

[3] 薛玉兰.技术改造项目的后评估管理[J].华东电力,2006,34(6): 28-31.

[4] 赵彪,刘海波,韩丰,等.跨区联网效益后评估方法的探讨[J].电网技术,2004,28(13):1-5.

[5] 姚雨辰.科技基础研究计划项目后评估研究[D].南京:南京理工大学,2010.

[6] 杨卫红,何永秀,李德智,等.模糊区间评价与层次分析相结合的电网改造项目综合后评估方法[J].电网技术,2009,33(5):33-37.

[7] 胡蓉,张焰,范超,等.配电网规划后评估指标体系的研究[J].华东电力,2007,35(8):70-74.

[8] 赖敏,王广生.电力企业科技项目后评估指标权重系数的调研和计算[J].华中电力,2009(5):36-39.

[9] 姚刚,刘速飞,马劲东,等.配电网评估指标体系建立与评估方法[J].华东电力,2009,37(12): 2038-2040.

[10] 舒慧芬.脱硫工程后评估的必要性及对后评估工作的建议[J].中国电力,2005,38(11):66-68.

[11] 朱鹤,杨丽徙,朱延伟,等.计及地理空间信息的农网投资效益后评估方法[J].电力系统及其自动化学报,2012,24(5):31-35.