装备研制项目量化评价体系的研究与应用

刘少红，王 倩，肖 伟

(中国电子科技集团公司第五十二研究所，浙江 杭州 311100)

0 引 言

一般而言，装备的研制均以项目组的方式展开研制工作。而装备研制项目(以下简称“项目”)由于研制周期长(有时跨越几个年度)、研制过程多(包含论证、方案、工程研制、性能鉴定、列装定型等)、过程复杂、技术难度高、资源协调难度大等特点，往往存在进度不可控、质量问题多、成本难以控制等问题，因此项目组工作效率的高低、工作质量的好坏对项目的研制进度、装备质量、研制成本等均构成直接影响。为提高项目组的工作质量，促进项目组成员的工作主动性和积极性，确保项目高效、高质量、低成本的完成，建立一套项目的完成质量和完成价值的评价体系，并将评价结果与项目组的考核激励关联很有必要[1]。但现行装备研制过程中没有成熟的项目完成质量和价值评价体系，给项目管理带来很大困难。

本文提出的项目量化评价体系，主要是与大家探讨一种对项目完成质量和价值贡献的量化考核的方式，并通过几个项目实际评价应用，希望能为装备研制类项目评价提供一定的参考和指导意义。

一般情况下，项目评价分为立项评价(前评价)、实施评价(中评价)和绩效评价(后评价)。本文所述项目完成质量和价值评价主要是绩效评价。

1 项目评价流程

按照时间先后和工作步骤，项目评价一般的流程是：成立评价小组—组织立项前的评估—任务书的确立—项目研制工作展开—结项后提交项目数据—组织项目评价—提交评价结果报告。具体流程图如图1所示。

(1)成立评价小组

首先在单位内部成立项目评价小组，小组的成员由技术专家组(科技委或总工程师办公室人员)、质量专家(质量管理人员)、项目管理人员组成，评价小组的成员要相对稳定，可依据各单位实际情况而定。

(2)组织立项前的评估

由于不同的项目，其复杂程度、技术难度等存在较大差异，为保证项目完成质量评价结果的公正性，单位应事先成立技术专家组，由技术专家组根据项目的情况为项目赋予一个难度系数。技术专家组属于项目评价小组的一部分，由单位内部具有丰富经验的专家组成，且保持人员的相对稳定性，确保赋予的项目难度系数的准确性。具体操作为：项目立项前，由评价小组组织技术专家组对项目难度系统进行评估后赋予难度系数，并在下任务时在任务书中明确。难度系数可以选择0.6～1.0(基本无风险的改进研制，继承类项目)、1.0～1.2(无明显技术风险和难度的研制项目)、1.2～1.5(有一定技术难度，较为复杂的研制项目)、1.5～2(有较大技术风险、管理复杂的研制项目)四个等级。

(3)任务书的确立

立项评估完成后，由项目管理员确立任务书，明确项目难度系数、各节点完成时间要求、质量控制相关要求、预算成本等，下发至各执行部门。

(4)项目研制工作的展开

项目研制工作按计划节点展开，同步收集项目运行过程中相关信息，例项目三大评审(设计评审、工艺评审、产品规范评审)执行情况、试制过程控制情况、技术状态管理、试验质量控制、质量问题闭环处理、项目归档情况、用户信息反馈项目过程记录文件等[2]。

(5)结项后提交项目数据

项目完成后，由项目组向评价小组提交项目数据。

(6)组织项目评价

由项目评价小组按照评价方法，对项目完成质量和完成价值进行评分。

(7)提交评价结果报告

评价小组整理项目评分情况，汇总后形成项目评价结果报告，并提交评价结果报告。

图1 项目评价流程图

2 评价方法

本文阐述的项目评价体系，一方面是从项目完成质量角度进行评价，通过量化考核方式，围绕项目全寿命周期(方案、工程研制、列装定型)展开，从三个维度(质量、进度、成本)对项目进行量化打分；另一方面从项目完成价值角度，结合项目难度系数进行客观评价。

2.1 项目完成质量评价

2.1.1评价要素

结合装备研制类项目小批量、多品种和周期短的特点，为了确保项目质量，研制类项目管理强调的是质量管理和过程管理；按照GJB 9001C质量管理体系要求，实施必要的过程和管理控制，保持项目质量受控的必要记录，确保装备研制项目的顺利完成和交付。

项目评价要素围绕三个主要方面，质量、进度和成本。这里所说的质量是侧重于项目本身的质量，包含了在项目整个生命周期的质量控制过程，包含设计质量控制(设计和开发策划、设计和开发控制)、试制过程质量控制、技术状态管理和试验质量控制、质量问题处理情况等，项目量化评价体系示意图如图2所示。

图2 项目量化评价体系示意图

(1)质量

1)设计质量控制

设计是质量控制的源头，产品质量是设计、制造和管理出来的而不是靠检验和试验出来的。休斯针对福特汽车公司的一项研究结果表明，尽管在产品的设计阶段所做的工作成本通常只占到产品总成本的5%左右，但它对未来的产品质量的影响却占到了70%[3]。

设计质量控制评价的要素有设计和开发策划工作有效性、设计活动执行情况和设计评审意见或遗留事项的落实情况。将设计质量控制的评价要素用量化考核的方式展开。具体评价内容、检查方式和扣分标准见表1所示。

2)试制过程质量控制

主要评价工艺评审、试制前准备状态检查和首件鉴定工作的符合性。具体评价内容、检查方式和扣分标准见表1所示。

3)技术状态管理

主要评价技术状态标识、控制、纪实和审核与规定要求的符合性和有效性。技术状态管理过程示意图详见图3。

检查项目研制过程中是否发生了技术状态变更，并按规定履行了审批手续，技术状态更改是否落实。具体评价内容、检查方式和扣分标准见表1所示。

4)试验质量控制

试验质量控制一方面评价试验依据(试验大纲或产品规范等)有效性，另一方面评价研制阶段试验工作有效性及其与要求的相符性。具体评价内容、检查方式和扣分标准见表1所示。

表1 项目量化评价体系和计分标准

续表1

5)质量问题处理

质量问题从客观上反映了产品实物质量实际状况，将质量问题处理纳入了项目指标评价体系中，主要评价内容包含产品设计、试制、调试、检验试验及交付后质量问题数量；问题处理效率和纠正及纠正措施的有效性。具体检查方式和扣分标准见表1所示。

6)归档情况

主要是检查项目归档的及时性，具体检查方式和扣分标准见表1所示。

7)其他

主要是确认产品质量及服务是否让用户满意，具体检查方式和扣分标准见表1所示。

图3 技术状态管理过程示意图

(2)进度

进度评价包含了两方面的内容，一方面是进度风险管理，即风险分析及应对措施；一方面是进度控制，即节点考核完成情况。具体检查方式和扣分标准见表1所示。

结合目前装备研制类项目研制周期短的特点，项目进度管理在整个项目运行过程中显得愈发重要。

(3)成本

研制成本包含了装备制造成本和产品研制期间的管理费用、财务费用。装备制造成本一般包括直接材料、直接工资、其他直接费用(如直接从事装备生产人员的职工福利费等)、制造费用、军工专项费用等成本项目。

将研制成本与项目立项时预算成本相比较，将成本控制纳入评价体系；并为同类型项目后期报价等提供支持信息。具体检查方式和扣分标准见表1所示。

2.1.2计算方法

1)单项评价

项目完成后，由n名评价小组成员按照评价指标体系对项目进行打分；对质量、进度和成本，单项进行评价后计算得分xij，i=1，2，…，n，i表示评价小组组员；j=1，2,…,m，j表示评价因子，例质量。

2)综合评价

表2 加权系数表

表3 项目计分表

2.2 项目完成价值评价

项目贡献值K由项目完成质量分S和项目难度系数d确定，即k=dS/100。

3 项目量化评价体系应用

3.1 结果应用1——项目评价

从某研发部2021年完成的项目中，选取了四类项目A、B、C和D，对应项目难度系统为1.8、1.3、1.0和0.6，按照附表1计分标准进行统计后，得出了四个项目的评价情况，如表4所示。

表4 项目评价情况

A项目属于系统级新研项目，技术难度大，系统层级较高管理难度也较大；在立项评估时，技术专家组确立项目难度系数为1.8；项目运行过程中，因为无相关成熟开发经验，项目组在做详细方案时，花费了很多精力和时间，导致分系统方案评审、试制时间节点与计划节点发生了较大的偏离，最终两次调整了交付时间点；在系统集成、联试试验过程中也出现了一些质量问题，且未按要求进行技术状态管理，联试过程中软件版本发生变更，未及时办理变更流程入产品库管理；项目性能验证阶段，外场环境搭建、人力成本投入，项目成本较前期预算有较大偏差；结项后按照评价方法进行考核，项目质量完成评价为69.7分，贡献值为1.25。

B项目属于单设备级新研项目，因产品实际使用环境较恶劣，产品结构设计、工艺设计要求较高，且对产品选用材料、元器件国产化等均有较高要求，项目组对新材料、新器件选用和验证等花费了一定的时间，最终进度未能满足实际交付要求，且验证试验增加了不少成本；结项后项目评价小组对该项目进行了评价，项目质量完成评价为80分，贡献值为1.04。

C项目属于无技术风险的新研项目，立项评估时，技术专家组评定项目难度系数为1.0；项目实际运行过程中，按照设计和开发计划的节点，按时完成了各项设计和开发活动，并输出了各项技术文件；但在试制过程中工艺评审意见未及时闭环，扣了4分；最终按时完成了交付；按照评价方法，项目质量完成评价为98，贡献值为1.0。

D项目属于改进类项目，技术成熟度较高，年初下任务时，技术专家组确立项目难度系数为0.6；在项目运行过程中，严格执行了程序，未出现质量问题，并按时交付用户，从项目财务汇总的成本显示无超出，按照评价方法，项目质量完成评价为100分，贡献值为0.6。

3.2 结果应用2——绩效考核

项目贡献值可以为项目绩效考核提供支持信息，例如某事业部有N个项目，所有项目贡献值K相加后，可以得出一个贡献值总和T=K1+K2+…+Kn。年底根据该事业部的奖金包总额F，可以得出每单位贡献值对应的奖金b=F/T，以及每个项目的奖励金额M=KF/T，供课题组成员按贡献大小分配，员工的绩效考核可以参照其实际年度参与项目的贡献值进行累计。这样可以较好地解决按价值贡献分配的问题，提高员工的积极性和研制项目的完成质量，确保项目按时保质完成。

4 结 语

本文围绕产品实现过程展开，又从项目管理的三重影响因素质量、进度、成本切入，建立了项目指标评价体系和计分标准；通过量化考核的方式，应用于装备研制类项目的完成质量和价值评价，最终为产品质量持续改进和项目绩效考核决策提供支撑信息，可以在一定程度上反映“多劳多得”，从而提高项目开发人员工作积极性，促进新项目按时、保质完成。