基于模糊综合评价法的信息化项目后评价研究

崔鹏 张东 霍世超 闫竣程 焦子洋

摘要：信息化对经济社会发展的引领作用愈发重要，各行业纷纷开展了信息化项目建设，如何评判项目建设效果成了建设单位需共同面对的一个问题。本文分析了信息化项目后评价的方法，并应用相关理论从目标实现、过程实现、应用评价和效果评价四个维度构建了评价体系，选取了某企业MES系统项目开展后评价实践研究，得出了结论、总结了经验、查找了不足、提出了建议，以期对企业信息化项目的建设、管理水平提升提供借鉴和参考。

关键词：模糊综合评价法;MES系统;后评价

当今时代，信息化对经济社会发展的引领作用更加凸显，没有信息化就没有现代化，各行各业纷纷上马了各类信息化项目。然而，信息化建设也是一把双刃剑。一方面，信息技术发展迅速，成为推动社会生产新变革的重要力量，企业利用信息化手段，可大幅提高生产效率、降低生产成本，因此开展了大量信息化项目建设，认为“不上信息化是等死”;另一方面，信息化建设专业性较强、特点明显，不但需要投入大量资金，还需要组织架构、制度流程、人力物力等多方面配合才能显现出其价值，某个环节未做好就可能导致整个项目无法实现预期效果，不但资金、人力、时间等投入付之东流，更可能打击企业开展信息化建设的热情，导致“上信息化是找死”。因此，在科学规划、系统实施、深入应用后，如何评价信息化的建设效果是一个急需研究的问题。

一、后评价的概念和意义

后评价既是项目管理的重要一环，也是项目管理的重要延伸。后评价是指针对己完成的项目对其目标实现、执行过程、效益效果、作用影响进行全面、系统、科学、客观的分析评估的活动。通过项目后评价，可以查验项目规划是否合理可行，项目主要建设目标是否实现，项目建设过程是否合规高效，项目应用推广是否全覆盖和高利用，项目建设效果是否达到预期。利用项目后评价，总结分析项目实施过程，找出影响项目成功或失败的因素，及时汲取教训总结经验。同时，可凭借有效的信息反馈，为后续新的信息化建设项目积累经验，提出合理化建议，达到提高项目投资效益的目的。

二、项目后评价方法

后评价自上世纪七十年代起，作为一种科学的手段和工具就被广泛利用，并逐渐形成了一些系统的方法。

（一）成功度评价法

成功度评价法也称之为专家打分法，依靠专家的经验，依据项目执行情况按照系统准则或目标判断对项目的成功度进行评价。成功度评价法的关键是选取适当方法对指标进行赋权，缺点是定量分析较少、定性分析较多、受评价专家主观因素影响较大，结论通常具有一定程度的片面性[1]。

（二）对比评价法

对比评价法可分为“前后对比评价”和“有无对比评价”。“前后对比评价”指将项目实施前的可行性研究及其预测结论与项目实施实际结果相比较，发现不同并分析原因。该方法无法判定项目外的多种因素影响，有可能无法得出真正的效果的结论。“有无对比评价”指将项目实施后的结果与假如不实施项目可能发生的结果进行对比，用于评判项目的实际效益与影响[2]。

（三）逻辑框架评价法

逻辑框架评价法简称LFA，其核心是关注事物间的因果逻辑关系，即“假如”提供何种条件，“那么”将会产生何种结果。其通常将项目的目标和因果逻辑关系分成4个层次，并使用4×4矩阵来表示。该方法的缺点主要在于对项目实施过程的相关评价关注不够[3]。

（四）模糊综合评价法

模糊综合评价法是利用隶属度理论的一种方法。该方法具有系统性强、结果清晰的特点，能够较好地解决难以量化、不确定性的问题[4]。

在使用模糊综合评价法进行评价过程中，为评价因素和评价因子的权重进行赋值，确定不同评价因素和评价因子之间的隶属度，需要使用层次分析法。模糊综合评价法的主要原理和步骤如下：

⑤合成结果向量

把A与被评价对象的R进行合成，得到模糊综合评价的结果向量B。

三、某企业MES系统项目后评价实践

（一）项目简介

某制造企业生产涉及原材料检验、成型、热处理、机加工、产品检验等多到工序。在建设MES系统前采用EXCEL表格的形式人工开展生产组织，存在过程管理信息数据多、更新变化快、设备使用资源冲突严重等问题。为实现多品种、多状态、混线生产模式的有序、协调、可控和高效专业化协同生产目标，实现批产效率提升的目的，该企业开展了MES系统建设。

（二）组建评价小组

为顺利开展MES系统项目后评价工作，该企业组建了包括信息化规划部门、资产投资部门、信息化技术部门和业务使用部门共同组成的评价小组，负责MES系统项目后评价指标体系构建、指标权重确定、指标评分等具体工作。

（三）构建评价指标体系

由于信息系统建设影响因素较多、过程相对复杂，导致评价体系需要选取的指标较多，因此必须将评价指标划分归类，分层次来深入分析。本次实践使用层次分析法，把拟评价的指标按类别分为一级指标，再将一级指标细分为二级指标，形成一套完整的评价指标体系，详见表1。

（四）后评价实践

上述指标评价体系中有明确定量的指标可直接判定，也存在部分指标无法定量描述，因此需要评价小组使用主观经验来判断分析，将定性的、不明确的认知量化表示。本次实践使用模糊综合评价法对结果进行评判。

首先，采用德尔菲法通过独立收集评价小组关于各层级下属评价指标相对重要程度对比，采用萨蒂标度法，对同层次各项评价指标按照1—9比率标度法互相对比评分，计算每个判断矩阵的最大特征值以及特征向量，通过一致性检验后算出各指标权重值，以判定每两项评价指标间的相对重要性。

其次，采用德尔菲法收集MES系统項目指标满意度的打分的资料，采用模糊评价法计算评价结果。对应于评语集U={优，良，中，较差，差}进行判断，评语加权系数矩阵为F=（9，7，5，3，1）T。

最终MES系统项目评价得分为7 < 7.654 4 < 9。

（五）评价结果分析

通过对MES系统项目后评价，得出该项目处于优和良之间的结论。综合看来，本项目实现了既定的建设目标，实施过程合法合规、经费得到了有效控制，在企业中有效推广使用、利用率较高，系统整体符合企业信息化规划，一定程度上提升了企业生产效能。然而，本项目也存在实施周期略为拖期、企业信息化技术部门对运维支撑性较弱、系统可持续性有待提高的问题，需在后续项目建设中重点关注。

四、结语

本文分析了信息化项目后评价的意义及方法，并选用综合评价法对某企业MES系统项目进行了应用实践。在实践过程中，采用层次分析法和模糊综合评价法对项目建设目标、建设过程、应用推广和建设效果进行了科学、系统、客观的分析与评价，总结了成功经验并发现了不足之处，是一次有益的实践活动，对企业未来提高信息化项目的投资管理水平，提高企业科学决策能力的具有一定指导意义。

参考文献：

[1]董华.项目评价[M].北京：中国标准出版社，2008.

[2]余修江.浅议项目投资后评价[J].中国总会计师，2015（6）.

[3]陈启明，张从海.企业实施ERP适应度的灰色模糊综合评价研究[J].安徽工业大学学报：社会科学版，2013（4）.

[4]周鑫，黄维江.基于模糊评价法的信息系统实施效果评估方法研究[J].电脑知识与技术，2014（13）.