智库成果模糊综合评价研究

2018-02-28 03:39陈海贝卓翔芝
关键词:智库成果专家

陈海贝,卓翔芝

( 淮北师范大学管理学院,安徽 淮北 235000)

引 言

我国智库研究存在重数量、轻质量,重形式传播、轻内容创新等问题。中共中央办公厅、国务院办公厅印发的《关于加强中国特色新型智库建设的意见》中指出“高质量研究成果不够多”是我国智库的突出问题之一,提出要深化智库成果评价和应用转化机制改革。

自智库出现以来,发展日新月异,成果种类丰富。许多学者对智库成果进行了研究,提出了一些见解。曹健等[1]通过网络调研法,对世界一流水平的高校智库成果进行了分析,提出要拓展智库成果新形式并加强宣传、推广。毕长泉等[2]从智库成果的类型、内容体系和可获得性三个方面进行了分析,指出智库成果对衡量其地位和价值有举足轻重的作用。钟曼丽等[3]提出要利用新媒体网络来传播智库成果,进而影响大众。丁炫凯等[4]对百度、阿里巴巴、腾讯智库的成果进行了量化分析,提出智库成果需注重错位竞争。张志强等[5]指出我国的新型智库建设既缺乏研究成果的高质量管理理念,也缺乏管理的制度规范,更缺乏质量管理控制的严格流程。温馨等[6]指出我国高校智库建设目前还处于起步探索阶段,存在研究成果转化不足的问题,需加快智库运行机制的改进和智库间的协同创新。

纵观已有文献,可以看出,学者们关于智库成果的研究多采用了定性手段,缺少量化分析,客观判断不足。因此,本文拟采用模糊综合评价这一量化方法对智库成果进行研究,以期通过客观公正的评价对智库成果的改进提出建议。

模糊综合评价法已经被应用于团队创新、舆情控制、环境污染、用户需求等诸多领域。尹惠斌[7]利用模糊综合评价,构建了突破性创新团队内部知识冲突水平评价的模型,对知识冲突水平进行了量化评价; 张玉亮[8]利用模糊综合评价,构建了突发事件网络舆情信息流风险的模糊综合评价模型,提出了控制网络舆情信息流的建议;王爱民[9]将神经网络理论应用于模糊综合评价,给出了一种基于三层神经元的多用量化评价方法;沈进昌等[10]利用模糊综合评价,运用云模型的逆向云发生器和云运算原理,结合云模型的模糊性、随机性、统计性性质对一个评价系统进行了综合评价;田云丽[11]在综合分析水环境影响因素的基础上,应用模糊综合评价方法对工业污水对环境安全的影响进行了研究,指出模糊评价法在该领域有广阔的应用前景;郭炜等[12]利用模糊综合评价法对我国中小商业银行农村小额信贷绩效进行了评价;张少刚等[13]利用模糊综合评价法,建立了化工园区综合应急能力评价模型,并提出了改进措施; 徐勇等[14]在情感分析的基础上,建立了用户生成内容模糊综合评价模型FCE,指出模糊综合评价可以应用于图片、视频信息方面的评价。

模糊综合评价法作为一种综合评价方法,可以使难以定性的评价对象转化为定量评价。智库成果多样化,评价标准无法界定以及评价流程过于复杂,正好符合模糊综合评价法的研究条件,故本文采用此法对智库成果进行细致、深入的评价,以改善智库成果质量低、缺乏创新等问题。

1 智库成果类型

智库成果类型见表1。智库成果既包括图书、专著、期刊论文、研究报告、工作文件、新闻稿、简讯等正式的产品,也包括博客、播客、宣传平台等非正式的产品。前者具有权威性、参考性、利用性等特点,是目前智库市场最常见的成果,也是评价智库机构和智库人才的标准之一。后者具有传播性、宣传性、丰富性等特点,是各智库机构极力开发的附属产品,为大众传播、全民交流提供了便利的平台。智库成果的多样化表明智库市场的潜力无限和智库发展的空间无限,也表明智库越来越被大众所需要。

表1 智库成果类型

2 模糊综合评价法

智库成果的多样化决定了其研究背景、研究方法、研究目的的差异化,导致了智库成果评价的复杂化。智库成果如此多变,评价标准本身无法被界定,使得评价过程也变得复杂。智库成果评价的过程存在诸多的不确定性,评价指标难以定性。而模糊综合评价法是基于模糊数学的一种综合评价方法,可以使难以被定性评价的对象转化为可被定量评价。同时,本文引入了专家评价的因素,使评价结果更加客观、公正、全面。因此,采用模糊综合分析法对智库成果进行评价具有一定的可行性。

2.1 构建评价因素集

待评价整体中的每一个个体都可以作为一个评价因素,对评价体系的评价必然要通过对每个评价因素的评价才能获得最终的评价结果。评价因素是指对某主题进行评价的具体内容,按照其重要性程度又可以逐级分为不同的层级,一般而言可分为一级指标、二级指标和三级指标等。假设共有m 个评价对象,分别为: h1,h2,…,hm,则总的评价集为:

2.2 构建评价因素权重集

评价因素权重集是指每个待评因素所占比例的集合,代表了每个待评因素的重要程度。先根据二级指标的专家排序结果来进行统计分析得到总分,再根据重要程度系数的计算公式得出各指标所占的权重。为方便计算,将最终的结果进行归一化处理。假设待评对象所占的权重分别为: W1,W2,…,Wm,则评价指标的权重集记为:

2.3 构建评价结论集

专家们按照规则对评价因素作出相应的判断,并给出合理的评语和等级。智库成果的评价等级表示为V,根据实际情况设定五个等级,分别记为: V1,V2,V3,V4,V5,则智库成果评价集为:

智库成果评价等级的具体划定说明见表2,其中V1表示很好,V2表示较好,V3表示一般,V4表示较差,V5表示很差。将V1,V2,V3,V4,V5的分值分别设为: 100,80,60,40,20。

表2 评价等级说明

2.4 计算模糊评价矩阵

每一位专家按照给定的评价标准,分别对每一个待评对象进行公平、公正的评价,所有评判结果的累加与评判等级一一对应,最后构成一个评判矩阵。同样,为方便计算,再进行归一化处理,得到最终的评判矩阵。假设评判矩阵为:

式中,rij表示待评对象中第i 个因素相对于评价等级j的评价结果。

2.5 进行模糊综合评判

根据上述权重矩阵和评判矩阵来进行一系列的计算可得到最终的评判结果,进而对评判结果进行专业的分析,由此可发现该成果的缺陷,从而对症下药、加以改进,还可以对不同的成果进行对比分析,找出适合它们发展的路径。设最终的评判结果为:

3 实例分析

3.1 背景

为了考察某高校智库成果的实用性、有效性,本文选取了政府、高校和企业智库的专家,采用模糊综合分析法对该高校具有代表性的4 项智库成果进行了测评。选取的4 项智库成果分别为专著、会议论文、研究报告和微信平台。每位智库专家根据专业判断、工作经验,坚持公平、公正、客观的原则,对这4 项成果进行了详细的分析、评价,然后按照本文提出的模糊综合评价方法进行了一系列的计算,得到最终的评价结果。

3.2 智库成果指标评价体系

本文以智库成果为目标层,通过对相关文献资料的分析总结,最终以智库成果的传播能力、实效能力和前沿能力为一级指标,以人际传播、大众传播、实用性、有效性、研究背景等为二级指标,构建了智库成果的指标评价体系。智库成果指标评价体系划分见表3。

表3 智库成果指标评价体系

3.3 智库成果评价

3.3.1 组建专家评判小组

国际上一流智库的专家评审机制都有各自的特色,有的是外部专家评审,如美国国家研究理事会; 有的是内部专家评审,如世界资源研究所;也有的是内、外部专家一起评审。这些智库机构的评审机制都是独立的,这样保证了智库成果评价的客观性。本文在选取评价专家的时候,考虑了智库专家的胜任能力,主要从显性能力和隐性能力这两个方面来考虑。首先,显性能力方面主要考虑了专家们的专业知识、教育背景、工作经验、研究背景等。其次,隐性能力方面主要考虑了专家们的洞察能力、学习能力、沟通能力、社交能力等。通过检验,本文选取的智库专家具有一定的可信度。最终,在政府、高校、企业智库中各选择3 人来参与智库成果的评价。9 位专家对智库成果的9 个二级指标的重要性分别进行了排序,详见表4。

表4 各专家对二级指标的排序结果

3.3.2 计算模糊向量

(1) 根据表4 的指标重要性排序值进行统计分析,规则为:

式中: Ei-k表示第k 位专家对指标hi所给定的重要性排序值; Eij-k表示第k 位专家对指标hi和hj的重要性排序值的比较。

以专家5 提供的指标重要性排序为例: E2-5= 9,E3-5=4,则有E2-5/E3-5>1,E32-5=1,即专家5 认为指标3 比指标2 重要或指标2 没有指标3 重要。以此类推,可以得到专家5 的得分表,记为W5。其余所有专家的指标重要性排序经过统计计算后,得到总的得分表,见表5。

表5 专家评价总分表

表5 中各指标的综合计算公式为:

(2) 重要程度系数λi的计算

令λmax= 1,λmin= 0.1( λ ∈[0,1]) ,则极差为:

例如:

经过归一化处理得:

3.3.3 计算模糊评价矩阵

9 位专家对每一个指标进行相应的等级评价,将他们的评价结果进行累加,得到总的评价矩阵,对其进行归一化处理,结果见表6 和表7。

表6 成果1 与成果2 归一化后的评价矩阵

表7 成果3 与成果4 归一化后的评价矩阵

3.3.4 进行模糊综合评价

根据求得的模糊向量和模糊评价矩阵可求得最终的模糊评价结果,如下所示:

成果1、2、3、4 的最终评价结果分别为74.18、81.80、76.72、82.18,说明成果1 和成果3 的评价等级介于一般和较好之间,成果2 和成果4 的评价等级介于较好和很好之间。通过分析发现,智库成果的差异虽然不明显,但还是有差别的,所以要注重智库成果的均衡发展。

3.3.5 模糊综合评价法评价结果与专家评价结果的对比分析

根据专家对各级指标进行的重要性排序,发现专家们普遍认为重要的三个指标依次是h3、h2和h4。其中,指标h3代表新媒体的使用情况,即智库成果的宣传效果,对应着宣传型成果。指标h2的重要性次之,代表会议、专著、研究报告等学术质量,即学术型成果。故专家们认为宣传型成果和学术型成果是目前已经在关注并着力发展的,而政策型成果的大众化普及和认可还需进一步加强。而通过模糊综合评价法得到的评价结果是学术型和宣传型成果分数较高、政策型成果分数略低。两种方法的评价结果基本一致,说明模糊综合评价法对于智库成果的评价有其合理性和科学性。

4 结束语

(1) 通过评价结果发现智库成果的发展是不平衡的,学术型、政策型和宣传型成果的发展各有差异。评价分数较高的成果表明其已经引起了足够的重视,评价结果低的成果表明其还未引起重视。目前,智库机构比较注重学术型和宣传型成果的发展,相关成果数量很多。而政策型的智库成果相对较少,还未完全进入公众的视野。一个智库优秀与否,取决于其短板的长度,因此,智库需要注重每种类型成果的全面发展,目前如何保证智库成果的均衡发展是一个亟需解决的难题。

(2) 在对智库成果评价的过程中,发现存在大量的灰色成果,即被人们忽视的成果或者根本没有引起人们关注的成果。这些智库成果已然成为了摆设,随着时间的变迁,渐渐失去了它们原有的价值。众所周知,智库成果最重要的一点就是时效性,如果没有及时地进入公众视野,便被浪费了,这不仅仅是对智库成果的不尊重,也是对智库学者的不尊重。更重要的是,这些被忽略的成果或许原本对社会有很大的价值,而人们对其的忽视可能导致社会某些方面发展的停滞。即使对这些灰色成果进行二次开发,业已延误了最佳时机。因此,智库机构要确保智库成果的透明化,把它们曝光在人民大众面前,才能实现其真正的价值,才能真正为社会、为人民谋福利。

(3) 智库成果多种多样、百花齐放,而其质量却得不到保障,因此,智库成果的定期评价是必不可少的。通过合理的评价手段可发现智库成果的发展程度和发展短板,再加以针对性地采取措施才能保证智库成果的高质量、多样化。智库学者可从评价结果中找出新的突破点,以避免重复性的研究工作。智库资源非常有限,智库学者非常宝贵,因此如何利用有限的资源以及如何发挥学者的才能为国家做有意义的事情至关重要,而只有通过智库成果的评价才能让智库有效分配资源,避免无意义的消耗。

猜你喜欢
智库成果专家
致谢审稿专家
验收成果
工大成果
“健康照明”成果聚焦
“三医联动”扩大医改成果
微智库
微智库
请叫我专家
专家面对面
智库能为我们做什么?