文献计量学在科技实力评估中的作用

董 琳

文献计量学在科技实力评估中的作用

董 琳

从科技实力的涵义、科技实力的评估以及评价指标体系等方面,阐述了文献计量学在科技评估中的实践应用和发展。强调在当前我国人口和计划生育科技管理工作中,应正确认识科技评估工作的重要意义以及存在的问题,有效利用科技期刊,建立并完善科学的评估指标体系将有利于促进我国人口和计划生育科技事业的健康、可持续发展。

科技期刊 科技评估 文献计量学

Effect of bibliometrics on assessment of scientific and technological strengthDong Lin.Editorial Department of Chinese Journal of Family Planning,Beijing100081

AbstractThe practical applications and development of bibliometrics in the assessment of scientific and technological strength are illustrated from the aspects of the meaning and assessment of scientific and technological strength aswell as the evaluation index system.It should be emphasized to realize both the significance and the existing problems of scientific and technological assessment correctly,and make effective use of the science and technology periodicals,and establish and improve the scientific evaluation index system in the management of science and technology for practicing family planning,resulting in a healthy and sustainable development of science and technology in the field of population and family planning.

Key words: Science and technology periodicals;Science and technology assessment;Bibliometrics

随着科学技术的迅猛发展,科研活动及其作用和影响不断渗透到人类社会的各领域,成为影响经济发展和社会进步的重要因素。如何从定量的角度去评价科学技术活动的影响及其作用?如何科学公正地评价科技创新的程度与水平?已成为世界各国科技管理部门高度重视并亟待解决的难题。2010年是完成“十一五”科技任务,谋划“十二五”人口和计划生育科研发展规划的重要承启之年[1]。加强科研项目管理,总结科学技术成果,是推动科技事业持续、健康发展的基础保证。目前,世界各主要国家在科技评估中采用的方法有多种,文献计量学是被经常采用的一种重要方法[2]。本人结合期刊编辑出版工作体会,探讨文献计量学在科技实力评估中的价值与实践应用,以期为人口和计划生育科技管理提供参考依据。

一、科技实力与科技评估

1.科技实力定义。科技实力是在一定的生产力系统中,在现有科技人力、财力、物力、知识及信息等科技资源条件下,进行科技活动,发挥效能,取得产出,促进社会、经济、科技全面发展的能力。科技实力是一种评估性概念,反映了科学技术的创新、发展、转移、推广、储备条件以及管理、效果等不同层面的综合性特征。其内容包含了科技资源及其分布状态、科技资源的保障能力、科技创新能力、科技开发能力、科技转移能力和科技活动运作能力等多方面[3]。

2.科技实力评估。科技评估(Science and Technology assessment)是一种旨在提高科技管理与科技决策水平的科技咨询活动,由独立的科技评估机构承担,按照特定的目的,遵循一定的原则、程序和指标,运用科学、公正和可行的方法对科技系统、科技环境、科技活动等可能产生的作用、效果与影响进行综合分析和判断,并作出定性及定量的评价与估量[4]。评估范围包括:科技政策、科技计划、科技项目、科技成果以及因从事科学技术活动而产生的专有技术、专利技术、产品;还有从事科学技术活动的机构、人员等方面[5]。

二、文献计量学在科技评估中的应用

1.文献计量学发展。文献计量评价作为科技评价的最早实践,源于20世纪中叶兴起的科学计量学和科学引文分析。1963年美国情报科学研究所(ISI)编制的《科学引文索引》(SCI)及《期刊引证报告》(JCR),对科学论著进行引证分析,后逐渐发展成为完整的引证检索系统,奠定了在科技评估特别是科技论文和期刊评估中的重要地位。其评价方法主要是根据在核心期刊上发表论文的数量和期刊的等级,计量评价科研绩效。美国科学家E·加菲尔德教授曾利用SCI数据进行过大规模的引文统计,将被引用量特别大的科学家放在可能得诺贝尔科学奖的“侯选圈”中;匈牙利著名科学计量学家布劳温教授,根据SCI数据,利用科学计量指标和引文分析方法来评价某一国家、地区和科研机构的科研水平及学术地位排序,绘制世界科学地理图;联合国教科文组织编制的《世界科学报告》,通过SCI收录论文数和申请专利数等科技产出指标,对世界各国科技水平进行评估对比。论文引证分析最初出现时,国际科学共同体对它尚存疑虑,但科研计量评价方法很快显示出它的优点和应用前景,在欧美科学发达国家的科研评价中被广泛接受,成为国际科研评价的主流[6]。国内学者和有关机构近年来逐步重视文献计量学在科技评价中的作用。中国科技信息研究所从事科技论文的统计与分析研究,每年以公报形式向国内通报我国科技论文统计与引文分析结果。国内著名的几个大型文献数据库均具有检索功能,科技论文产出的数量与质量已逐渐成为衡量一个单位科研实力的重要指标之一,广泛应用于科学生产率、科技投入产出、人才评价、成果质量、科研机构以及不同地区、不同国家科技水平和学术影响力的评价等[7]。

2.评价指标体系。可选择作为科技实力评估的指标很多,包括科研投入指标和科研产出指标,如科研经费、课题结题成果、获奖科研成果、学术论文、学术著作、发明创造、科研人员、项目进展情况、项目完成情况、经济效益和社会效益等。由于不同指标在科研工作中的作用和分量存在差异,在拟定评价指标体系时可赋予不同的权重。其中科研产出指标所涉及的文献计量学指标,即论文被引频次、高被引论文、基金论文、期刊影响因子、即年影响因子等在评价指标体系中占据了重要地位[7]。瑞士洛桑管理学院《国家竞争力年鉴》中科技竞争力指标,从8个因素、200多个指标(分为硬指标和软指标)对国家竞争力进行评价[8]。我国多采用线性加权法进行科技实力评价,分三个步骤进行:首先选择一定数量的指标;然后根据各指标对科技实力的重要性表征程度不同,采用专家调查法或层次分析法赋予各指标不同的权重;最后,用标准化后的各指标数据乘以各自的权重,得出科技实力综合评价值,进行评价和排序[9]。

3.基于论文产出和引文分析的科研成果评价。我国将文献计量学应用于科技实力的评估,最早见于医学领域[10]。对论文的产出进行定量分析,医学机构表现的非常活跃和突出。主要是利用文献计量学方法对有关科技论文产出进行定量分析和引文分析,对有关机构、期刊或主题文献进行统计学分析和科研成果评价。《中国计划生育学杂志》在我国计划生育科技事业发展过程中,在促进科技成果转化、新技术引进推广以及新知识传播应用中发挥了重要作用[11]。笔者曾采用文献计量方法,对该杂志创刊以来刊载论文的机构、个人发文情况进行定量分析和评价,并对国内各地区、各主要科研机构论文产出进行文献计量学评估,提示我国计划生育科技水平总体不断提高,但各地区科研实力发展不均衡,计划生育科技队伍不稳定,整体科研力量薄弱,科研合作程度偏低[12]。论文引文是说明文献之间的相关性及论文发表后产生的社会影响力,尽管引文情况复杂,并且受学科、期刊数、从业人员多少等影响,但它是客观存在的。通过已发表的论文引文分析,可以客观评价我国计划生育事业发展过程中,科研成果的传播与应用程度,以及学科科研创新能力和发展状况[13]。

4.科研绩效评价。科技实力评估中的科研绩效评价内容主要包括:科技投入产出、科技活动的效益与效率以及对社会经济的作用等。在我国科研绩效评价研究与实践应用中高校表现得最为活跃,不仅普遍应用文献计量学测度指标,还相应地推出了高校科研绩效评价指标体系,对国内大学进行实力评估并排序。由于评价指标体系在不断完善之中,也引起诸多争议。有学者对自报指标和源生指标作为评价体系进行了比较。科研总经费、专著总数、学术论文总数、国外及全国性刊物发表的学术论文数、鉴定成果数、成果获奖数、国家级科研成果奖等为自报指标;SCI收录论文数、SCI论文被引用篇数、SCI论文被引用次数、国内论文发表数、国内论文被引用次数、国家自然科学基金项目数量和金额等为源生指标。经比较分析后认为,用源生指标进行科研绩效评价更能体现评价的公正性,而自报指标则会因统计数据缺乏一致性而导致评价结果出现偏差[14]。

5.关于SCI。SCI是目前世界上四大检索系统中最著名的一种,它涵盖了数千种国际权威科技期刊上发表的论文和引文的数据信息,在国际学术界占有重要位置。但在利用SCI来评估我国科研机构和科研人员绩效和科研成果时,应当抱有正确的认识和客观评价。这是因为,由于特定的服务对象和需求,SCI侧重收录以母语为英语的地区及英文版期刊,使SCI数据中的中国期刊一直很少,一些国内高水平的科技期刊未被选入。另一方面,收录的期刊学科结构存在差别,各学科自身发展不同,科研活跃程度也在客观上存在很大差距[15]。目前,许多科研单位或管理部门将SCI作为科研评价的金标准也是不客观、片面的。由于SCI的局限性,更适用于宏观层次,用于微观层次或更小学科时往往显得不够充分,需要谨慎对待。另外,对SCI的盲目追捧,也导致了我国较高水平的科研成果投向国外被SCI收录的高影响因子期刊,从而使我国绝大多数优秀科研成果不能为中国同行首先获悉,也使得国内科技期刊在学术水平和国际化方面陷入困境,不利于我国科技期刊的发展和学术交流[16]。因此广大科技工作者和科技主管部门在利用文献计量方法评价科技绩效和成果时,要充分结合我国的客观实际,处理好SCI与国内主要科技期刊检索系统的关系,这样才能有效地利用科研成果,促进我国科技期刊的繁荣发展。

三、小结

科学评价是国家可持续发展战略对自然科学、社会科学以及技术开发、经济研究各领域的创新性要求;是政府决策、宏观调控和方针政策制定对科学信息的基本要求;是社会、机构对自身创新能力、科技产出力等核心竞争力准确判断和把握的需求。随着计算机技术、网络技术、网络环境、数据库及其应用平台的迅速发展,为文献计量学和科学评价提供了先进的手段和条件[17]。在我国人口和计划生育事业发展中科学技术发挥了重要的科技支撑作用,也取得了许多创新成果。当前,我国人口和计划生育工作已进入稳定低生育水平,统筹解决人口问题的新阶段,正处于创新发展的关键时期[1]。科技主管部门应加强科研实力评价在计划生育科技领域中的研究与应用,重视科技期刊在科技事业中的地位和作用,强化其功能和作用,充分发挥科技期刊在科研成果交流推广和科技实力评估中的重要作用,使其在我国人口和计划生育事业发展中发挥出应有的作用。

1 江帆.新春寄语.中国计划生育学杂志,2010,18(1):4.

2 肖利.发达国家科技评估的方法及启示.科学对社会的影响,2001,(4):18～21.

3 闫佳晖,李庆伟.高校科技评估指标体系的科学化探析.辽宁师范大学学报(自然科学版),2003,26(3):316～319.

4 郝立勤,郝薇.科技评估工作探讨.科技与管理,2001,(2):37～39.

5 卢进.科技评估体系建设初探.科技管理研究,2001,(3):42～44.

6 叶深溪,许为民.文献计量学在科研评价中的应用进展.图书馆论坛,2003,23(4):12～14.

7 董琳.从文献计量学角度评价科技论文的质量.中国计划生育学杂志,2008,16(8):463～467.

8 薛澜.科技研究与开发(R&D)的国际化及中国的对策.科学学与科学技术管理,1995,16(11):4～7.

9 胡永宏,贺思辉.综合评价方法.北京:科学技术出版社,2000.

10 张文举,于涛,李青,等.我国医学水平的文献计量学评估.医学情报工作,1993,14(5):54～58.

11 董琳.《中国计划生育学杂志》在计划生育科技创新中的作用.中国科技期刊研究,2006,17(6):1151～1152.

12 董琳,郭述金.《中国计划生育学杂志》创刊15年学术论文作者群分析.中国计划生育学杂志,2007,15(6):334～340.

13 董琳,郭述金,张璐,等.《中国计划生育学杂志》创刊15年学术论文引文分析.中国计划生育学杂志,2007,15(7):396～399.

14 梁立明,蔡全胜,李国亭,等.高等院校科研绩效评价评估的自报指标与源生指标.科研管理,1998,19(6):45～49.

15 卢秉福,霍丽华.诌议SCI在科研评价体系中的作用.科研管理,2007,28(增刊):180～183.

16 游苏宁.应更有效地利用国内的研究成果.科技导报,2007,25(10):71～72.

17 赵蓉英.我国文献计量与评价研究的新进展.图书情报知识,2004,(2):29.

10.3969/j.issn.1004-8189.2010.06.001

2010-05-31

作者:董 琳 中国计划生育学杂志社(北京,100081)