Scopus和JCR在学科评价中的作用比较分析——以S大学数学学科为例

杨 光,高晓宏

(1.山西大学 图书馆，山西 太原 030006;2.山西大学 经济与管理学院，山西 太原 030006)

Scopus和JCR在学科评价中的作用比较分析——以S大学数学学科为例

杨 光1,高晓宏2

(1.山西大学 图书馆，山西 太原 030006;2.山西大学 经济与管理学院，山西 太原 030006)

学科评价在评估大学学科发展中起着重要作用,文献计量法是当前学科评价应用最广泛的方法,而文献计量法实施的关键就在于相关数据源的使用和数据的获得,目前Scopus数据库以及JCR是实施文献计量法进行学科评价应用最广泛、影响力最大的评价工具,因此本文通过具体学科评价过程,研究了两个工具在学科评价中各自的作用并进行了比较分析,从而对学科评价中评价工具的选取提供了建议。

学科评价;JCR;Scopus;文献计量法

一 引言

随着大学的发展,学科的发展越来越被重视,通过学科评价,能够衡量大学的整体发展状况。大学是重要的人才培育基地,其学科的合理设置及学科实力,成为各大学间进行竞争的比量对象。高等教育体系是为了给予学生知识,而知识以学科为载体,发展学科是大学的基本活动方式[1]。因此,学校大力发展学科,通过教学教育水平及科研成果等相关指标来进行评估,以进一步为学科的发展指明方向。随着我国综合实力不断提升,国家为加强人才培养,对高水平大学的需求日益凸显,因此不断加大对高校的投入,鼓励高校进行科研创新活动以加大科研成果产出量,这就越来越需要进行合理的科学评价。合理的科学评价不仅能为各个高校的学术科研指引方向,使其客观地认识到发展过程中的不合理之处,以便及时进行纠正,而且能够为高校相关部门开展学科评价活动提供科学依据,保证科学评价系统的客观性、可量性。

在科学评价过程中,为保证评价结果的准确性、科学性,合理有效地使用科技评价工具有着重要的现实意义[2]。我们可以利用文献数据库,进行引文检索,这是科技评价的一个重要步骤。所以,在进行学科评价时,选择合适的文献数据库成为评价过程中一个关键所在。在此背景下,本文对在评价工作中普遍使用的期刊评价工具JCR以及近年来兴起的被誉为全球最大的数据库Scopus在学科评价中的作用进行分析比较,以量化指标对其进行优劣比较,为科研人员合理有效的选择学科评价工具提供可借鉴依据。

二 JCR和Scopus使用现状

(一)JCR简介以及使用现状

美国科技信息研究所(ISI)所长Garfield为怎样以数据指标反映期刊影响力做出巨大贡献,他首次提出可以通过论文被引频率来间接反映期刊影响力,之后,ISI以其理论为基础提出了“影响因子”的概念,并于1975开始出版《期刊引用报告》,即“Journal Citation Reports”,简称JCR[3]。JCR期刊评价工具,涵盖了SCI收录的3800种核心期刊,并统计了各期刊的相关引文数据,包括期刊的发文量、被引用次数等,同时利用其特有的评价指标“影响因子”进行直观描述,反映其期刊影响力。除此之外,还提供了期刊的其他相关评价计量指标的排名对比分析,从多个角度、多个指标进行,使学科评价更加客观综合。

JCR可以提供期刊的引用情况、被引用情况及两者的相互关系,进而方便科研工作者衡量研究成果的影响力[4]。对于JCR中收录的期刊,科技信息研究所罗列了这些期刊的相关指标,并进行了分析,用直观的数据予以表示,同时将这些数据进行了排名比较。

(二)Scopus简介以及使用现状

为了更方便快速的获得科技前沿信息,2004年底,Elsevier出版社推出了被称为世界最大的文摘和引文数据库Scopus。Scopus通过简洁的页面,可以方便快速的检索到多种期刊[5]。同时,还具有全面集成的科研网络信息,信息资源十分全面。除此之外,Scopus具有与数据库SCI相当的引文检索分析与科学评价功能。虽然Scopus收录的文摘只回溯到1966年,但是每年都会新增110万条[6]。在1996年后,数据库中录入了发表文章所附的参考文献,数量达到两亿余条,此外,通过与Scrius检索引擎的整合,可提供数量庞大的网页信息[7]。

Scopus凭借着自身优势与特点,短短五年中在全球拥有了接近2000家机构用户。据统计,在世界排名前50名的高校中,订购Scopus的比率由2007年的30%左右增加到2008年的50%;排名前100名的高校,订购比率由2007年的25%增长至将近40%。Scopus数据库不仅在内容选择上还是在功能设计中,本着为用户服务的理念,坚持将用户的需求作为自己发展的目标,从而受到了越来越多的重视。

三 学科评价及评价方法

学科评价是指科研机构在确定评价范围后,采用合理科学的评价方法,对某学科专业进行评估,分析所获数据,研究整体发展状况的活动[8]。学科评价是科技评价的一个分支,其所用方法与科技评价方法一致,主要有两种:一种是定性判断法,一种是定量指标评价法。在定量指标评价法中,文献计量法主要是获取所需要的一系列信息,并对相关数据进行分析,过程简单、易掌握,被广泛推崇应用。其采用了数学中的相关方法,针对以数据表示的信息内容,对文献所能表现出的一些相关信息进行数据化的表示,并加以分析,这样,我们可以据此对学科的发展进行展望[9]。本文正是采用文献计量法来进行定量研究。

在评价过程中,选用合适的指标是其关键环节。科研产出量的大小,直接体现出科学研究中知识存量的丰富程度[10]。而科研论文发表量有效地反映了科研活动的活跃度及科研产出的水平[11]。因此本文主要以学科的科研产出为目标,使用文献计量法,获取相应指标。一个科学完善的评价体系,是有效开展学科评价过程的重要保障[12]。所以,我们依据文献计量指标参考集,并结合研究内容,选取了“学科论文产出量”、“学科引文数量”、“学科篇均被引数”、“学科发表论文所属期刊数”以及“论文所属期刊影响力”为文献计量指标,对学科进行定量指标分析[13]。

四 数据来源

本文研究对象为JCR期刊评价工具及Scopus数据库。对于Scopus数据库,我们可以按照检索流程从数据库直接获取我们需要的数据来进行统计分析。而JCR涵盖了多种学科的期刊,旨在对其进行评价,其网络版数据是对从ISI出版的国际著名引文评价数据库Web of Science(以下简称WOS)收录的9200余种期刊中精选出的8400余种学术期刊进行评价的,我们无法从JCR当中直接获取文献,因此为获得基本的文献数据,我们需要使用其来源数据库(WOS数据库),以获得相应的文献信息,然后结合JCR的评价分析功能对这些信息进行处理,获得满足相应指标的信息。

五 数据分析与学科评价结果

利用文献数据库进行科技评价,为保证其明确发挥作用,必须建立在实践的基础上[2]。但是从时间和范围来说,因为数据库追溯年份的限制,研究无法在一个广的时间跨度范围内进行,同时也无法针对全部的学科进行研究。为了保证研究的合理有效性,选择能够体现高校发展水平的学科,并将研究时间限制在合理的范围内,是十分重要的。同时对于国际范围或者国家范围的学科来说,我们也无法准确把握,因此将范围确定到大学学科,在此我们选择S大学作为研究对象。

在JCR、WOS和Scopus数据库中,不管是发表的论文总量还是被引用总量,数学学科均位于前5位,所以选取了S大学数学学科为研究对象。由于Scopus的引文回溯年限为1996年,JCR现在出版到了2015年,在数据年份选择时要尽可能消除年代跨度对引文指标的影响,且学科评价时间跨度不能太短,因此我们从Scopus以及WOS中获取了2003—2015年的S大学数学学科方面发表文献的情况并对其进行统计分析。

(一)数据统计结果

1.文献总体数据统计

我们以S大学数学学科发表文献为检索目标,笔者通过WOS和Scopus数据库获得了2003-2015年发表的文献,利用它们均有的文献检索功能及引文分析功能,获得相应指标数据,并进行了分析。使用检索分析功能可以对文献进行分类统计,同时利用引文分析功能可以得到所检索到的文献的一系列相关信息,例如被引次数等,以此获得学科评价指标所需要的各项数据。具体数据情况如表1:

表1 数据库文献数据统计

从论文产出量来看,在WOS数据库中,得到S大学数学学科在2003-2015年间发表论文1627篇,而从Scopus数据库的中获得的对应数据为1127篇,与WOS获得的数据相比,论文发表量较少;同样,在学科文献被引数量、学科发表论文所属期刊数上,从Scopus数据库中获得的数据量均少于WOS的数据量;而在学科篇均被引数量和h-指数上,Scopus数据量高于WOS数据量。

2.按出版年份划分的数据统计结果

除了以上的基本指标数据外,可以从WOS数据库、Scopus数据库中获得每一年的论文发表情况以及引文情况,以便直观反映S大学数学学科发展情况。具体数据如图1、图2:

图1 WOS出版年数据统计

图2 Scopus出版年数据统计

3.文献所属期刊评价指标统计结果

除了文献数量以及引文数据外,发表论文所属的期刊水平也可以评判一个学科的发展。高水平的期刊一般引导着学科的前沿领域,其中的文献质量高且影响力大。要评估一个学科的科研产出,就要从发表论文的多少来着手分析,但是只从这一方面考察是不合理的,需要判断其水平高低。论文的质量反映了该高校的科研水平能力,论文是发表在期刊上的,期刊的水平高低是反映论文好坏的评估指标。其中的原因是质量高的期刊对于论文的质量要求十分严格,这样我们可以据此对论文质量进行评估。因此为更加全面的对S大学数学学科进行评价,我们重点关注其发表论文所属期刊的水平。

JCR主要以SCI所收录的期刊为数据分析源,对多个指标进行了排序。其中,影响因子在面世以来就成了各大科研机构评价期刊的一个标准,其排名可以反映该期刊的学术影响力。因此我们通过JCR对S大学发表论文所属的期刊数据进行收集并分析,获得其学术影响力。

经过统计分析,S大学数学学科在485个期刊中发表的文章,其中有247个期刊进入WOS数据库中,并被JCR收录。JCR对其收录的一万多个期刊进行了多个指标的分析,使用者可以根据需要对期刊进行排序。笔者以“影响因子”这一指标对其收录期刊进行了排序,其中,影响因子最高的期刊为NATURE,其影响因子为38.138,影响因子最低降到0.233。在JCR收录的期刊中前百分之一的期刊的影响因子达到了14以上;前百分之一到百分之十的期刊影响因子达到了4以上;影响因子为1左右的期刊,在JCR中排名在百分之七十五左右。经统计,S大学数学学科发表期刊情况如表2、图3。

表2 影响因子统计结果

图3 发表文献所属期刊影响因子分布图

在Scopus数据库也有专门进行期刊评价的工具,但是Scopus采用了自己特有的评价指标“CiteScore”。通过Scopus数据库,对S大学数学学科文献发表的期刊进行了处理。在Scopus中可以检索到的各类期刊大约有34000,笔者对其按照“CiteScore”进行排序,其中前百分之一的“CiteScore”达到5.6,百分之一到百分之十的达到2.18以上。数据统计结果如表3、图4:

表3 CiteScore统计结果

图4 发表文献所属期刊“CiteScore”分布图

除了可以对全部期刊进行排序外,JCR可以统计其发布的期刊学科及地区分布情况,同时JCR还可以提供学科期刊的排名情况,这样可以更进一步了解学科发展情况。对发表的247个期刊进行处理后发现其中数学方面期刊有88个;按照地区分析,其中发表的中国期刊有21个,美国期刊有89个,英国期刊有44个。

但是Scopus中没有对学科的期刊进行排名,以及根据学科和地区对这些期刊处理的工具,我们无法直接通过Scopus对这些期刊进行分类处理。

(二)数据分析

1.引文情况分析

从WOS获得的数据来看,2003-2015年所有文献总被引数为11162,篇均被引数量为6.86,数据直观反映了发表论文的质量水平;同时h-指数为40,意味着有四十篇论文的被引次数高于40次,这在一定程度上反映了S大学数学学科发表的高水平、高被引论文相对较少,但个别论文被引次数达到200次以上,说明发表的文献中有较为突出者。通过数据库我们还获得了按照出版年分布的论文数量及被引数量的统计图,如图1所示,在2006年前每年发表的论文数量比较均衡,每年在50篇左右,同时被引数量也相对较少,这个时期可以视为学科的探索期;从2007年开始,论文发表数量急剧增长,而且逐年递增,同时文献被引总数也快速增长,反映了当前S大学数学学科处在发展阶段[14]。

从Scopus数据库来看,在被引用情况方面,总被引数为8469次,但是篇均被引量略高于WOS所获数据,达到7.5,同时h-指数为41,与WOS获得的数据十分相近。以上信息所反映的情况与从WOS数据库中得到的基本一致,同样反映了S大学发表论文数量较少,其中高水平、高被引论文量也相对较少,学科质量及影响力有待提升。从图2来看,论文数量逐年增加,2006年前发表的论文数量较为均衡,被引数量增长较慢,从2007年开始S大学数学学科论文发表量开始急剧增长,同时被引数量不断提高,反映的情况与WOS一致,表明S大学数学学科进入学科发展期,论文质量不断提升,具有良好的发展趋势。

2.期刊数量及期刊影响力分析

从WOS数据库获得的数据来看,涉及485个期刊,而在一定程度上,发表期刊的相应指标可以间接将其对应学科的规模呈现出来[4]。分析得到,S大学数学学科整体规模较大,文献涉及范围广,与其对应,Scopus数据库中所获数据只涉及145个期刊,与WOS数据差别较大。

科研产出十分关注发表论文所属期刊具有的影响力,在实际应用中常以发表文章所在期刊的影响因子做主要参考。在众多期刊评价指标中,JCR期刊评价工具所使用的影响因子是使用最广泛、影响最大的评价指标,而Scopus也有着独特的期刊评价指标“CiteScore”,并被越来越多的科研机构接受。

通过JCR可以直接获得期刊的影响因子数据,而能否被JCR收录的文献,也可以间接反映其期刊水平。从表2及图3可以得到,S大学数学学科发表文献所属的期刊中,有247篇被JCR所收录,涉及文献为901篇,但是其发表的文献中,只有一篇能被全球前1%的期刊收录,且排在前百分之二十的期刊以及文献数量也寥寥无几,大部分文献所属的期刊影响因子在2以下,排在了38%以后,这反映了S大学数学学科在科研产出的质量以及影响力方面有待提高。

Scopus数据库对期刊提供了独特的评价指标“CiteScore”,类似于影响因子,反映期刊质量及影响力。从表3及图4可以得到,S大学数学学科发表在顶级期刊的文献也只有一篇,文献所属期刊有62%的“CiteScore”在1以下,这些期刊排名在Scopus收录的期刊中处于24%-50%之间。而Scopus收录了约36000种期刊,远远多于JCR。所以,与使用JCR分析得到的数据情况是一样的,从期刊的角度来说,S大学数学学科在科研产出的质量和影响力上还是比较薄弱的。

综合两个数据库的文献数据以及从JCR和Scopus期刊评价工具中得到的数据,可以说明S大学数学学科从2007年开始处于发展期,发展势头良好、潜力巨大、文献质量以及影响力在不断提升,但是,高水平文献相对较少,在今后的科研中需要注意紧追学科前沿并提升论文水平。可以预见未来S大学数学学科将会有更多更好的文章产出,学科影响力会不断提升。

六 Scopus和JCR在学科评价中的作用比较分析

JCR在学科大类评价方面建立起了一套完整的学科评价体系,利用JCR以及其来源数据库可以科学、客观的对学科进行评价。而对于Scopus数据库来说,通过上面的学科评价实践,可以清楚地看到其功能的全面性。

(一)检索功能比较

JCR作为一个著名的期刊评价工具,其提供的信息更加侧重于文献所在的期刊。从JCR中无法直接获取一个学科的相关文献及引文数据,但JCR收录了全球各个学科、各个领域中较高水平的期刊,可以结合使用其来源数据库(WOS数据库),以获得相应的文献信息。

Scopus数据库分类统计了收录文献的各种特征,并以指标形式进行标引,提供了多个检索途径。其优秀的检索功能可以提高工作人员的检索效率以及检索结果的准确度和全面性,从而使工作人员实现更快速精确的检索,这可以为学科评价提供精确全面的资源,提高学科评价效率。

(二)分析功能比较

JCR网页对收录的期刊以总引用数、影响因子进行排名,这些功能可以使我们从发表论文所属期刊的角度去了解一个学科的科研成果。对于期刊而言,为保证收录文献的质量,高水平期刊对收录文献的要求十分严苛,综合期刊各指标的排名,可以客观反映其在学科领域范围的影响力,间接体现学科论文的质量。所以,利用文献计量法,对所属期刊进行多指标分析,间接评价学科论文质量,以便进一步科学合理的对学科发展水平做评估。

Scopus网页可以提供简单的分析排序,其专门的分析检索工具,在限定范围之后,可以提供按年份、来源出版物、作者、归属机构、国家/地区、文献类型、学科类别划分的文献统计数,同时可以从Scopus中获得相应的引文情况,查看施引文献。此外,还具有期刊分析功能,通过Scopus可以获得相应的学科发表文献所属期刊的信息,从而利用相应期刊的数据,对学科进行更为全面的评价。

(三)计量学指标比较

JCR主要提供了相关期刊的计量指标,如影响因子、五年影响因子、立即指数等;而对于相关学科的文献计量指标,如发文量、被引量、h-指数等则需要结合其来源数据库WOS获取。

在Scopus数据库中,其作用体现在了数据采集、统计、分析等整个过程,它提供了文献计量法所需要的各项信息内容。在Scopus的数据库中我们可以很方便地查找到相关学科的文献计量指标,如发文量、被引次数、CiteScore指数、h-指数等,为学科评价提供了数据基础。

七 结语

本文以S大学数学学科为实例实施了JCR和Scopus的评价功能比较,并对它们在学科评价中的作用进行了分析。

从以上学科评价过程以及分析结果来看,获取相应评价指标数据是进行学科评价最主要的过程。而JCR作为一个期刊评价工具,只能在期刊层面提供一系列指标。也就是说,通过JCR无法获得学科评价指标的相应数据,这些数据都需要依靠其源文献数据库去获取,可以看出,使用JCR进行期刊评价,其自身对学科评价的贡献是有局限性的。在学科评价过程中,JCR主要提供了学科发表文献所在期刊的情况,而只有好的文献,才会被高质量期刊所收录,据此,我们可以更科学的对学科进行评价。从上面分析结果来看,在学科评价过程中,JCR与源数据库WOS配合使用,可以使学科评估结果愈加科学。

关于Scopus数据库,它与 WOS有着相似的设计原理和功能,这就意味着它可以成为一个良好的科学评价工具。在上面的学科评价过程中,可以利用Scopus进行检索、获取引文情况并进行评价,其提供了全面的文献计量指标数据;同时也具有与JCR相似的功能,即对期刊的评价。我们可以通过Scopus数据库中获得学科发表文献所在期刊的情况,从而反映其学科发表文献的水平[15]。从上面分析结果来看,Scopus获得的评价结果与使用JCR结合其源数据库WOS获得的结果是一致的。这也说明,Scopus作为评价工具的科学性和全面性不容置疑。通过以上的实践分析,我们可以利用Scopus广大的检索功能进行检索之后,获取相应的数据,利用其自身的分析功能进行分析,合理科学地进行学科评价。但是,其引文只回溯到1996年,限制了长时间的引文分析功能。

JCR与Scopus都有着各自的特点,在学科评价过程中,根据评价目的合理选取评价工具是十分关键的。可以预见,Scopus数据库作为后起之秀已经成为ISI旗下产品的强有力竞争,Scopus将凭借着自己的优势不断地被大众所接受。

[1]樊晓杰,王一珉.上海市优势与潜力学科分析——基于Scopus数据库的文献计量分析[J].复旦教育论坛,2014(4):35-40.

[2]王 娜.作为评估工具的文献数据库Web of Science和Scopus的比较研究——以电动汽车领域为例[J].中国科学技术信息研究所,2008：32-38.

[3]何荣利.关于影响因子的分析与思考[J].科学学与科学技术管理,2005(02):21-23.

[4]余以胜.JCR指标的学科计量与评价研究——以JCR Social Sciences Edition为例[J].重庆大学学报：社会科学版,2008(1):76-80.

[5]崔 明.虚拟参考咨询系统在高校图书馆应用研究[D].山东大学,2013.

[6]赵 卫.基于Scopus文献计量的国外机构知识库研究现状分析[J].情报杂志,2010(9):48-51.

[7]樊怡菁.SCIE与Scopus数据库之比较[J].图书情报工作,2006(1):106-108.

[8]娄策群编.社会科学评价的文献计量理论与方法[M].武汉:华中师范大学出版社,1999.

[9]朱 亮,孟宪学.文献计量法与内容分析法比较研究[J].图书馆工作与研究,2013(6):64-66

[10]赵 凡,冷伏海.情报服务实践中的战略情报研究理论探讨[J].情报学报,2007(2):163-171.

[11]赵学文,龚 旭.科学研究绩效评估的理论与实践[M].北京:高等教育出版社,2007.

[12]董 琳.使用文献计量方法开展学科评价[J].情报杂志,2009(9):65-68.

[13]董 琳,刘 清.学科评价之文献计量指标分析[J].图书情报工作,2008(1):31-34.

[14]周海花,华薇娜,张玲玲.基于Scopus数据库的国内外远程教育研究成果的定量分析[J].现代情报,2012(11):110-114.

[15]Vladimir Pislyakov.Comparing two “thermometers”:Impact factors of 20 leading economic journals according to Journal Citation Reports and Scopus[J].Scientometrics,2009,79(3):541-550.

(责任编辑 耿晔强)

AComparativeAnalysisoftheRoleofScopusandJCRinDisciplineEvaluation:ACaseofMathematicsDisciplineinUniversity

YANG Guang1,GAO Xiao-hong2

(1.Library,ShanxiUniversity,Taiyuan030006,China;2.SchoolofEconomicsandManagement，ShanxiUniversity,Taiyuan030006,China)

Discipline evaluation plays an important role in the evaluation of the development of university disciplines. Bibliometric method is the most widely used method of discipline evaluation, and the key to the implementation of bibliometrics is the use of relevant data sources and the acquisition of data. At present,Scopus database and JCR are the most widely used and most influential evaluation tools in the implementation of bibliometric methods. Therefore, this paper studies the respective roles of the two tools in the discipline evaluation and makes a comparative analysis of them through the specific discipline evaluation process. The results of the study can provide suggestions for the selection of evaluation tools in the discipline evaluation.

discipline evaluation;JCR; Scopus;bibliometric method

2017-05-20

杨 光(1977-)，女，山西长治人，博士，山西大学图书馆副教授，硕士生导师，主要从事图书馆服务与管理研究。

10.13451/j.cnki.shanxi.univ(phil.soc.).2017.06.013

G257.36

A

1000-5935(2017)06-0093-07