美国国家信息标准化组织替代计量项目研究

严焱峰

美国国家信息标准化组织替代计量项目研究

严焱峰

替代计量学是博客、社交媒体、机构存储等在线学术交流模式下的必然产物，为构建替代计量学统一评价标准及评价模型，NISO开启替代计量项目，项目一阶段形成9大领域的25项目潜在行动计划，并通过问卷调研确定项目二阶段的5大行动项目，该项目对国内学术评估机制的构建有着一定的启迪意义。

替代计量NISO潜在行动计划优先级次

开放科学运动的深入，博客、社交媒体、机构存储等新学术交流模式的发展，催生了新的学术计量方法——A lternativemetrics（简称为Altmetrics），Altmetric是对以网络环境和在线工具为基础的学术活动影响力评估的研究及应用[1]。关于Altmetrics的翻译，国内学者持以下观点：（1）替代计量学，余厚强等学者认为，Alternativemetrics中的Alternative（替代）部分是指对传统研究计量，即仅使用引文测度影响力方法的替代，由于引文测度方式的滞后性、片面性及固有缺陷，已经无法适应新型在线科研环境中的学术评价需求，大有被即时性、全面性、科学的研究计量方法囊括、取代之势[2]；（2）网媒影响计量学，武夷山等学者认为，A ltmetrics研究对象为网络中或社交媒体中能够起到评价作用的因素，因而被称为网媒影响计量学[1]；（3）综合计量学，还有学者认为Altmetrics是对传统学术评价指标和社交媒体影响力评价指标的集成与整合，故应译做综合计量学。本文暂称Altmetrics为替代计量学。替代计量学不仅可用作一般文献测度，还可适用于人、期刊、书本、数据集、PPT、视频、源代码库、网页等对象，评价指标不仅包括引用指标，还包括影响力的其他表现方式，如数据/数据库指向、文章浏览、下载、在社会媒体中的提及等[3]。替代计量学以一种更为全面的视角重新审视、评估科研人员工作的重要性，并在极大程度上影响着图书馆发展和馆藏评估的方式。2013年6月，受Alfred P.Sloan基金会资助，美国国家信息标准化组织（National Information Standards O rganization，NIS O）的替代计量项目正式开启。

1 美国学术评估替代计量项目的背景介绍

替代计量学的概念于2010年提出，历经2011年的大讨论及替代计量学运动阶段，学术出版界均表现出对替代计量学可能引发变革的极大关注，并就评价数据的采集、操纵、分析、质量控制及计量指标体系构建开展研究。2012年后，替代计量学进入应用研究的深化阶段，一时间出现了ImpactStory、Plum Metrics、PL O SArticle-Level Metrics影响指标、Altmetrics等多重应用，搜集和分析社交网站和开放存取平台数据，提供替代计量指标用以辅助过滤及评价文献、评估自身的学术影响力的做法已为广大科研学者所接受和使用[2]。随着相关理论研究与实践应用的不断完善和成熟，替代计量学必然会朝着更为线性化的测度流程、更为标准化的评价模式发展。NIS O作为与信息系统、产品、出版商、图书馆、书目和信息服务相关业务一致性标准的制定者，有责任也有能力与研究人员共同分析学术影响力测算方式，与出版商、科研机构、资助方、社会公众合作创建新的学术评价标准。NIS O替代计量项目目标在于探索、发现、

不断完善学术评价标准及最佳实践，为学术社区提供一套创新的影响力评价体系，包括以使用量为基准的评价、社会媒体反响评价、基于网络行为的评价，此外，项目还将针对非传统学术产出成果，如数据集、可视化数据、软件及其他应用程序开发潜在评价标准。整个项目分为两个阶段：（1）揭示替代计量学潜在评价标准的可研究领域，由学术社区共同确定各研究项目的优先级次；（2）依据第一阶段确定的潜在研究项目，第二阶段将重点推进和发展一批最受学术社区关注、由项目董事会批准的标准应用及最佳实践模型类项目[4]。

2 替代计量项目解析

2.1 NIS O替代计量项目研究方法解析

NIS O替代计量项目在于建立起学术界公正合理、科学完善的评价机制，切实促进科学研究、传播、管理、评价的良性循环，而学术评价新秩序、新标准的建立必须依赖学术共同体的创新力量。学术共同体是通过内部的学术活动机制（如学术争鸣、学术交锋、学术讨论）而形成的共同体，作为学术活动的主体和承担者、学术规范的制定者和执行者，学术共同体担负着创造和评价学术成果的职能[5]。NIS O替代计量项目的研究中极大体现了学术共同体集聚力量的发挥：（1）NIS O替代计量项目组通过建立Wiki在线工作空间、e-mail列表开展项目营销、会议召集及资源发布；（2）与ALA（美国图书馆协会）、CNI（网络信息联盟）等机构合作，听取学术共同体内部最广泛意见，建立项目初始问题列表，规划后续研讨会进程；（3）通过ALA仲冬年会嵌入、开放式网络研讨会、小组会议、深度访谈等形式与学术界共同探讨构建评价标准的潜在途径和方法，在此基础上形成项目第一阶段白皮书草案；（4）对所有项目资料（包括草案、会议记录、会议PPT）实行开放存取，此外，项目组依据初步研究成果整合形成需要评价领域、评价实践/标准建议列表，并就项目草案、建议列表通过ALA年会、JCDL（数字图书馆联合会议）及类似渠道进行宣传，发放调查问卷，就25项建议领域、建议行动的重要性展开调查，以收集学术界最广泛的反馈意见[6]。

2.2 NIS O替代计量项目阶段性成果

历经2013年末至2014年中旬的数次大规模会议及网络研讨会，参与专家学者提供了超过250条替代计量学、学术评价相关建议。NIS O替代计量项目组将这些观点、建议整合为9大研究领域25项行动策划项目（表1中1、2列）。

25项行动策划可以说是学术共同体在学术评价领域共同智慧的结晶，为科学评价体系的构建指明了方向和目标，NIS O替代计量项目组需要做的，是在以此25项行动策划为依据建立项目目标体系的基础上，划分不同目标的优先等级，制定相应的实施计划，有重点、有步骤地通过阶段性目标向整体目标的过渡与衔接，构建起科学完善的学术评价机制。项目一阶段所确立的重点研究领域的科学与否将直接决定项目二阶段的未来走势，倾听广大科研学者的意见，发挥学术共同体的巨大力量能够确保研究项目朝着正确的方向迈进。2014年8月11—29日，NIS O项目组向118名科研学者发送调研问卷，要求被访者从25项潜在行动中选择至少5项亟待实施的项目，并确定其优先级次，调查结果如表1中3～8列所示，以“给出替代计量学一词明确定义”行动项为例，118人中有54人认为该类研究非常必要，并有30人（占55.6%）将其列为第一优先级。

通过对反馈结果的细致、缜密分析，NIS O项目组确立了项目二阶段的研究方向：（1）给出替代计量评估方法中所有常用术语的明确定义；（2）就科研数据、软件、社科类科研产出等当前未能被充分评估的学术产出，制定其相应的评估量表及计算方法及评价方法使用指南；（3）集中研究影响评价的数据质量类问题，提出改进数据质量建议，或是澄清替代计量评估对数据的要求和限制；（4）与其他项目计划合作，发挥永久性数据标识符在学术评价中的作用；（5）针对不同利益相关者，明确替代计量评估的主要用途，并详细阐述替代计量评估在科研评估中的重大作用[9]。

2.3 替代计量项目展望

项目二阶段可以说是NIS O替代计量项目的攻坚阶段，当一阶段白皮书审议通过后，项目组将根据5大研究方向分别组建工作小组，2014年末至2015年8月，各工作组将推出研究领域内最佳实践、评价标准草案，再次通过网络研讨会等线上/线下渠道进行传播，以供学术团体讨论、提出改进建议。2015年秋冬，NIS O将统一发布评价标准、建议实践模型及相关培训材料，并向Sloan基金会提交最终的项目报告[6]。

3 替代计量项目带来的启示

3.1 广开言路，集思广益，发挥学术共同体的强大力量

学术共同体致力于构筑学科共同体成员间遵循自由、平等、自主原则，使处于创新前沿的学者具有更多的学术话语权。这便意味着：（1）学术共同体实行充分的自治和自律，无论是学术规范的形成，还是

学术评价机制，学术风气、学术氛围的发展都依赖于学术共同体集聚力量的发挥；（2）通过赋予处于创新前沿的学者更多的学术话语权有利于充分调动学术共同体的主动性和创造性，进而重塑学术新风、构建学术新秩序、完善学术评估机制。替代计量学是在线科研交流发展到一定阶段而产生的创新学术评价机制，该评价系统的发展完善同样需要学术团体的共同努力。NIS O替代计量项目正是在广开言路、集思广益的基础上，形成项目潜在行动计划及建议列表，明确研究方向，细化研究内容，充分保障了项目的科学走势。发挥学术共同体的力量，重点需要做到以下几点：（1）使用各类在线工具、网络平台，如网络研讨会、邮件列表、社交网络等开展项目推介、项目营销，通过与科研人员的充分互动，采集相关意见、建议；（2）借助学术共同体内部权威组织、权威会议的影响力，以会议嵌入、机构合作方式促进学术团体对项目的关注及参与；（3）对项目相关资料实行开放存取，促进项目资源的传播和使用。

表1 NISO替代计量项目行动策划及优先级次一览表[7-8]

3.2 明确方向，紧抓核心，解决学术团体的切实性需求替代计量学提供了新的指标来评价科研人员工作的重要性，相对于传统文献计量学，这是一个全新的学术评价体系，对该项未知领域的探索学术界存在多项空白，仅以NIS O替代计量项目为例，在其第一阶段的白皮书公开征求意见期便有数百位学者提出数十项潜在研究领域及行动内容，后经项目组提炼归纳为25项行动计划。这25项行动计划较为客观地反映了学术团体当前的评价需求，但由于受项目资源、时间等因素的限制，不可能在项目二阶段同时开展，NIS O项目随即以公开问卷调查形式明确了现阶段替代计量评估方法最迫切需要展开的行动。无论是公开征求意见，还是问卷调查，均体现了项目组对学术团体切实性需求的充分尊重与满足，这种

以用户需求为导向确定研究方向和研究内容的方式能够进一步扩大学术共同体对项目的充分参与及后期评价标准的普及与应用。

3.3 着眼全局，系统思考，构建科学完善学术评价机制

替代计量评估方法中涉及多方利益，包括科研人员、科研机构、出版商、资助方、公众等，从整体层面上看，替代计量学不仅为科研人员、科研机构引入新的学术评估模型，同时对出版商、对社会公众也有着积极的意义。首先，替代计量评估为出版社的社会学术影响力评价提供了新视角；其次，替代计量方法中对媒体影响力、公众影响力的侧重和关注，能够使公众更易获取到研究成果，并使学者更易得到读者反馈；最后，从长远来看，替代计量评估方法有利于促进开放科学、开放存取进程及学术成果的传播和活化利用。因此，替代计量评估标准和评估指标的建立，需要充分考虑到以上利益相关者的综合需求，从促进学术知识流通、激发学术成果活化利用角度出发，放眼未来，系统思考，构建公正合理、科学完善的替代计量学术影响评估模型。

3.4 紧跟技术，充分利用多类信息工具

博客、社交媒体、机构存储等在线学术交流环境是替代计量方法的产生基础，那么在替代计量学的发展过程中，应充分利用在线学术交流环境中的现有工具，通过替代计量方法与数据管理工具、学术规范化工具的融合，解决评价中存在的数据采集、数据管理等问题，提升评价效率。从现阶段看，替代计量学发展可有如下设想：（1）与ORCID的融合使用，ORCID是目前在学术论文投稿、基金申请提交、科研产出管理和传播等系列性科研活动中对科研人员身份识别的主流方式，通过学者身份唯一标识符与个人学术影响力评估的结合，自动汇总统计一些诸如网络点击数量、书签标记数、下载数、被推次、博客转发数据，将大大增强评估数据的精确性和权威性；（2）与现有数据管理计划、共享计划的融合，如通过元数据格式的统一规范或是标准化数据接口程序开发，为替代计量方法应用创建好的数据环境；（3）对现有替代计量方法的借鉴，如ImpactStory评价的5大类别（浏览、讨论、保存、引用、推荐），Plum Metrics的测度方法（使用、抓取、提及、社会媒体、引用），PL O SArticle-level影响指标模型等。

4 结语

在线学术交流催生了更为全面的学术影响评估方法——替代计量学，替代计量是对科研产出学术影响力、媒体影响力、公众影响力和国际影响力的综合评价方式。NIS O的替代计量项目旨在通过对评价标准及最佳实践探索和研究，为学术社区科研产出的影响力评价提供更为线性化的测度流程和更为标准化的评价模式。目前，该项目正处于评价标准和模型制定的攻坚阶段。替代计量方法的出现不仅创新了科研产出的评价模型，同时也将极大影响着图书馆的未来发展，如如何与科研人员共同分析学术影响的测算方法、构建评价模型，如何利用替代计量模型促进馆藏发展等等，这都值得图书馆人深思。

[1]有人系统整理了网媒影响计量学的相关文献[EB/ OL].[2015-04-19].http：//blog.sciencenet.cn/blog-1557-804613.html.

[2]邱均平，余厚强.替代计量学的提出过程与研究进展[J].图书情报工作，2013（10）：5-12.

[3]替代计量学（Altmetrics）备记[EB/OL].[2015-04-15]. http：//catwizard.net/posts/20140601113706.html.

[4]NISO A lternative Assessment Metrics（Altmetrics）Initiative[EB/OL].[2015-04-15].http：//www.niso.org/topics/tl/altmetrics_initiative/#phase2.

[5]高等学校科学技术学术规范指南[EB/OL].[2015-04-15].http：//www.haie.edu.cn/web/ShowArticle.asp?ArticleID=10874.

[6]Estimated Timeline[EB/OL].[2015-04-17].http：//www. niso.org/topics/tl/altmetrics_initiative/#phase2.

[7]Alternative Metrics Initiative Phase 1White Paper[EB /OL].[2015-04-17].http：//www.niso.org/apps/group_public/download.php/13809/Altmetrics_project_phase1 _white_paper.pdf.

[8]NISOAlternativeAssessmentPotentialAction Items[EB/ OL].[2015-04-17].http：//www.niso.org/apps/group_public/download.php/13661/Altmetrics%20survey%20input%20-%20selected.pdf.

[9]Phase2 Projects[EB/OL].[2015-04-17].http：//www.niso. org/topics/tl/altmetrics_initiative/#phase2.

严焱峰南通大学图书馆馆员。江苏南通，226019。

Study on NISO Alternative AssessmentMetrics Project

Yan Yanfeng

Alternativemetrics is the doomed product of online academic communicationmodule such as blog,SNS,institute repository and so on.In order to build standard assessmentmodule and index,NISO initiated alternativemetrics project.In phase 1 of the project,NISO concluded academ ic community’s ideas into 25 actions in 9 categories,and set up 5 main tasks for phase 2 via survey.The projectgivesmuch inspiration for domestic academic community.

A lternativemetrics.NISO.Potential action plan.Priority.

G250.252

2015-05-31编校：邹婉芬）