张新鹤,杨 菲,杨玉麟
全国文化信息资源共享工程实施效果评价指标体系的构建*
张新鹤,杨 菲,杨玉麟
利用平衡计分卡理论构建出三级文化信息资源共享工程实施效果评价指标体系,具体包括效益、用户、内部工作流程、学习与成长4个一级指标,14个二级指标及31个三级指标;并利用层次分析法确定指标权重,为各指标制定详细的评分标准及数据来源。
全国文化信息资源共享工程 实施效果评价 评价指标 平衡计分卡
从2002年至今,全国文化信息资源共享工程(以下简称“文化共享工程”)已基本建成覆盖全国省、市、县、乡、村各级的共享工程网络。作为一项具有多级服务网络的大型文化惠民工程,文化共享工程应当将实施效果评价作为整个管理流程中的一个必备环节,通过建立一套合理有效的评价指标体系来督促和规范其发展方向。
文化部、各地文化厅、全国文化共享工程中心及各省分中心多已下发考核文件,采取自查和抽查相结合的方式对文化共享工程发展情况进行督导。例如,2008年,文化部制定文化共享工程县级支中心和村级基层服务点考核标准,标准包括组织管理、运行经费、资源建设、设备设施、网络接入、服务情况、队伍建设等内容。在理论研究方面,谢林、夏雁、陈天文等学者撰文对文化共享工程评价进行了理论探讨[1-3]。而构建评价指标体系的主要有王芬林的《全国文化信息资源共享工程绩效考评体系设计构想》、郝春柳和杨宇龙的《文化信息资源共享工程绩效评价研究》、郭以正的硕士学位论文《全国文化信息资源共享工程的绩效分析》等成果。郝春柳和杨宇龙设计了包含发展规模、运行机制、公众满意度、创新能力、发展潜力等维度的二级评价指标体系[4]。王芬林则依据财政部2005年颁布的《中央级教科文部门项目绩效考评管理办法》,从业务指标和财务指标两方面构建了四级评价指标体系[5]。郭以正构建的三级评价指标体系包括基本条件、资源建设、服务功能和成本与收益四个一级指标[6]。
这些评价实践和研究成果在推动文化共享工程评价工作方面均作了有益探索,但从总体上看还未形成一套兼顾政府、组织和用户三方面参与主体,以文化共享工程战略实现为目标,且科学性和可操作性强的评价指标体系。本文将平衡计分卡理论应用到文化共享工程实施效果评价中,期望能为今后文化共享工程评价实践提供一些新的思路和方法。
平衡计分卡(Balanced Scorecard)是从财务、顾客、内部运营流程、学习与成长四个角度,将组织战略落实为操作性强的衡量指标和目标值的一种绩效管理体系[7]。由于平衡计分卡具有以组织战略为中心、平衡组织内外指标、平衡过程与结果指标的优势,它不仅受到营利组织的欢迎,在政府及非营利组织中也被广泛应用。
文化共享工程作为我国公共文化服务体系的重要组成部分,构建其实施效果评价指标体系不仅为了评价其开展情况,更为重要的是促进其战略目标的最终达成。具体来讲,平衡计分卡理论在构建文化共享工程实施效果评价指标体系中的适用性主要体现在:
(1)从政府、组织、用户三方参与者的角度出发,实现多角度指标设计。现有评价指标多从某一单一视角出发,或从政府视角关注资金落实和项目进展情况,或从组织角度进行简单考量,或只涉及用户关心的个别指标,难以通过评价揭示出文化共享工程发展中的问题所在。而平衡计分卡的优势就是能够在评价中平衡组织系统的不同参与角色,充分体现文化共享工程三方参与主体对其实施过程的不同影响,增强指标体系的科学性、合理性。
(2)以文化共享工程战略为中心,兼顾实施结果和实施过程。借鉴平衡计分卡的思想,指标体系设计紧紧围绕文化共享工程战略使命展开,通过对战略中的关键目标进行提取、分解,将战略落实为可衡量的评价指标。指标体系既包含针对文化共享工程实施效果的指标内容,又兼顾对实施效果有重要影响的过程指标,通过评价可以实现对其问题的追根溯源,从而促进工程战略目标的实现。
参照平衡计分卡基本模型,同时结合文化共享工程自身的特殊性,在文献调研及对陕西、河北、江西、山东、重庆等地文化共享工程发展现状进行实地调研的基础上,笔者构建出文化共享工程实施效果评价的平衡计分卡模型(图1)。该模型以文化共享工程战略目标为核心,从效益、用户、内部工作流程以及学习与成长4个维度来衡量工程的实施效果。各维度又包括评价视角、维度目标、测评指标三方面内容。其中评价视角解释各维度的评价切入点;维度目标说明的是各维度希望达到的目标;测评指标则列出了围绕评价视角衡量维度目标实现程度的基本指标。
基于平衡计分卡的文化共享工程实施效果评价模型以工程战略为核心,在工程不同评价维度之间建立逻辑关联,以此将文化共享工程实施效果评价和战略管理较好地结合起来,强调通过评价工作促进战略实现的管理思想。
图1 文化共享工程实施效果评价平衡计分卡模型
结合实地调研所获数据,笔者依据上文设计的文化共享工程实施效果评价平衡计分卡模型,针对四个维度的关键测评指标设计出初步的文化共享工程实施效果评价指标体系,并就该体系对平衡计分卡工具的运用及整体结构的合理性首先向4位管理学领域的专家咨询了意见。在获得认可后,笔者又向8位图书馆学领域的研究人员、图书馆工作人员及文化共享工程直接参与人员2次发放了指标重要性调研问卷,并邀请他们对指标提出具体意见和建议。指标重要性调研采用5级打分制,从5分到1分依次表示非常重要、重要、不确定、不重要、非常不重要。根据专家打分结果,笔者保留了得分在4分以上的指标,并在参考专家所提意见和建议的基础上,确定了最终的文化共享工程实施效果评价指标,如表1所示。
在文化共享工程实施效果评价中,每个评价指标对文化共享工程实施效果的重要性程度并非等同。为了确定各指标在指标体系中的权重,笔者首先采用层次分析法设计指标权重调查问卷,然后选取对文化共享工程有研究经历的图书馆学专业学者及共享工程管理与工作人员为权重调查对象,发出问卷15份,回收问卷11份,其中有效问卷10份。经过对回收结果的一致性检验,10位专家给出的指标判断矩阵的一致性比例均小于0.10,满足一致性要求。最后,笔者采用目前应用较为成熟的层次分析法软件yaahp0.5.3计算出各级指标的权重,具体结果见表1。
表1 文化共享工程实施效果评价指标体系
(续表1)
经过与文化共享工程国家中心和陕西省中心负责老师的充分沟通,并使用初步设计的评分标准对咸阳市支中心进行评价的基础上,笔者及时修正不合理的评分标准,最终对31个三级指标设定详细的评分规则,每项指标得分在1-5分之间。此外,还确定了具体的数据来源(见表2)。
表2 文化共享工程实施效果的评分标准及数据来源
(续表2)
(续表2)
(续表2)
(续表2)
(续表2)
利用该评分标准为文化共享工程实施效果进行评分时,总分为5分。将每项实际得分乘以相应指标权重,再将所得结果逐项相加,即可求得实际得分。
注释
①“标配”指由上级中心下发,供下级中心使用的所有资源。
②县级以上支中心以《公共图书馆服务规范》(2012年5月1日颁布)对服务时间的规定为标准;县级以下服务点参照当地对其开放时间的具体规定。
③“选配项”指国家中心在该支中心或服务点成立年份下发的配置标准中所规定的“选配项”。
④“标准”指国家中心在该支中心或服务点成立年份下发的配置标准中所规定的“必备项”。
[1]谢林.认识与实践——用理性推进全国文化信息资源文化共享工程全面、协调、可持续发展[J].图书馆建设,2008(2):29-31.
[2]夏雁.文化信息资源文化共享工程控制与评价体系建设[J].图书馆工作与研究,2009(9):36-38.
[3]陈天文.如何提升文化共享工程的文化服务效益[J].图书情报论坛,2008(3):51-52.
[4]郝春柳,杨宇龙.文化信息资源共享工程绩效评价研究[J].图书馆理论与实践,2011(6):1-4.
[5]王芬林.全国文化信息资源共享工程绩效考评体系设计构想[J].图书馆建设,2008(2):38-41,48.
[6]郭以正.全国文化信息资源共享工程的绩效分析[D].武汉:武汉大学,2011.
[7]郑建明,胡堂明.基于平衡计分卡的数字图书馆评价研究[J].图书馆杂志,2011(7):35-39.
Construction of Performance Evaluation Index System of the National Cultural Information Resources Sharing Project
ZHANG Xin-he,YANG Fei,YANG Yu-lin
Based on the theory of balanced scorecard,this paper constructs the performance evaluation index system for the cultural sharing project,which includes 4 first level indicators (benefit,user,internal workflow,learning and growth),14 second level indicators and 31 third level indicators.It also determines each index weight with AHP,and develops a detailed scoring criteria and data sources for each indicator.
national cultural information resources sharing project;performance evaluation;evaluation index;balanced scorecard
格式 张新鹤,杨菲,杨玉麟.全国文化信息资源共享工程实施效果评价指标体系的构建[J].图书馆论坛,2014(6):14-20,100.
张新鹤(1983-),女,博士,西北大学公共管理学院图书馆学专业讲师;杨菲(1988-),女,硕士,西安科技大学图书馆助理馆员;杨玉麟(1958-),男,西北大学公共管理学院教授。
2014-01-13
*本文系国家社会科学基金项目“中西部地区文化共享工程实施效果及其长效发展研究”(项目编号:11BTQ003)研究成果之一