公共图书馆抖音短视频服务绩效评估研究

谭凯波?董娅茹?范瑞

摘 要 图书馆利用短视频进行宣传推广是创新服务功能与拓宽服务渠道的有效方式。论文构建了合理的短视频服务绩效评估指标，将改良一致性分析和关联分析算法相结合对指标间的关联性进行分析，并在此基础上应用网络层次分析法确定指标权重。应用模糊综合评价对公共图书馆抖音短视频服务绩效进行综合评估，并以广东省立中山图书馆为例进行实证分析，为提升图书馆短视频服务绩效提供借鉴。

关键词 公共图书馆；短视频；绩效评估

分类号G252

DOI 10.16810/j.cnki.1672-514X.2023.07.011

Research on Performance Evaluation of Public Library Douyin Short Video Service

Tan Kaibo， Dong Yaru， Fan Rui

Abstract It is an effective way to innovate service functions and broaden service channels for libraries to use short videos for publicity and promotion. In this paper， a reasonable performance evaluation index of short video service is constructed， and the correlation among indexes is analyzed by combining improved consistency analysis and correlation analysis algorithm. On this basis， the index weight is determined by using the network analytic hierarchy process. Fuzzy comprehensive evaluation was applied to comprehensively evaluate the service performance of Douyin short video in public libraries， and the empirical analysis was carried out by taking Zhongshan Library in Guangdong Province as an example to provide reference for improving the service performance of short video in libraries.

Keywords Public library. Short video. Performance evaluation.

0 引言

短视频作为4G时代快速发展的移动产品，取代电视广告成为了新媒体时代最具潜力的推广方式之一，图书馆界开始利用短视频进行信息传播介质的“二次变革”。据中国互联网络信息中心（CNNIC）发布的第49次《中国互联网络发展状况统计报告》，短视频用户规模为9.34亿，较2020年12月增长6080万，占整体网民的90.5%。截至2022年6月，全国已有26个省级公共图书馆开通抖音官方账号，利用短视频开展馆内用户服务已成为全渠道、全媒体、全数据时代图书馆最热发展趋势之一。

图书馆界学者对“图书馆短视频”的研究自2019年开始出现热潮，当前公共图书馆短视频服务的实践发展处于探索阶段，研究如火如荼，其研究主要集中在服务现状、服务策略和未来发展的剖析[1-5]，对图书馆开展短视频服务的绩效评估方面的研究甚少。因此，本文以抖音App为例，选取经过官方认证的省级公共图书馆抖音短视频账号作为调查对象，对已发布作品分别从内容、制作、传播方面来整理分析，并结合文献研究确定其评估指标，运用改良的算法验证指标之间的关联性，最后运用模糊综合评价构建综合评估模型，并以广东省立中山图书馆进行实证研究，以期为图书馆短视频服务绩效评估的应用和图书馆更好地利用短视频进行用户服务提供借鉴和相应的改进方案。

1 公共图书馆抖音短视频服务绩效评估模型

根据省级公共图书馆发布的抖音短视频的内容特点，借鉴短视频评估准则，遵循全面系统的指标设立原则，结合公共图书馆抖音短视频服务现状，将我国省级公共图书馆抖音官方账号发布的5629个短视频作品（截至2022年6月）进行分类整理，根据专家意见，结合已有评价指标[6-11]，构建短视频平台绩效评估指标体系，并邀10位相关专家利用一致性分析对专家意见重要性赋权，再结合关联分析算法对指标的相关性进行验证。

“清博指数”平台使用KPI（Key Performance Indicator，关键绩效指标）考核工具对抖音短视频进行评估，考核指标有新增作品数、点赞数、评论数、分享数、总粉丝数。国家广播电视总局对短视频的评价标准分别从主题立意、内容创作、内容制作、传播影响四个维度展开。

公共图书馆抖音短视频服务绩效评估指标体系的构建方面，根据专家调研和文献调研，结合对已发布的短视频分别从内容、互动数等各个方面进行综合评测，从四个方面选取了14个指标构建了公共图书馆抖音短视频服务绩效指标体系。

根据表1利用yaanp建立公共图书馆抖音短视频服务绩效评估指标的结构模型，如图1所示。

1.1 抖音短视频服务绩效评估指标

（1）视频内容，是公共图书馆抖音短视频服务绩效评估任务的重中之重，是短视频服务指标中的核心考核模块。视频内容的真实性、新颖性直接影响到与用户的互动效果，从而影響到视频覆盖面。

（2）視频互动，视频互动指数可以间接反映出用户对视频内容的喜好程度，是图书馆短视频服务的重要考核模块，包括点赞数、分享数、评论数和收藏数四个方面[12]。

（3）视频效果，其中，视频字幕配置一定程度上影响到对视频内容的解说；视频清晰度和剪辑效果直接影响到了视频呈现出的效果，而剪辑效果保证了整个视频的流畅性和内容衔接合理性。

（4）视频覆盖，主要体现在每日/月发布的短视频影响账号的新增粉丝数和总粉丝数。

1.2 指标信度检验和效度检验

根据构建的指标体系，设计《公共图书馆抖音短视频服务绩效评估体系调查表》用来检验指标设置是否合理和必要。问卷采用李克特LIKER五分量表法，5分为十分必要，3分为一般，1分为十分不必要。笔者先后向图书馆相关领域专家、图书馆短视频运营者、图书情报专业硕士研究生及大众发放调查问卷100份，收回有效问卷100份。

采用Cronbach Alpha系数法，一个具有良好的信度因子的量表或调查表，其得分最高为0.80。通过运用SPSS软件进行分析得到笔者设计的该研究调查问卷的Cronbachs alpha系数为0.886>0.8，说明指标可以建立，见表2。

运用SPSS中的KMO和Bartlett检验对问卷进行数据分析，作为效度检验。在KMO测试因子>0.5和Bartlett球检验中P<0.05时，该量表具有结构效度。运用SPSS软件进行分析得到所设计的该调查问卷的KMO=0.616>0.5，说明指标可以建立，见表3。

2 公共图书馆抖音短视频绩效评估

首先将一致性分析与改良关联分析算法相结合，确定指标间的关联性。然后，应用网络层次分析法确定指标权重[13]，最后，应用模糊综合评判方法对公共图书馆短视频服务绩效进行评估分析。

2.1 指标关联性分析

选取十位相关领域的专家对14个二级指标之间的关联关系进行选择，认为某两个指标之间有关联选1，无关联选0，并用ucinet对构建的各项指标关联性进行一致性分析，进而求得十位专家的意见所占比重，一致性分析结果如下图2所示。

计算求得特征根之比为3.221＞3，表明存在着单一回答模式。计算出来的十位专家意见比重结果如下图3所示。

该值越大，表明该专家给出的意见越重要。可见，专家4的意见最重要，其次是专家1和专家6的意见。将十位专家意见重要性的一致性分析结果进行归一化处理求得10位专家意见权重（保留小数点后两位），专家1为0.12，专家2为0.10，专家3为0.07，专家4为0.13，专家5为0.05，专家6为0.12，专家7为0.10，专家8为0.10，专家9为0.10，专家10为0.11。

结合一致性分析所得的各个专家权重，进一步运用关联分析算法确定某个因素的关联影响因素，其中，点赞率e的关联信息表如表4所示。

设定最小支持度与最小置信度均为75%，充分考虑不同专家意见权重，将支持度公式改良为：，其置信度公式，k=1，…，n-1，寻找频繁项集，其中，s（X）k为关联规则（X）kY的支持度，Wj表示专家j的意见权重，，I为关联因素集{D}中除项集（X）k内的因素外的其他任意某个因素。对于满足设定最小支持度要求的K项集称为频繁K项集。

各个候选频繁1-项集的支持度为：s（a）=95%，s（b）=100%，s（c）=83%，s（e）=67%，s（k）=73%，s（l）=82%，s（m）=80%，s（n）=100%。根据最小支持度，s（e）=67%＜75%，即项集s（e）为非频繁项集，则布尔矩阵第1行的对应列即第3列数值改为0，生成新的布尔矩阵如下所示：

根据专家意见所占比重寻找频繁2-项集，各个频繁2-项集的支持度为：s（a，b）=95%，s（a，c）=78%，s（a，e）=62%，s（a，k）=73%，s（a，l）=77%，s（a，m）=75%，s（a，n）=95%，s（b，c）=83%，s（b，e）=67%，s（b，k）=73%，s（b，l）=82%，s（b，m）=80%，s（b，n）=100%，s（c，e）=50%，s（c，k）=56%，s（c，l）=72%，s（c，m）=63%，s（c，n）=83%，s（k，l）=55%，s（k，m）=53%，s（k，n）=73%，s（l，m）=62%，s（l，n）=82%，s（m，n）=80%。

满足最小支持度的2-项集为：（a，b），（a，c），（a，l），（a，m），（a，n），（b，c），（b，l），（b，m），（b，n），（c，n），（l，n），（m，n），其对应的置信度为：c（a，b）=100%，c（a，c）=82.11%，c（a，l）=81.05%，c（a，m）=78.95%，c（a，n）=100%，c（b，c）=83%，c（b，l）=82%，c（b，m）=80%，c（b，n）=100%，c（c，n）=100%，c（l，n）=100%，c（m，n）=100%。则根据最小支持度与最小置信度，频繁2-项集为：（a，b），（a，c），（a，l），（a，m），（a，n），（b，c），（b，l），（b，m），（b，n），（c，n），（l，n），（m，n）。布尔矩阵第1行对应即第5列改为0，生成新的布尔矩阵：

寻找频繁3-项集，各个候选频繁3-项集的支持度为：s（a，b，c）＝78%，s（a，b，k）=73%，s（a，b，l）=77%，s（a，b，m）=75%，s（a，b，n）=95%，s（b，c，e）=50%，s（b，c，k）=56%，s（b，c，l）=72%，s（b，c，m）=63%，s（b，c，n）=83%，s（c，e，k）=33%，s（c，e，l）=39%，s（c，e，m）=40%，s（c，e，n）=50%，s（l，m，n）=62%。

满足最小支持度的3-项集为：（a，b，c），（a，b，l），（a，b，m），（a，b，n），（b，c，n）其对应的置信度为：

c（a，b，c）=82.11%，c（a，b，l）=81.05%，c（a，b，m）=78.95%，c（a，b，n）=100%，c（b，c，n）=100%。则同时满足最小支持度与最小置信度要求的3-项集为（a，b，c），（a，b，l），（a，b，m），（a，b，n），（b，c，n）。因此布尔矩阵的第1行所对应的第1列和第2列的值仍为1，其他列为0，生成新的布尔矩阵：

寻找频繁4-项集，各个候选频繁4-项集的支持度为：s（a，b，c，e）=45%，s（a，b，c，k）=56%，s（a，b，c，l）=67%，

s（a，b，c，m）=58%，s（a，b，c，n）=78%，s（b，c，e，k）=49.04%，s（b，c，e，l）=49.51%，s（b，c，e，m）=50.55%，s（b，c，e，n）=60.85%，

s（c，e，k，l）=37.7%，s（c，e，k，m）=38.74%，s（c，e，k，n）=49.04%，

s（e，k，l，m）=15.59%，s（e，k，l，n）=37.7%，s（k，l，m，n）=50.43%。

满足最小支持度的4-项集为（a，b，c，n）其对应的置信度为c（a，b，c，n）=100%，则同时满足最小支持度与最小置信度要求的4-项集为（a，b，c，n），因此布尔矩阵的第1行第1列所对应的值仍为1，其他列为0，生成新的布尔矩阵：

寻找频繁5-项集，由前面步骤可知，各个候选频繁5-项集的支持度均不满足最小支持度及最小置信度。因此布尔矩阵第1列的值变为0，生成新的布尔矩阵：

至此，布尔矩阵第1行所有列均为0，因而停止计算和寻找，则（a，b，c，n）为点赞率e的关联影响因素。同理，可计算出其它指标的关联关系如下表5所示。

2.2 指标权重分析

结合指标关联分析结果，采用网络层次分析法计算各级指标权重。各级指标权重分析结果如表6所示。

2.3 绩效评估分析

首先根据表1得出公共图书馆抖音短视频服务绩效评估的因素集X={真实性，新颖性，月发布量，点赞率，评论率，收藏率，转发率，字幕配置，视频清晰度，音效配置，剪辑效果，新增粉丝数，总粉丝数}，因素集进一步分类得到类X={X内容，X互动，X效果，X覆盖}，X内容={真实性，新颖性，月发布量}，X互动={点赞率，评论率，收藏率，转发率}，X效果={字幕配置，视频清晰度，音效配置，剪辑效果}，X覆盖={新增粉丝数，总粉丝数}。

其次将公共图书馆抖音短视频服务绩效评估划分为五个等级，P=（p1，p2，p3，p4，p5）=（优，良，中，可，差）=（5，4，3，2，1）。通过视频技术人员、绩效评估专家、图书馆界专家学者、图书馆抖音运营人员二次指标的单一因子综合评估得到矩阵V。

最后对结果归一化计算。通过计算M（·，⊙），得出了一个单因子的模糊综合评判矩阵Ri，并通过Ri的综合评判，得出一个模糊综合矩阵R。

再用一级指标权重计算公共图书馆抖音短视频服务绩效各项评估结果比重及最终得分。

3 实证分析

依据构建的公共图书馆抖音短视频服务绩效评估模型，本文选择广东省立中山图书馆抖音官方账号为研究对象，对该账号截止到2022年6月底发布的659个作品进行归类整理分析。本次案例邀请了20位图书馆专家和80位普通读者，根据山东省图书馆抖音短视频运营的实际情况，以“5（优）”“4（良）”“3（中）”“2（可）”和“1（差）”為评分标准，对广东省立中山图书馆的短视频业务进行了综合评定。

4 公共图书馆抖音短视频服务绩效评估分析与改进

通过对广东省立中山图书馆抖音短视频服务进行绩效评估，可以看出对图书馆短视频服务绩效评估影响大的因素分别是视频内容，视频互动和视频效果。在二级指标中，对评估结果影响最大的因素是总粉丝数和点赞数，本次绩效评估未出现多峰值。因此，广东省立中山图书馆抖音短视频服务绩效为中上水平。短视频以其视频内容的感染力强、传播速度快、传播范围广等特点迅速融入读者的生活，被读者所接受。为促进图书馆短视频服务的长远发展，还应从如下几个方面进一步优化：

4.1 视频交互多样性

图书馆短视频服务除了展示对用户的基本服务定位以外，还需要通过宣传当地特色民族文化，非物质文化遗产、书籍，当地作家，举办地区特色线下活动等，来突显本地区本民族的特色服务，传承区域文化。例如，四川省推出《农家书屋助“耕读”》的抖音短视频宣传片，展示了四川省以公共图书馆来助力乡村文化振兴。浦东图书馆在其宣传片里详细展示了馆内各部分的组成和馆内资源设施。

4.2 视频内容创新性

图书馆应结合当下社会热点进行积极宣传，对短视频内容进行不断创新。一方面可以吸引更多的人来关注该图书馆短视频账号，增加粉丝量；另一方面，将馆内特色服务通过短视频的方式展示出来，吸引用户到馆参观。而社会热点则是当下关注度最高的热门动态，实时关注短视频平台的热搜榜，将当下的热点话题与馆内服务进行结合宣传，例如正值建党百年，福建省图书馆以建党百年传承红色基因为背景，在短时间内让用户了解到该图书馆的特色。

4.3 短视频服务优化

大数据和云计算的出现，让网络上的数据变得更加准确，图书馆必须要通过大量的数据，来了解读者的喜好，然后根据馆藏资源优势，将读者喜欢的内容传播给他们。因此，为了达到以上目的，图书馆的短视频团队需要加强自己的云计算和大数据的处理能力，并优化服务意识，及时监控作品的传播数据、同类账号的特性和属性数据。

4.4 开通短视频直播功能

短视频行业的日益兴起，各个同类账户已形成内卷的状态，仅十几秒到几分钟的视频已逐渐满足不了用户对视频内容的需求。图书馆可考虑开通直播服务，利用抖音短视频的直播功能对用户进行馆藏资源、设施服务的精细讲解，使用户更深层次地了解图书馆。

5 结语

本文依据专家访谈和文献研究，结合抖音短视频的发布要求，构建出包含14个指标的绩效评估模型。目前国内外公共图书馆抖音短视频评估尚未形成统一标准，尚需在各方面进行完善，图书馆应从用户出发，根据后台数据监测到的每天每月每年用户对短视频的点击量及转评赞数量等指标，判断短视频对用户提供的信息服务质量，制定相应评估方案。同时，对发布的短视频从其内容、表现力等进行复盘，将图书馆短视频平台的年度数据监测纳入图书馆服务系统的年终评估指标，从而优化图书馆短视频服务效果。

参考文献：

王聪，邱宇红，杨颖.图书馆“短视频+”服务现状及发展策略研究[J].新世纪图书馆，2022（2）：36-41.

韩世曦，曾粤亮.我国省级公共图书馆抖音短视频运营现状调查分析[J].图书馆学研究，2021（12）：30-37，10.

王海燕.图书馆短视频发展现状、问题与对策分析：以抖音平台为例[J].图书馆工作与研究，2020（5）：76-80.

汪然，马骥.全媒体时代公共图书馆抖音合作营销发展研究：现状、困境及策略[J].新世纪图书馆，2022（2）：30-35.

明均仁，朱君妍，吴晓英.公共图书馆短视频服务现状及发展策略研究[J].图书馆理论与实践，2022（1）：22-27.

国家广播电视总局广播影视信息网络中心《新时代短视频精品化发展研究》课题组.网络短视频评价体系构建初探[J].影视制作，2022，28（9）：25-29.

王天阳.用户短视频评价指标研究[D].贵阳：贵州民族大学，2021.

赵月娥.基于超效率DEA模型的图书馆短视频运营效率评价研究：以省级图书馆抖音公众号为例[J].新世纪图书馆，2021（12）：28-33.

都蓝.高校图书馆微信公众平台绩效评估实证研究：以暨南大学图书馆为例[J].图书馆学研究，2019（12）：26-32.

陈丽娟，陈滨，刘海霞.厦门大学图书馆的绩效考核评价体系[J].图书馆论坛，2020，40（1）：146-152.

宋家梅，徐建华.台湾地区的公共图书馆绩效评估研究[J].图书与情报，2017（4）：65-71.

高晓晶，喻梦倩，杨家燕，等.图书馆短视频传播及互动效果影响因素模型及實证分析：基

于“上瘾模型”的探索[J].图书情报工作，2021，65（10）：13-22.

庄锁法.基于层次分析法的综合评价模型[J].合肥工业大学学报，2000，23（4）： 582-587.

谭凯波 吉首大学图书馆副研究馆员、硕士生导师。 湖南张家界，427000。

董娅茹 吉首大学旅游学院图书情报硕士研究生。 湖南张家界，427000。

范 瑞 吉首大学旅游学院硕士研究生。 湖南张家界，427000。

（收稿日期：2023-01-07 编校：谢艳秋，陈安琪）