全国青少年校园足球“满天星”训练营评价指标体系的构建与应用

李培，沈苗，刘鸿优，段锐

(1.华南师范大学 体育科学学院，广东 广州 510006；2.华南校园足球发展研究中心，广东 广州 510631；3.广东工业大学 体育学院，广东 广州 510006)

为贯彻落实习近平总书记关于青少年校园足球人才培养的重要指示精神，探索足球优秀后备人才的高质量培养路径，2018 年3 月教育部开始建设全国青少年校园足球“满天星”训练营(以下简称“满天星”训练营)，并出台《全国青少年校园足球“满天星”训练营工作规范》(以下简称《工作规范》)[1]。“满天星”训练营为有发展潜质、培养前途的校园足球运动员创造更好训练和比赛条件，搭建高水平训练和竞技平台，补上校园足球运动员经常性高水平训练和比赛不足的短板[2]。由此可见，“满天星”训练营对提高校园足球竞技水平乃至加强我国青少年足球发展体系建设至关重要。

科学中的所谓“问题”无非是目标状态与当前状态的差距，而所谓“方法”，也无非是达到目标的手段[3]。构建评价指标体系是发现问题和解决问题的重要手段。由于“满天星”训练营建设时间较短，并未构建专门的评价指标体系，也未见与之相关的研究，这对“满天星”训练营建设质量与发展极为不利。本研究依据《全国青少年校园足球“满天星”训练营基本要求(试行)》(以下简称《基本要求》)[4]，从保障、管理、教练、教学、训练和竞赛等方面构建“满天星”训练营评价指标体系，旨在对“满天星”训练营的建设质量进行评估、比较和分析，为建设高质量的“满天星”训练营提供理论与实践依据。

1 研究方法

1.1 德尔菲法

依据《基本要求》和文献资料初步构建了评价指标体系。为了完善校园足球活动的评价指标体系，向熟悉研究内容的校园足球领域8 名高校专家和“满天星”训练营12 名主要管理者进行3 轮问卷调查，调查专家从事相关领域理论研究与实践工作经验超过10年。每轮均发放问卷20 份，回收问卷20 份，有效问卷20 份，有效问卷回收率100%。第1 轮对初步构建的评价指标体系进行问卷调查(非常合理、合理、一般、不合理、非常不合理)，对评价指标结构和内容进行修正。第2 轮问卷调查在第1 轮调查结果上调整指标，并根据Likert 五级量表(非常重要、重要、一般、不重要、非常不重要，对应分值为5、4、3、2、1 分)进行重要性评价。第3 轮问卷调查为第2 轮调整后的指标，通过专家评判两两指标间重要性来确定指标权重系数。

1.2 层次分析法

(1)根据第3 轮专家调查统计结果建立多层级结构模型，本研究“目标层”为“满天星训练营评价指标体系”，“决策层”为“一级和二级评价指标”，“方案层”为“三级评价指标”；(2)构建判断矩阵，对同一维度的指标进行两两比较；(3)计算指标体系的权重，采用算数平均法将判断矩阵进行归一化，计算矩阵的最大特征值(λmax)，并进行一致性检验(CR)；最后根据各级指标权重排序，判断各项指标的重要程度。

1.3 数理统计法

收集问卷信息并进行统计，在Excel 数据库整理有效信息，再导入SPSS 26.0 统计软件对调查数据进行判断、运算等处理，计算专家权威系数(Cr)，各指标的平均数、标准差，并根据相应计算公式得出每个指标的变异系数(CV)以及评价指标体系的权重等。

2 “满天星”训练营评价指标体系的构建

2.1 建设内容分析

“满天星”训练营的具体建设要求包括管理、保障、教练、教学、训练和竞赛等6 个方面，结合《基本要求》，将6 个方面内容进一步细化(见表1)。

表1 “满天星”训练营的具体任务

“满天星”训练营建设作为校园足球后备人才培养的系统工程，任何一个环节缺失或弱化都会影响整个系统的发展，构建评价指标体系对“满天星”训练营进行评估，有利于指引和监督“满天星”训练营的建设质量，实现提高校园足球竞技水平、培养优秀后备人才的目标。

2.2 评价指标体系构建原则

(1)科学性原则。为了使所构建的指标体系能够客观、真实、长期、有效地运用，所构建的指标体系必须符合科学性原则[5]。“满天星”训练营评价指标体系的确立，首先要能反映“满天星”训练营培养校园足球后备人才的目标任务，指标体系符合《工作规范》和《基本要求》的相关要求与逻辑思路。(2)系统性原则。“满天星”训练营是从管理、保障、教练、教学、训练和竞赛等6 个方面提高校园足球后备人才培养的复杂系统，各级指标选取划分要以系统科学为指导思想，对于指标选取要以整体性、层次性为基础。所选择指标要系统全面体现“满天星”训练营所需要素，对要素的层级划分要体现层次性。(3)可操作性原则。指标是对原始信息的提炼与转化，指标不宜过于繁琐，个数不宜太多，以避免陷入过多细节而无法把握考评对象的本质，从而影响评价的准确性[6]。“满天星”训练营的建设主要涉及6 个方面，指标表述要简明扼要，指标数据要易理解和填报。

2.3 评价指标体系的构建

1)第1 轮专家调查结果统计。

专家权威程度用来衡量专家小组对指标的选择是否得当，主要由专家对指标的判断依据(Ca)和对问题的熟悉程度(Cs)决定。判断依据分为：工作经验、理论分析、国内外同行的了解以及直觉4 方面。对专家判断的影响程度为：大(0.5)、中(0.4)、小(0.3)。专家对问题熟悉程度分为：很熟悉(0.9)、熟悉(0.7)、一般(0.5)、不熟悉(0.3)以及很不熟悉(0.1)。专家权威程度(Cr)计算公式为：Cr=(Ca+Cs)/2，数值在0～0.95 之间，一般认为专家权威系数≥0.70 为可接受的权威系数。本次根据专家在第1 轮问卷调查过程中所填写的“一级指标专家权威程度量化表”计算结果(见表2)，专家权威系数均在0.8 以上，说明本次研究专家的权威程度较高。

表2 专家权威程度调查结果

根据第1 轮专家对评价指标的意见进行增加和修改，关于增设的指标：在二级指标C3 中，增加1 个三级指标“训练营每年参加省级以上教练员培训”；在二级指标D2 中，增加1 个三级指标“营地学校每周开展足球大课间”，其增设原因为“对上一级指标的补充，使二级指标更加完善”。关于修改的指标，在二级指标D2 中，将D22 修改为“营地学校每周开展足球大课间”；在二级指标E1 中，将E11 修改为“训练营制订了科学训练计划(E111)”“训练计划注重内容的衔接(E112)”。

2)第2 轮专家调查结果统计。

变异系数(CV)是标准差与平均值的比值，反映了专家评价结果的分散程度，变异系数值越小，说明专家评价结果的分散程度越小，反之，分散程度越大，通常认为变异系数≤0.25 为可接受范围。

为进一步完善指标，根据第1 轮修订整理后的结果，以及“满天星”训练营建设的相关文件分析和相关文献资料设计第2 轮专家调查问卷，初步筛选出“满天星”训练营的评价指标，根据Likert 五分量表对6种能力的重要性分别赋5～1 值(非常重要、比较重要、一般重要、一般不重要及非常不重要)，根据专家对指标的重要性评价结果计算出一级指标平均值、标准差和变异系数。本研究第2 轮指标得分的均数、标准差和变异系数统计结果(见表3)，变异系数均小于0.2，说明本次专家评价的协调性较高，专家一致认为该6个指标具有较好的合理性，能够较全面地对满天星训练营进行评价，并按照一级指标的筛选方法计算出二级、三级指标的均值、标准差和变异系数。

表3 第2 轮专家调查结果

3)评价指标体系内容确定。

经过第1 轮和第2 轮统计结果分析以及专家反馈意见，最终确定由6 个一级指标、18 个二级指标和41 个三级指标构成的“满天星”训练营评价指标体系(见表4)。

表4 “满天星”训练营评价指标体系及权重

2.4 评价指标体系的权重确定

权重确定是综合评价十分关键的环节，权重值的确定直接影响着评价结果[7]。在综合评价中确定指标权重最常用的方法是主观赋权法和客观赋权法。主观赋权法是依据专家对于指标重要程度的赋分来计算指标的权重，如层次分析法、专家调查法等；客观赋权法是依据原始数据对相关指标进行赋权，如因子分析法、主成分分析法、熵值法等。为了更好地反映各指标的重要程度，揭示指标体系的内在结果，本研究采用主观赋权的层次分析法来确定“满天星”评价体系中3 个等级评价指标权重。

1)一级指标权重确定的方法。

首先，建立由6 个一级指标、18 个二级指标和41个三级指标构成的青少年校园足球“满天星”训练营评价指标体系的多层结构模型。其次，在多层结构模型中对属于同一级的要素用上一级的要素为准则进行两两比较后，专家根据指标的相对重要度予以赋值(见表5)，以此构建判断矩阵，通过一定计算后确定指标的重要度，即权重。具体步骤如下：(1)构建判断矩阵。判断矩阵是层次分析法的基本信息，也是进行相对重要度计算的重要依据。以校园足球“满天星”训练营建设质量评价为总目标，将专家对总目标下的六大要素(管理水平、保障水平、教练水平、教研水平、训练水平、竞赛水平)之间的重要程度转化为数据矩阵，从而得到层次判断矩阵A。(2)计算特征向量和指标权重。运用求和法计算出指标权重W。(3)一致性检验。通过求特征向量W的最大特征值，由公式进行判断矩阵A的一致性检验，整理出专家对6 个一级指标的判断矩阵，并对专家构建的判断矩阵进行整理，以此计算出指标的权重系数(见表4)，其中CR＜0.1，则说明所构建的判断矩阵通过一致性检验。

2)二级、三级指标权重的确定。

按照一级指标权重的计算方法，对18 项二级指标及41 项三级指标进行赋值计算，最终整理出本研究构建的完整评价指标体系(见表4)。

2.5 三级指标的评分标准

根据相关文件要求、专家意见和中期调查中各“满天星”训练营反馈意见，对三级指标的评分标准进行细化。根据可操作性原则采用百分制评分标准，即一级、二级和三级指标的权重系数×100%，得出各级指标评分标准。在进行“满天星”训练营建设质量的评估中，对照三级指标评分标准逐一评分，每项得分即为该项指标实际分数，最后根据三级指标所得分数求和计算出总分(见表6)。

除此之外，“满天星”训练营的评价指标体系中还根据《工作规范》的基本建设要求增加了专项资金未用于训练营建设、未搭建“满天星”训练营的总营及营地学校体系、未组织开展“满天星”训练营训练和竞赛活动等3 个一票否决选项，从而进一步强化“满天星”训练营建设的基本要求。

3 “满天星”训练营评价指标体系的应用与分析

2020 年12 月全国校足办对2018、2019 年建设的77 个“满天星”训练营进行质量评估，专家组在对“满天星”训练营实地调查中，采用本研究评价指标体系进行评分，结果：有8 个达到优秀标准(90 分以上)，28 个达到良好标准(80～89 分)，33 个基本达到建设要求(70～79 分)，还有8 个未达到建设要求(低于70 分)。2021 年5 月全国校园足球专家委员会委员投票评选出12 个全国优秀“满天星”训练营，其中11 个在建设质量评估中得到优秀和良好，得分前10 名中有9 个入选，评价指标体系评估结果与专家投票评审结果一致率为91.7%。由此可见，本研究评价指标体系符合“满天星”训练营建设要求，能够对“满天星”训练营的建设质量进行全面客观的评估。

通过评估发现，“满天星”训练营在保障水平、教练水平、训练水平、竞赛水平和管理水平上存在一定问题，失分率排在前10 的三级指标(见表7)。

表7 “满天星”训练营建设质量评估三级指标失分率前10 名

从评估中表现出的主要问题来看，“满天星”训练营应重视保障体系、师资培养、训练、竞赛体系和管理水平等方面的建设，并优先选择具有足球传统的区域布局建设。

3.1 建立长期稳定的保障体系

“满天星”训练营高水平教练员的选聘、各种竞赛活动和训练器材装备等方面需要经费保障，优秀后备人才选拔和输送渠道需要政策保障，因此，稳定的保障体系体现了所在地政府对“满天星”训练营的重视程度，也是“满天星”训练营高质量可持续发展的关键。目前，全国“满天星”训练营的保障体系存在较大差异，部分“满天星”训练营获得所在省、市和区县的政策和配套经费支持，建立了稳定的保障体系，在区域优秀后备人才培养中发挥重要作用。但63.6%的“满天星”训练营未获得所在地政府配套经费支持，基本依靠教育部下拨经费运行。在教育部3 年资助期满后，未得到所在地政府经费支持的“满天星”训练营将面临生存挑战。因此，在所在地政府支持下，建立长期稳定的保障体系是“满天星”训练营可持续发展的关键。

3.2 加强校园足球师资的培养

长期以来，学校足球师资数量不足与专业水平不高的问题制约校园足球竞技水平的提高，这一问题随着校园足球的普及推广凸显。“满天星”训练营通过选聘国内外高水平教练来提高师资水平，高水平教练团队支出占建设总经费的51%，但80%的高水平师资来自体育部门、俱乐部和社会青训机构。随着教育部经费资助期满，“满天星”训练营建设经费减少，难以继续选聘高水平教练团队，学校师资将逐渐成为主力。因此，“满天星”训练营需要加强校园足球师资的培养，选拔学校足球教师加入教练团队，跟随高水平教练学习，积极开展区域足球师资培训，提高学校足球师资的水平。

3.3 搭建训练与竞赛衔接体系

“满天星”训练营要为有发展潜质、培养前途的校园足球运动员创造更好训练和比赛条件，搭建高水平训练和竞技平台，补上校园足球运动员经常性高水平训练和比赛不足的短板。优秀“满天星”训练营搭建了训练和竞赛衔接的体系，实现了每周“两训一赛”，通过比赛检验训练效果，队员每年参加近40 场正式比赛。而有待整改的“满天星”训练营未能搭建训练与竞赛衔接的体系，普遍存在“只训练不比赛”的情况，队员每年参加正式比赛低于10 场，训练效果无从检验。训练与竞赛的脱节是校园足球竞技水平难以有效提升的关键。因此，搭建训练与竞赛衔接的体系是提高校园足球竞技水平，实现“满天星”训练营培养优秀后备人才培养目标的关键。

3.4 落实定期检查与量化考核

“定期检查及量化考核”是“满天星”训练营管理水平评估中失分最多的项目，88.3%的训练营未能对总营和营地学校进行定期检查与量化考核。“满天星”训练营建设的资金等资源通常平均分配到营地学校，但营地学校的重视程度存在较大差异，由于缺乏定期检查与量化考核，会出现重视与不重视获取资源一样，这不仅导致营地建设差异化加剧，而且挫伤了重视建设质量营地学校的积极性，降低资源的利用率。因此，研制“满天星”训练营评价指标体系有利于开展定期检查与量化考核，根据考核等级匹配建设资源是提高建设质量的重要调控措施。

3.5 选择具有足球传统的区域

国内优秀“满天星”训练营主要分布在上海、深圳、成都、郑州、武汉和大连等具有足球传统的经济发达区域，这些区域具有长期发展足球的历史，形成了浓厚的足球氛围，经济实力也为足球发展提供有力的保障。因此，中国足协同样在这些区域重点建设青训中心。2018 年，中国足协与全国校足办联合发布《全国青少年校园足球体教融合发展政策清单》，提出“满天星训练营与各级青训中心共同布局、合作共建、资源共享”。希望在重点区域实现融合，建设足球后备人才培养重点区域。因此，选择具有足球传统的区域建设“满天星”训练营有利于聚集优质资源，形成稳定的保障体系和高水平教练团队，从而实现建设高质量“满天星”训练营的目标。

本研究从管理、保障、教练、教学、训练和竞赛等6 个方面构建的评价指标体系，涵盖了“满天星”训练营建设的核心要素，填补了该项目评价指标体系构建的空白，并在全国“满天星”训练营评估中得以检验，为校园足球的评估工作提供了有价值的理论依据和实践经验。构建科学评价指标体系是项目评估的基础，“满天星”训练营建设的定期评估，有助于厘清建设思路与内在逻辑，包括区域的选择、要素间的关系和发展顺序，从而不断发现问题和自我完善，最终实现“满天星”训练营高质量发展。