基于数据湖的国资国企在线监管平台应用研究

李崇智

（中国中煤能源集团公司，北京 100120）

1 背景分析

国务院国资委印发了国资国企在线监管系统建设工作方案，提出了国资国企在线监管系统建设“三年行动计划”，编制了《国资监管业务数据指标库》（1.0 版）明确了国资委17 个厅局对各类业务的27762 个国资监管指标，并对其有无业务支撑、采集频率、字段类型、字段名称、数据类型、数据长度、保密情况、采集范围进行了明确，要求各中央企业搭建自身国资国企在线监管平台，实现与国资委的数据贯通，实时监管。为贯彻落实中共中央办公厅《关于解决形式主义突出问题为基层减负的通知》精神，中煤集团提出要进一步改进工作作风，提高工作效率，切实为基层企业减负，进一步整治形式主义、官僚主义，切实解决“总部机关化”问题，充分运用信息化手段减少企业重复报送数据、多头报送数据的问题，利用信息化手段直接收集数据资料而不再要求基层企业填报。建设基于数据湖的国资国企在线监管平台成为解决国资委监管和中煤集团监管两层监管需要的主要解决路径。

2 国资国企在线平台业务数据方案

2.1 “数字中煤”的“一湖、两库”架构设计

“一湖”为实现数字中煤而构建的利用大数据分析和人工智能技术实现中煤集团各类管理、运营，以及生产数据集中管理、分析、运营的数据湖。“两库”为“国资委监管指标库”和“中煤集团层面监管指标库”，充分利用两库建设既满足国资委对中煤集团的数据指标监管，同时也满足中煤集团对各级所属企业的数据指标监管。

“一湖、两库”的数据方案是在详细分析国资委监管指标库和集团公司各类监管业务的基础上提出的，充分考虑了国资监管业务与中煤集团监管业务的跨业务管理、交叉采集、数据共享等因素后构建提出，以数据为中心，构建逻辑统一的“大系统、大平台、大数据”监管平台，建成“横向到边、纵向到底”的中煤集团在线监管平台，推动国资监管数据在中煤集团层面的汇聚和共享，实现中煤集团与国资委系统的互联互通。

2.2 “国资监管在线监管”的业务需求

中煤集团“国资监管在线监管平台”建设紧紧围绕国资委“三年行动计划”，搭建符合中煤集团管控实际的“大数据、大平台、大系统”国资监管平台。系统建设坚持“重点突出”“应用导向”“持续提高”“安全保密”建设原则。以国资委管数据报送、集团重点关切管控数据为重点；以系统应用推动建设，从应用中发现问题，在解决问题后持续提高应用质量，抓住关键环境，消除监管盲点，突出监管成效；以数据为核心，推动企业监管数据的汇聚和共享，实现网络、数据、业务的对接和联通，协同发展，有效降低手工数据录入；统筹考虑网络信息安全防护体系，提升安全保密管理，做到数据收集有范围，数据利用有依据。

目前按照国资委《2019 年国资国企在线监管系统建设方案》和《2019 年国资委国企在线监管系统建设重点任务分工表》中的有关要求，并结合《国资监管业务数据指标库》（1.0 版）各类数据，梳理目前国资委指标库共包含监管指标27762 个，涉及56个报表和38 个书面文件，数据收集用于国资委规划局、产权局、财管运行局等16 个厅局。

经过详细梳理管控信息系统已建设情况，摸清可集成数据和待录入数据，设计数据抓取、存储、分析、展现等功能模块，同时针对无法抓取数据问题设计各管理层次、业务领域覆盖范围广的数据录入、审核、报送、分析等功能模块。集团对内监管数据指标共88 类，涵盖系统报送、邮件报送、光盘报送、纸质文件报送等多种报送形式的报送数据，数据收集周期包括月报、季报、半年报、年报、临时报送等。

平台具体功能包括领导驾驶舱、重点数据分析与报警、国资报送审查、国资数据报表生成等功能模块。数据共享平台包括业务数据对接、数据抓取、中间数据库转存、基础数据分析、国资委数据报送对接等功能。根据国资委国资监管重点业务，研究形成典型问题清单，梳理监管盲点，抓住关键环节，突出监管成效，增强通过信息化手段发现问题和风险预警能力。同时借助国资国企在线监管打通内部信息系统，解决关键数据的孤岛问题。根据国资委监管联动机制，研究“三重一大”与项目，项目与资金，产权与“三重一大”之间的业务联动机制，明确“三重一大”决策运行、项目管理、产权管理、大额资金系统之间的对接指标和衔接关系。

2.3 平台数据建设路径

国资国企在线监管平台的建设思路是按照指标梳理、数据汇聚、管控设计、管控落实的整体建设步骤开展。

指标梳理阶段重点分析国资委侧和集团公司侧各类业务监管体系指标，明确指标数据来源、数据属性、收集特点、管理方式，在国资委下发数据指标基础上形成中煤集团的国资国企在线监管平台指标库；数据汇聚阶段把已有系统支撑的系统实现数据对接和数据提取，将数据汇聚到国资国企在线监管平台数据集中，同时整理落在总部各部室非系统支撑类数据，以统一导入的方式实现数据存储；管控设计阶段将数据管控和业务管控方案有机结合，利用监管智能分析，体系化数据利用，确保一数一源，数据准确，促进管理提升和信息化系统应用提升；管控落实阶段将构建按照统一数据采集、统一共享交换原则，协同推进管控，确保集团收集各类管控数据内容和版本的一致性，力争对外报送数据的可追溯、可管理。

3 主要技术的研究与应用

3.1 数据交换技术解决方案

国资国企在线监管的数据交换包括“中煤集团与国资委端的数据交换”和“监管平台与中煤集团各应用系统的数据交换”两个方向的解决方案设计。

中煤集团国资监管平台与国资委端的数据交换包括与国资委接口的对接、接口的管理、数据打包、加解密、监管数据下载等功能。

监管平台与中煤集团各应用系统的数据交换按照统一的数据交换中间库、数据交换标准、数据ETL 抽取架构、数据入库模式进行设计。业务系统与中煤集团数据仓库的接口数据通过中间库的方式实现。

3.2 数据湖在国资监管业务中的应用实现

数据湖是一个中心数据存储的容器，可以用于存储格式化、半格式化、非格式化的各类数据，通过搭建中煤集团数据湖将各类业务管理数据通过上游业务系统和采集平台汇总，对数据进行编码、属性化、元数据化、结构编排，后进行数据清理，依照国资监管库和中煤监管库两库架构建设数据目录，支撑后续数据价值挖掘和数据共享再利用服务。国资国企在线监管数据湖搭建注重关注集成能力、存储能力、治理能力、安全能力、发现能力、分析能力、质量治理7 个核心能力。通过定义数据接入层、数据存储层、数据计算层、数据应用层四层架构，利用ETL（Extract-Transform-Load）、ODS（Operational Data Store）、DW（Data Warehouse）、DM（Data Mart）建模形成统一数据湖，如图1 所示。

图1 监管数据湖模型设计架构

国资监管数据通过ETL 和中间库的方式集中汇聚到ODS层，将属于集团公司各监管部门的业务数据进行统一存储，通过建模工具，利用域、目录、标签、数据来源、数据资源结构、指标方案、数据血缘关系、数据关联关系、数据参数关系、数据历史版本管理实现数据的DW 层化，明确中煤集团监管库和国资委监管库的对应关系，监管指标库之间的对应关系，监管指标库和原系统的对应关系。最终通过数据市场、数据分析、数据挖掘、数据可视化、数据查询等DM 层化，最终落实数据湖总体价值体现，增强数据共享能力，盘活数据资产价值。

4 应用效果和总结

基于数据湖的国资国企在线监管平台建设达到了预期的目标，取得了优异的应用成效，主要表现在以下方面。

（1）落实国务院国资委国资监管“三年行动计划”有关要求。把握新时代技术革命大势，认真贯彻国务院国资委关于央企数字化转型和两化融合的要求，利用云计算、大数据、人工智能等数字信息技术，通过构建集团公司国资监管的“一湖、两库”体系，形成各类管理、运营、生产数据集中管理、分析、运营的“数据湖”和“国资委监管”集团公司监管”两个指标库，促进中煤集团数字化转型。

（2）持续开展“总部机关化”问题整改工作。根据中煤集团“总部机关化”持续整改的要求，建立数据材料归口管理机制和动态更新机制，坚持数据资料的协同共享、动态更新原则，逐渐形成集团公司的数据资产，实现“库中有数”“库中有料”，避免急要现找的情况，切实为所属企业数据报送减负。

（3）搭建集中的数据管理中台，统一管理监管数据资产。结合国务院国资委《国资监管统一数据采集交换平台接入指南》《国资监管业务数据指标库》（1.0 版）等技术业务方案，利用数据湖、数据分析、数据编排等技术，统一汇聚中煤集团总部监管业务数据，集中盘点集团公司数据资产，实现数据的共享利用，数据智能分析，辅助决策支持，促使应用系统数据应用和数据质量的大幅改进。