大数据升级公共信用信息平台建设

2018-02-07 16:24贾悦王超
浙江经济 2018年15期
关键词:电子政务数据处理杭州市

□ 贾悦 王超

大数据是一场管理革命。利用政务云平台的各种软硬件和大数据技术,为公共信用信息系统和公共信用信息平台提供更先进的数据采集、处理、分析等基础支撑技术,为信用评级机构、征信机构等第三方应用平台进行信用信息资源增值开发提供应用支撑技术,已成为社会信用体系建设的发展趋势。

2008年,经杭州市委、市政府同意,杭州市发改委(市信用办)牵头,杭州市信息中心(市信用中心)具体负责,启动了杭州市联合征信系统项目建设,2013年起项目名称正式更名为杭州市公共信用信息平台。杭州市公共信用信息平台经过前几期的建设,已形成一定规模,增加了归集数据、拓宽了业务范围、拓展了用信方式,信用数据不仅来源于政府部门、事业单位,还有互联网公共信息的搜索抓取、移动应用采集等多种渠道。

杭州市公共信用信息平台的数据处理主要包含以下几个步骤:一是数据准备,即各业务部门将相关数据汇集到电子政务办,电子政务办将数据汇总到统一电子政务交换云平台。二是数据采集,即通过网间交换,将统一电子政务交换云平台中的增量数据采集到杭州市公共信用信息平台的归集库。三是数据归集,即杭州市公共信用信息平台通过程序处理,将归集库中的数据转换成资源目录对应的数据结构,并存储到中心库。该步骤同时包含清洗、比对、去重等数据处理内容。四是数据计算(指标生成),即杭州市公共信用信息平台根据指标配置的规则,进行指标结果的计算,并输出到固化表中。目前该环节需要人工干预处理。由数据运维人员对数据归集的情况进行分析判断,确认当前系统的压力度,以及是否能进行固化。

截至2017年5月,杭州市公共信用信息平台已形成1300余万份自然人信用记录和120余万份法人信用记录,完全覆盖了全市常住人口、流动人口及注册法人,实现政府信用信息的全量归集,涵盖全市55家市级行政机关,水、电、公交等9家公用事业单位,13个区、县(市),共338类2947项1.4亿多条信用信息。

引入大数据技术,对杭州市公共信用信息平台进行升级改造,利用技术的创新推进信用应用场景的创新和信用服务模式的创新,延伸信用信息服务的广度和深度,是杭州市推动和加快社会信用体系建设的一个具有里程碑意义的创新举措。

大数据技术的运用,使当前政府信用数据的来源不再局限于传统的组织登记、市场监管、审批审核等传统领域和组织内数据,而是扩展到电子商务、社交数据、网络行为等领域,大大拓展了数据的来源渠道,扩大了数据归集的范围。

公共信用信息平台大数据改造后,支持结构化和非结构化数据,涵盖包括文件、静态图片、指纹、视音频等更多种类,实现归集的信用数据类型更全面、更完整。

公共信用信息大数据应用支撑平台利用分布式存储和并行计算框架,结合多种分布式计算引擎,大大提高了数据处理的时效性和精确度;通过采用BI技术,包括大数据仓库建模、ETL、OLAP分析、可视化等技术,可实现对信用数据不同主题的多维度分析;平台通过采用数据标签化、聚类、判别模型、群像分析等一系列大数据技术,利用不断积累的数据资源,通过机器学习算法,对信用模型进行矫正与进化,可实现信用大数据主题应用的深入分析。

大数据的价值不在于拥有,更重要的是应用,这不仅需要持久的关注研究和大量的研发投入,更需要和政府监管要求、征信商业模式以及社会需求紧密结合,对数据进行深入的理解和分析,充分发掘数据价值。大数据技术的应用是一个综合性的过程,是从数据采集、数据处理、数据分析挖掘到数据服务的一体化过程。通过运用大数据技术,不仅促进了信用产品及信用创新型应用的开发和推广、推动了信用服务产业的深入发展,同时为政府监管决策精细化、前置化提供了辅助和支撑,降低了行政执法成本,提升了政府公信力。

猜你喜欢
电子政务数据处理杭州市
认知诊断缺失数据处理方法的比较:零替换、多重插补与极大似然估计法*
基于低频功率数据处理的负荷分解方法
ILWT-EEMD数据处理的ELM滚动轴承故障诊断
玻璃
论基于云的电子政务服务平台构建
风景如画的杭州市卖鱼桥小学
《杭州市行道树修剪技术规范》编制的必要性探讨
智慧城市时代的电子政务研究
杭州市赴阿坝州开展交流考察
基于希尔伯特- 黄变换的去噪法在外测数据处理中的应用