金鑫
摘 要:随着现代科技的日新月异,大数据在行业发展中的作用日益凸显。本文从分析大数据概念出发,解析大数据平台建设的技术构架、产品特性,并从推进行业信息共享角度,就行业大数据平台在行业的建设与应用提出了建议。
关键词:大数据 大数据平台 烟草行业
当前,我们正处于 “互联网+”时代,大数据平台在行业信息化建设中的地位越来越重要,在促进烟草企业核心竞争力提高方面的作用越来越凸显。
必须积极适应现代新技术发展趋势,认真领会张建民局长的重要讲话要求,不断加快烟草行业大数据建设步伐,努力为推动行业高质量发展提供坚实支撑。
一、大数据的基本涵义
继数字时代、信息时代、互联网时代后,人类社会又进入了大数据时代。全球知名咨询公司麦肯锡强调,数据已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素,最早提出了“大数据”时代到来。
(一)大数据与小数据的关系。小数据是个体化的数据,是每个个体的数字化信息。它以个体为对象,重点在于深度,即像一位忠诚细致的“个人管家”那样对个体数据进行全方位、全天候地深入精确分析,同时还可主动灵活地设置各种外界访问权限以保护个人隐私;而大数据则侧重在某个领域,大范围、大规模地进行数据的全面收集处理分析,侧重点在于广度。
(二)大数据与云计算的关系。云计算是基于互联网的相关服务的增加、使用和交付模式;大数据运用云计算技术从浩瀚的互联网信息中获取有价值的信息并归纳、检索、整合,为互联网信息处理提供软件基础。前者是基础,其本质是将计算能力作为一种较小颗粒度的服务提供给用户;后者是应用,其本质是利用计算机集群来处理大量的数据。没有云计算,无法实现大数据存储与计算;没有大数据,云计算就缺少了目标与价值。
二、行业大数据平台的功能定位
随着现代信息技术和互联网的快速发展,不仅大数据技术在各行各业得到了广泛应用,大数据产业得到了前所未有的扩张。烟草行业对信息化建设高度重视,大力推进“互联网+”,从顶层设计、规划部署,到分类推进、逐步提升,建立起了涵盖行业主要业务方面的信息管理系统,为提高行业信息化现代化管理水平发挥了重要基础性作用。
(一)必须突出平台的产品特性。大数据平台从产品定位上,主要为用户大数据提供处理能力,是一个数据分析挖掘平台。因此,大数据平台的客户目标定位,就是为具备大数据场景的个特定客户。大数据平台作为一个大数据商业智能的基础平台,以大数据作为支撑,与各行具体的解决方案结合,可以延伸出行业化的数据产品族。就烟草行业而言,必须面向烟叶生产、卷烟制造、卷烟营销、行政管理等部门用户,以结构化数据为基础,整合现有业务数据资源,分析挖掘数据资源,以人力、业务、财物、资金、组织等五要素进行数据建模,实现资源整合、信息共享、数据分析于一体的应用平台。
(二)必须突出平台的功能特性。一般地,大数据平台有以下功能特性:配置化的安装部署;元数据驱动的平台运行体系;全域的系统监控与管理;开放的数据服务;完善的安全管理策略;丰富的函数模型库;多来源多格式适配的数据采集;可视化的自助分析工具;统一的分布式存储;配置式的服务配置工具。构建行业数据大平台还要考虑以下功能:云搜索,对行业海量数据进行关联与查询,实现人力、业务、财物、资金、组织等数据的无缝对接和立体展现;超级档案,根据业务类别和发生年代,对烟叶、卷烟、车辆、人员等建立全息档案;痕迹分析,查询有关人员、车辆、烟草商品在一定时间、范围内的运行轨迹,并在行业电子地图上精确展示;关系分析,对目标对象进行横向、纵向关联性分析,从中活的潜在的有价值的信息。
三、行业大数据建设应注意的几个问题
行业大数据建设涉及到方方面面,在加快推进过程中有几个方面应引起更加高度关注。
(一)注重依托行业云平台建设。建设行业大数据平台是为了更好地让内部信息资源共享,为企业数据管理提供参考与依据。但大数据平台要立足现状,不能离开现有格局另起炉灶。行业现有云平台采用分布式架构,现在有现场设备与服务器间的交互对网格延时和服务器响应能力要求较高,应改造成集中式部署的模式。由于原有的设备使用多年,发生故障很多,很多单位对行业平台系统不断升级、设备不断更新,这位行业大数据平台建设提供了基础和条件。行业建设大数据平台建设,既要建立系统一的大数据平台,实现向信息共享模式转变;又要加快发展互联网中心,统筹实现内、外网站的升级改造。
(二)注重优化行业数据库架构。随着行业改革发展的不断深入,新的业务不断拓展,数据也在不断产生和增长,特别是未来行业云平台逐步集中的发展趋势,会给现在的数据库带来很大的挑战,传统的小型机加RDBMS模式已经不能满足。在大数据平台架构层面,应用目前最先进的内有数据库,这种模式下的架构摆脱了磁盘,转变为以内存为中心的架构,有利于充分利用内存的访问速度,大大提高数据库的性能。当然,要做好数据的收集、处理等基础工作,保证数据的规模、范围、时效等特性,重点抓好数据的更新和替换、数据本源和类型的确认、平台中共享资料的审核、数据使用权限的确认等。
(三)注重平台建设成果评估。在行业大数据平台建设的过程中,要对数据进行评估工作,只有体现出预想的建设效果,这个大数据平台建设才是成功的。必须牢固树立“安全无小事”的思想,切实加强对大数据平台的评估工作。重点有以下五个方面:一是加强对数据搜集工作进行评估,确保平台基础数据系统、全面;二是加强对数据的开放与闭合程度进行评估,确保平台功能优化、实用;三是加强对大数据平台的日常管理进行评估,确保平台维护及时、高效;四是加强对大數据平台运转绩效进行评估,确保平台作用发挥有力、有效;五是加强对大数据平台的安全性进行评估,确保平台运行平稳、安全。
总之,大数据是信息化发展的新阶段。随着信息技术和人类生产生活交汇融合,互联网快速普及,大数据对经济发展、社会治理、国家管理、企业发展、人民生活都产生了极其重大的影响。烟草行业要积极主动使用大数据时代,切实树立“大数据+”思维,紧紧围绕建设现代化烟草经济体系,加快高速、安全、统一的大数据平台建设,构建以数据为关键要素的烟草数字经济,推动行业加速向数字化、网络化、智能化发展,为推动行业高质量发展提供新的重要动能。
参阅主要资料:
1.习近平总书记在中共中央政治局就实施国家大数据战略进行第二次集体学习时的重要讲话精神
2.国务院关于印发《促进大数据发展行动纲要》的通知国发(〔2015〕50 号)
3.国家烟草专卖局局长张建民在行业各直属单位主要负责同志座谈会上的讲话
4.《云计算(第2版)》(作者是刘鹏,2011年电子工业出版社出版)
5.《“互联网+” 国家战略行动路线图》(马化腾等著,2015年7月中信出版社)