张敬杰
(山东临沂烟草有限公司 山东省临沂市 276000)
临沂烟草在经营过程中会产生大量的数据,如何将这些数据进行有效的收集和科学的分析运用,是必须思考的问题。大数据的充分利用,将对企业经营起着至关重要的作用。但在实际的企业大数据管理中,仍存在许多问题。因此,临沂烟草管理者应加强对企业数据的管理,并将其切实运用在企业的管理模式当中,提高企业的管理水平,增强企业竞争力,实现企业的商业价值。
所谓的大数据其实就是利用互联网软件和工具,将企业经营过程中所产生的信息进行收集、统计、分析,便于企业优化管理和使用。规模大、信息多元化、增长速度快等是大数据的特点。而随着业务数据的逐年积累,临沂烟草数据规模不断增加,在这种情况下,大数据技术能有效提高数据处理能力,利用大数据进行企业管理也就成了时代发展的趋势。
从临沂烟草每年的数据量来看,通常在TB 级别,尤其业务数据涵盖结构化、半结构化、非结构化等多种数据类型,其中企业数据的主要组成部分也由结构化数据逐步向非结构化数据倾斜。
利用大数据的信息挖掘和管理技术能够帮助企业快速提取有需要的数据,再根据大数据分析制定适合的策略。目前,我国大型企业以及学术研究机构都建立了大数据处理与管理系统,帮助企业挖掘有价值的信息,并在此基础上进行创新和改进,从而提高企业数据应用与管理效率。
在大数据环境下,数据量的大幅增长,使得信息交流效率提高的同时,也为企业信息安全问题带来了隐患。不法分子对企业服务器防火墙进行攻击,对企业数据进行窃取,导致企业机密泄露、暴露客户隐私,这将造成企业严重的经济损失、影响企业声誉和信誉,对企业带来毁灭性的打击。当今许多企业信息安全存在漏洞,企业信息安全管理人员的水平不足,使得企业大数据安全状况堪忧。
在大数据环境下,企业信息化程度是企业发展的关键点之一。企业信息化水平直接影响企业管理模式的创新能力。当今不少企业开始重视对数据的利用,对信息化建设投入了一定的资金,但企业信息化程度仍不够。大多企业数据的运用只局限在个别部门,例如财务部、业务部和生产部等,对于其他部门并没有注重信息化的建设,并且数据在公司范围内并不流通,只有部分管理者和数据分析人员了解数据,这导致企业无法有效实现信息的大范围运用,信息化程度受限。
企业信息管理人员必须加强数据安全防护工作,目前主要以服务器防护为主,重视防火墙的防护能力建设,使用优良的杀毒软件,为企业数据提供安全保障。同时,企业信息管理人员还应结合企业管理者的需求,加强企业数据的管理工作,分门别类建立信息数据库,并且应注意设定企业信息的查询权限,防止内部人员的盗取和泄密,相关权限人员也应签订保密协议。在内外双重防护下,保障企业的大数据安全。
有效的企业数据信息管理,需要通过建立有效的企业数据信息化平台来实现。临沂烟草通过建立数据信息化平台,实现数据的智能分析处理、数据存储归档、数据深度挖掘、数据解读呈现等等,对企业数据信息进行有利于企业经营管理的有价值分析,辅助企业管理者做出有利于企业的决策,提出有效的行动方案。通过数据信息化平台,可以使得企业更好地收集、整理、识别、挖掘有用信息,例如生产经营信息、财务信息、客户信息等,并对信息进行分析处理,打通各个数据系统接口,将各业务数据统一抽取到临沂大数据中心平台,管理者通过一键登录,可以实时了解各个业务的关键指标和主要经营数据,便于管理者决策。平台也可以形成有利于企业决策的商业分析报告,以此作为决策基础,为企业管理模式提供创新的思路,提高企业的市场竞争力。
目前我国企业中普遍存在财务管理、生产管理等管理人次,但却少有拥有大数据处理和应用能力的管理人才。在信息时代下,相对于传统的企业管理者,拥有大数据处理能力的管理者更能给企业带来创新和发展的机会。这不仅要充分认识大数据时代的优势,还需要其拥有相应的大数据运用能力,带领企业融入大数据时代。企业在培养企业管理者时,要着重培养其对大数据的关注度和应用水平,与社会的发展接轨,在根本上改变企业的创新模式,利用大数据给企业的发展带来新的契机。培养具有大数据处理和应用能力的管理者,可以在管理过程中不断改进企业信息管理方式,并结合企业的财务信息和业务信息提供正确的发展规划和战略布局。大大提高企业管理决策的效率和正确性,给企业带来更高的收益。
临沂烟草通过顶层统一规划,对现有信息系统集成整合,建立统一的数据标准,实现数据的动态采集、内部共享、对外服务,支撑多融合业务数据共享交换,支撑数据资源跨系统、跨平台、跨业务的汇聚融合、数据流转和业务协同,消除信息孤岛,发挥数据更大价值,改善和提升工作效率与服务品质。主要功能模块如下:
(1)系统登录。主要是确保授权用户才可以使用该系统。
(2)单点登录。系统首页提供对五个业务数据驱动中心的单点登录,用户在平台首页上发起对某个数据驱动中心的访问请求时,由平台将用户的请求和用户Token(包含身份信息和验证信息)转发给应用系统,应用系统通过对用户Token 的解析,进行用户登录,并返回用户请求的数据驱动中心页面。
(3)卷烟营销模块部署。卷烟经营模块展示的是全市系统品牌管理、终端建设、队伍建设、货源投放等数据;
(4)专卖管理模块部署。专卖管理模块展示的是全市系统案件办理情况、零售市场、非零市场的管理等数据;
(5)烟叶生产模块部署。烟叶生产模块展示的是全市系统育苗管理、施肥管理、病虫害管理、收购管理等数据;
(6)物流配送模块部署。物流配送模块展示的是数据驱动配送线路优化的成效以及因线路优化带来的收益;
(7)企业管理模块部署。展示的是当前人员结构及组成情况、干部结构情况、工资发放情况等内容;全系统考核相关指标;全市系统精益、创新、经济运行相关数据。
对各业务系统中的非即时性数据,使用ETL(数据仓库技术)定时调用数据采集任务,将数据增量采集到数据库平台;对需要由应用主动的、实时的往数据仓库层推送的大批量小体量数据,使用MQ(消息队列)来实现数据的实时采集。部署Greenplum 数据库作为存储解决方案。按照“数入一库、数出一门”基本原则和要求,将原始数据进行数据清洗和标准化处理后形成标准化数据,然后将标准化数据存储到数据库平台。
本系统主要是实现数据资源跨部门、跨层级、跨系统、跨平台、跨业务的数据汇聚整合、数据流转、业务协同和管理流程固化,实现数据统一调度治理、查询、分析挖掘,让数据变成生产力,推动数据利用方式由传统的数据分析到智能的辅助决策转变。
(1)探索信息业务一体化模式。以业务需求为导向,将业务流程、管理流程与信息化有机融合,将数据驱动引入流程设计,建立基于业务事件驱动的信息业务一体化处理流程,将流程固化到信息系统中,实现流程规范、高效、便捷。
(2)深入调研需求。业务部门人员并不了解系统开发的细节,因而其提供的需求描述往往不是其真实的需求。通过分利用头脑风暴法、鱼骨图、关联图等精益工具,去识别其需求是不是其真实需求,并将其想要的转化为真实需求。
(3)明确设计架构。底层是基础数据层,负责提供业务数据,具体包括营销、专卖、烟叶、物流、企管等数据;中间层是数据平台层,通过合理的数据采集方式,汇聚基础数据层的业务数据资源,按需对数据采集加工存储,将业务数据标准化、模块化;上层是数据可视化层,对数据平台层相关业务数据深入进行挖掘分析,使用可视化技术进行直观展示。
(4)开展系统的标准化建设。解决业务系统业务规范和技术标准问题。制订完整科学的平台业务规范与技术标准体系,业务规范包括大数据业务基础数据规范标准、业务基础数据元、统一编码体系等;技术标准包括技术路线、安全体系、数据交换、运维体系等。
(1)化繁为简,解决重复登录。通过单点登录解决了用户需要记住每一个系统的登录账户和密码,在使用不同业务系统时重复登录的问题。统一身份认证机制,减少了系统维护人员的工作量,使用统一的账号和密码避免了业务系统过多,密码规则复杂造成用户频繁丢失等问题。
(2)数据展示。数据展示大屏打破数据隔离,全方位、多角度、全景展示了市局(公司)系统核心数据指标,实时监控,一目了然。
(3)提供基础数据服务,持续满足业务部门数据分析新需求。随着经济发展步入新常态,烟草行业发展进入高质量发展新阶段,业务部门不断出现新的数据分析需求。如果按照原有业务系统开发模式周期较长。本项目投入使用后,业务部门可直接通过大数据平台,根据自身实际实现数据分析的可视化呈现。
(4)在推广应用方面,数据驱动中心系统在去年全省企业管理现场会上进行了展示,并在全市系统进行了推广使用,行业兄弟单位也根据临沂的建设情况进行了项目研发。
实现数据资源跨部门、跨层级、跨系统、跨平台、跨业务的数据汇聚整合、数据流转、业务协同和管理流程固化,实现数据统一调度治理、查询、分析挖掘,让数据变成生产力,推动数据利用方式由传统的数据分析到智能的辅助决策转变。技术特点:
(1)采用Vue 前端框架,前后端分离的开发模式。
(2)采用SSO 单点登录技术,集成各业务系统。
(3)采用echats 图表分析系统展示数据。
(4)MySQL 数据库。
山东临沂烟草有限公司坚持创新驱动发展,把创新贯穿到每一个岗位和环节。不断探索机制、制度、管理上的新思路、新方法,打破惯性思维和路径依赖,坚持用改革创新的办法,有效解决实际问题。
通过建立创新绩效评价、设立创新工作场所、成立创新团队,开展课题研究、科技攻关等各项措施,全面推动企业创新。针对业务系统多导致的信息孤岛等问题,专门组织成立创新攻关团队。通过深入基层开展调研,通过多次召开会议全面掌握各层级需求,收集各层级在使用目前业务系统的中存在的问题以及改进需求,开展问题初审,进行项目评估,出具初审和评估意见,进一步邀请专家进行技术支持和项目论证。临沂烟草数据驱动中心系统极大提升了工作效率,解决了业务工作的难题,为高质量发展提供了支撑。
该项目是针对现有业务系统缺乏交互,数据孤岛等具体问题,组织开展的一个信息化创新项目。该项目将大数据,数据可视化等理念植入项目当中。采用Greenplum 数据库,将原始数据进行数据清洗和标准化处理后形成标准化数据,然后将标准化数据存储到数据库平台,实现多业务系统sso 单点登录和企业核心数据可视化大屏展示。该项目充分发挥了平台的智能化、便捷化和规范化,达到了数入一库、数出一门的总体要求,提高了工作效率。
在大数据环境下,企业数据化发展形式迅猛,大数据将会得到广泛的应用,若想在这一时期求得发展,企业必须针对自身运营情况,通过企业各项数据的运用,集合市场发展趋势,提升企业的竞争力。