四大本质特征驱动大数据未来发展方向

广东省电信规划设计院有限公司│王劲

广东省电信规划设计院有限公司│刘洋

四大本质特征驱动大数据未来发展方向

广东省电信规划设计院有限公司│王劲

广东省电信规划设计院有限公司│刘洋

数据集市是未来热点，结合各细分行业特点，利用开放的数据集市平台，向中小企业提供数据分析、企业决策等咨询服务，这为高校以及各行业研究院、设计院等科研型机构提供了较好的契机。

在技术强国的大背景下，一系列新兴技术产业得到长足发展，其中大数据产业作为国家战略重点，被寄予厚望。本文通过梳理国内外大数据产业发展状况，分析产业技术体系及应用热点，研究大数据产业未来发展趋势及演进方向。

发展现状及政策环境

目前，我国大数据发展过程中面临的主要问题可以归纳为3个方面：

数据源不够丰富，数据开放程度较低。以互联网、金融、电信等行业数据为主，其他行业受限于自身信息化水平。由于数据标准化与共享体系不健全，已有数据利用价值不高、开放程度滞后。

大数据技术水平不高，技术扩散不畅。缺乏原创技术，对前沿技术路线的影响比较微弱。产业组织发育滞后，技术创新难以向社会扩散。

大数据相关的法律法规有待进一步完善。随着大数据挖掘分析将越来越精准、应用领域不断扩展，现有个人隐私保护和数据安全相关法律法规面临诸多挑战，亟需完善。

纵观全球，大数据发展处于起步阶段，国内外政策积极鼓励，我国大数据发展环境持续完善（如表1）。

表1 大数据产业政策与发展环境国内/国际对比

主要技术体系及产业链

在目前大数据技术体系中，只有基础层中对数据存储与数据管理部分发展出通用技术框架，其他部分的技术与算法呈现应用多样化与应用针对化。

基础层

数据采集与预处理。数据采集方式包括：深度优先采集法/宽度优先采集法/等时采集法。数据预处理方式包括：数据清洗ETL/Strom流数据处理。

存储与数据管理。高配时：底层存储采用HDFS(Hadoop)，数据管理采用MapReduce/Tez/Spark，程序接口采用Hive/Pig。低配时：底层存储采用HDFS(Hadoop)，管理接口采用Impala/ Drill/Presto。

分析层

数据分析/挖掘算法：一般分为基础/商业算法，如BI/AI(商业/人工智能)，针对不同应用采用对应模型与算法。数据分析方式包括：机器学习（SVM等）、模式识别（NNs等）、数据挖掘（关联规则/聚类等）。数据分析与呈现：日志/报表/图表/动态图。

服务层

主要面向的市场方向：战略咨询，如战略/广告/营销咨询；数据市场，如数据拍卖/数据开放平台。

在清晰的技术体系框架下，市场各要素环节各司其职，使得大数据体系得以不断地丰富、充实，从实验室走向大市场，从理论研究走向社会各个角落。以大数据体系中的数据流向划分上下游产业链，通过归纳和总结产业链中各层级的功能机构以及其提供的主要服务，可以列举具有代表性的公司（如表2）。

大数据产业分析

市场规模预测

麦肯锡预测，中国大数据潜在市场将达到1.57万亿元。而易观国际也有报告显示，2017年我国大数据市场有望达到170亿元。

表2 大数据产业链代表公司总结与归纳

根据预测，中国大数据产业配置包括：行业解决方案（35%）、计算分析服务（17%）、存储（15%）及数据库服务（13%），如图1。

图1 中国大数据产业配置饼形图

主要行业应用热点

通过建立行业契合度及应用可能性分析模型，可以直观发现互联网（电子商务）、政府、医疗、电信等行业是优先关注用户。

未来趋势分析

通过 建 立EDST模型，梳理归纳业界主要需求，分析研究大数据发展现状与业界需求之间存在的主要问题、差距，围绕大数据本质特征，得到未来大数据的发展方向及演进趋势，如表3所示。

表3 未来大数据的发展方向及演进趋势

典型应用

传统咨询行业需要向高端咨询公司转型，摒弃或者削弱层次较低的业务市场分析类业务，侧重于战略管理的产业升级与转型。咨询公司界限趋于模糊，拥有数据源的企业也可以参与到咨询行业中。

以万科为例，金隅万科广场上线试用了百度的V-in系统来取代普通的商业调研报告，使用大数据分析来增强客户体验和助力商场经营，在节约成本的同时可利用自身的数据分析给其他行业做咨询，如图2所示。

图2 万科广场咨询链条与咨询成本对比

避免同质竞争，提高行业利润

传统系统集成商盈利模式：针对特定厂商产品进行二次开发，选择合适的客户进行销售，

利润来源于厂商产品及客户投资差价。

系统集成商转型思路：类似中间件、定制化可裁剪、松散型、面向服务（SOA）的软件将成为核心技术，降低对厂商的依存度，转变为“以客户为中心”的IT服务提供商和整合软件开发商。

以达梦数据库有限公司为例，其“大数据平台战略”包括，自主研发的数据库管理系统以及数据分析产品（传统部分），融合中间件等第三方软件产品（支撑部分），推出整体/可定制产品组合与方案，用户从平台可获得咨询、规划、技术系列服务（增值部分）。

大数据产业链中，把握产业的制高点关键在于掌握技术规范、培养自己的用户。

云计算基础设施投入是未来运营商市场的新热点，在云基础设施建设中，规模化部署IaaS利润已趋低，且面临行业整合，并最终趋于集中在通信寡头。专业化的PaaS平台服务，具有一定的空间，具体模式和应用需进一步探索。

数据集市是未来热点，结合各细分行业特点，利用开放的数据集市平台，向中小企业提供数据分析、企业决策等咨询服务，这为高校以及各行业研究院、设计院等科研型机构提供了较好的契机。

编辑｜张鹏 zhangpeng@bjxintong.com.cn