浅析“大数据”时代

苏志忠+刘庆敖

摘 要： 随着网络信息化时代的日益普遍，移动互联、社交网络、电子商务大大拓展了互联网疆界和应用领域，我们正处在一个数据爆发性、几何式增长的“大数据”时代，“大数据”时代已经来临，将会对人类的数据驾驭能力提出前所未有的机遇与挑战。

关键词： 大数据 发展 影响

如果两年前有人问，在IT领域什么概念最流行，可能很多人都会提到物联网或云计算。但从2012以来，“大数据（Bigdata）”成为学术界、工商界和媒体争相报道的热词。“大数据”是继续物联网、云计算之后IT产业又一次颠覆性的技术变革，对国家治理决策、组织、业务流程及提供公共服务等方式都将产生巨大影响，有学者甚至将大数据时代称为人类文明史上自工业革命以来的第二次大革命。

一、何为“大数据”

20世纪世界最伟大的技术发明之一——“互联网”的诞生，标志着人们将进入全球性网络时代。而随着互联网技术的不断发展，特别随着社会媒体和移动互联网用户的逐渐发展，物联网、云计算、移动互联、车联网、手机、平板电脑、PC及遍布全球各个角落的各式各样的传感设备、终端的接入，使各种数据呈现出爆发式、几何式的快速增长。我们可以试想一下：全球各个城市的视频监控每时每刻都在采集流媒体数据，这是多么巨大的量？当50亿手机终端、20亿台电脑终端，随时随地、持续不断地都向分布在全球各地的服务器发送数据，所带来的数据持续增量又是一个什么概念？不能否认，随着大数据广泛应用，我们已经身处在一个海量信息和海量数据的时代，MB、GB时代已经成为过去，TB时代正在被超越，大数据时代已经来临。

目前，对大数据尚无统一的定义，通常人们会认为这是一种数据量庞大、数据源形式多样化的非结构化数据。由于大数据分析常和云计算联系在一起，有人会把大数据等同于云计算，也有人在大数据是一种技术还是一种现象之间纠结。但数据本身既是一种资源，更是一种资产，大数据是有价值的，这一点在业界已经达成共识。在这里我们还必须先厘清几个概念：一是结构化数据。结构化数据可以在关系数据库中找到，多年来一直主导着IT的应用；二是半结构化数据。半结构化数据包括电子邮件、文字处理文件及发布在网络上的新闻等，以实际内容为基础；三是非结构化数据。非结构化数据广泛应用于社交网络平台、物联网平台和电子商务之中。随着社交网络平台的增量、传感器应用等新技术不断发展与创新，更有数据称，超过80%～90%的数据属于非结构化数据。

二、大数据带来的改变

现今的信息资源已日益成为与人力资源、物质资源同等重要的社会和企业资源。目前，大数据之所以越来越受到人们的认可和追捧，主要是因为其具有非常广阔的研究和应用前景，正悄悄改变人们的传统思维，并渗透到各个行业和各职能业务领域，这也意味着大数据将是一座巨大的金矿正等待着人们去开发和挖掘。同时，大数据带来的商业机会现在为越来越多具有技术前瞻性和有实力的企业所重视，在各个领域发挥着重要作用，为广大用户提供更加专业化和个性化的服务。

例如，在中国，铁路作为国民经济的大动脉，在国民经济发展中具有重要作用。随着中国高铁的快速发展，“四纵四横”铁路客运快速通道的实现，将会对现有交通运输格局产生深远影响。大数据在铁路运输方面也有直观表现：首先，可以通过铁路客运信息的收集、整理、分析预测客运量，合理整合运力资源。其次，通过铁路信息海量数据统计，实际反映出旅客群体自身需求，通过数据分析优化配置并开展更为广阔的增值业务。最后，相对于传统信息处理方式，大数据将大大节省研发成本和人力资源，会对人们的不同需求做出正确判断，它的分析将会把市场发展的不可预测性变为一种可能，同样，利用“大数据”预测客运、货运的趋势将成为可能。

在德国，大数据技术已经被用于智能电网的各个终端，即现在所说的智能电表。同时，为了鼓励大家积极使用太阳能，从而节约物质能源。各个家庭在安装太阳能设备终端后，除满足自家使用外，还可以把太阳能产生的多余电卖给电网企业。而智能电网可以每隔5～10分钟收集一次用电使用数据，这些收集的数据可以用来分析、预测各个客户的用电习惯等，通过数据分析、预测，从而推断出在未来几个月的时间内，整个电网相对准确的用电需求。

而易趣网（eBay）则将结构化数据和非结构化数据结合在一起，为准确分析各用户的购物行为，eBay定义超过2000种各类型的数据，对顾客的行为进行持续跟踪分析。比如，广告收入上，利用该系统，eBay能够精确计算出每一个关键字为其带来的投资回报。通过对广告投放的优化，eBay产品销售的广告成本降低了99%，顶级卖家占总销售额的百分比却上升到45%。

三、结语

随着信息通信技术发展积极累至今，大数据作为新发明和新资源，正通过不断的技术创新和发展，让我们有机会更加深入走进信息社会，正在逐渐改变我们的生活方式和思维模式，其所带来的巨大价值正被人们认可，而且在社会整体建设中的信息孤岛现象将大幅消减，数据共享将成为可能，具体而言，在国家政策支持下，依托大数据发展，有利于提高科学决策能力，有利于管理模式的改变，有利于节约社会资源和成本，提升公共服务保障能力。