陆放++马莅杰
摘 要: 二十一世纪,数字地球、数字城市、物联网、智慧校园不断演绎信息化建设的一个又一个高潮。最近又有一个新的信息化热词闪亮登场,就是大数据。本文阐述了大数据的概念特点和应用,并针对未来大数据发展趋势提出了独到的见解。
关键词:大数据 应用 发展
中图分类号:TP311 文献标识码:A 文章编号:1003-9082(2016)10-0012-01
一、大数据的应用
1.大数据的概念
大数据是规模非常巨大和复杂的数据集,传统数据库管理工具处理起来面临很多问题,如获取、存储、检索、共享、分析和可视化,数据量达到PB、EB和ZB的级别。
2.大数据的特点
2.1数据体量巨大。从TB级别,跃升到ZB级别。
2.2数据处理速度快。高速度的数据I/O,1秒定律,与传统的数据挖掘技术有着本质的不同。
2.3数据类型多样化。包含网络日志、视频、图片、音频、地理位置信息等。
2.4数据价值大。以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。
3.大数据的应用
美国互联网数据中心指出,互联网上的数据每年将增长50%,每两年将翻一番,而目前世界上90%以上的数据是最近几年才产生的。此外,数据又非单纯指人们在互联网上发布的信息,全世界的工业设备、汽车、电表上有着无数的数码传感器,随时测量和传递着有关位置、运动、震动、温度、湿度乃至空气中化学物质的变化,也产生了海量的数据信息。
数据充斥所带来的影响远远超出了企业界。在科学和体育、广告和公共卫生等其他许多领域中,都在朝着数据驱动型 的发现和决策的方向发生转变。在公共卫生、经济发展和经济预测等领域中,“大数据”的预见能力正在被开发中,而且已崭露头角。研究者发现,曾有一次他们发现“流感症状”和“流感治疗”等词汇在谷歌上的搜索查询量增加,而在几个星期以后,到某个地区医院急诊室就诊的流感病人数量就有所增加。
4.大数据的战略意义
大数据技术的战略意义不在于掌握庞大的数据信息民,而在于对这些含有意义的数据进行专业化处理。换言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。
二、大数据的发展
1.大数据对社会的影响
大数据用户行为反映真实需求。简单来说,从各种各样的数据中快速获取有价值的信息能力,即为大数据。大数据时代,软件价值体现在带来的数据规模、流量与活性;公司价值在于其拥有数据的规模、活性以及收集、运用数据的能力,决定公司的核心竞争力。以国家层面看,国家数据主权体现在对数据的占有和控制。数字主权将是继边防、海防、空防之后,另一个大国博弈的空间。
2.国际大数据发展现状
大数据产业已成为全球高科技产业竞争的前沿领域,以美国、日本、欧洲为代表的全球发达国家正在展开以大数据为核心的新一轮信息战略。
2012年3月29日,美国政府启动“Big Data Research and Development Initiative”计划,6个部门拨款2亿美元,争取增加100倍的分析能力从各种语言的文本中抽取信息。
英国政府也宣布投资1.89亿英镑推进大数据和节能计算;法国政府在《数字化路线图》中列出了五项将会大力支持的战略性高新技术,将投入1150万欧元进行支持,而“大数据”就是其中一项。
2013年6月,日本第二次安倍内阁正式公布的新IT战略--“创建最尖端IT国家宣言”。这篇宣言全面阐述了2013至2020年期间以发展开放公共大数据和大数据为核心日本新IT国家战略。至此,全球掀起了一股大数据的浪潮。
3.国内大数据发展趋势
中国有着庞大的人群和应用市场,复杂性高、充满变化,如此庞大的用户群体,构成了世界上最为庞杂、最为繁复的数据。解决这种由大规模数据引起的问题,探索以大数据为基础的解决方案,是中国产为升级、效率提高的重要手段。
IDC发布的《中国大数据技术与服务市场2012-2016年预测与分析》显示,中国大数据技术与服务市场规模将会从2011年的7760美元增长到2016的6.17亿美元,未来5年的复合增长率达51.4%,市场规模增长近7倍。
2012年中国大数据的产值达到120亿美元。随着从事数据的机构和相关企业的增多,今后国内数据采集成本也会降低。比如,基因数据库分析的相关数据,5年前100万美元才可以买到,现在只要1000美元就足够了。
目前来说,我国的大数据开发以及应用还仅仅局限在商业领域中,尤其以百度、阿里巴巴、腾讯、新浪为首的互联网公司为代表。他们可以利用多年来积累的数据优势进行自主开发。
三、大数据时代的机遇与挑战
1.大数据的国家战略
大数据不仅是企业竞争和增长的引擎,而且对于提高发达国家和发展中国家的生产率、创新能力和整体竞争力都有着重要作用。在大数据中心建设上,应将大数据管理上升到国家战略层面,从国家战略层面予以重视。特别要强调以下几点。
第一政府要由责任部门牵头进行专项研究,从国家层面通盘考虑我国大数据发展的战略。
第二大数据从数据生成、信息收集到数据的发布、分析和应用,牵涉各个层面。目前,我国在数据的收集、使用上还存在一定的法律空白和欠缺,为保证大数据中心建设的持续健康发展,应通过立法或立规,妥善处理政府、企业信息公开与公民隐私权利保护之间的矛盾,重点是推动数据公开和加强隐私保护。
第三重视人才培养。在大数据处理环节中,数据人才是能否点燃大数据价值的关键。大数据时代更呼唤创新人才。中国能理解与应用大数据的创新人才更是稀缺资源,这方面的人才缺口更大。
2.大数据的新时代挑战
鉴于数据的复杂性,大数据处理面临着一系列的新时代挑战。比如在类似文本或视频的非结构化数据上,如何去理解及使用;该如何在数据产生时捕获最重要的部分,并实时地将它交付给正确的人;鉴于当下的数据体积和计算能力,该如何储存、分析及理解这些数据;缺乏大数据专业人才;其他一固有的挑战,如隐私、访问安全以及部署等。
总之,我国大数据产业发展需要政府倡导、扶持。政府需要身先士卒,政府才是大数据的最大客户。政府带头,才能带动我国大数据健康快速发展。所以我们应紧跟国际科技新时代,尽快实施大数据国家战略,提前做好准备,才能在这新一轮的大数据之战中处于有利地位,实现经济新增长。