秦明旭 鞠轶 王冰 涂强 辽宁省重要技术创新与研发基地建设工程中心
大数据时代的来临,为社会中的许多行业带来了变革,让社会各领域拥有了广阔的发展空间。近年来,科学技术的不断进步也为大数据带来了新的发展前景,我们应不断提高大数据在各行业中的应用效率,最大程度的发挥出大数据的功能和作用。
大数据是指在一定时间内,通过多种手段方法收集信息资料并对相应的资料进行整合分析,以方便客户使用,同时大数据也要保证提供数据资料的精准性。可以说大数据,改变了社会各行各业的工作形式,并提高了工作效率。信息量较大大和复杂程度较高是大数据的主要特点,并且还具备多种应用优势。
20 世纪五六十年代至21 世纪初的期间内提出了大数据概念,在这一时期的大数据主要代表的是“数据体量”,但在之后相当长的一段时间内,由于受到科学技术和IT 产业发展能力的限制,并且信息资源产业也处于初级发展阶段,从而让大数据概念没有被真正重视,也没有在社会中得到普及。
大数据概念得到初步发展的阶段是在2004—2011 年之间。在2004 年左右,美国一家科技公司谷歌相继发表了三篇具有重要价值的论文,引起了业界的广泛重视,被公认为促进大数据科学发展的重要基石,也被叫作“三驾马车”。到目前为止,许多先进的大数据技术都是以这三篇论文为基础发展起来的。2006 年,Doug Cutting 通过不懈努力,Hadoop 的研发工作终于取得重大突破,取得研发工作的胜利,并普遍应用与大数据的处理工作中。此后的几年时间里,许多信息应用和研发机构,比如Facebook 和Spark UC 等,成功研制出了大量的具有一定特色的技术,同时还推出了与之相关的产品,从而促进了大数据的科学健康发展。2008 年前后,云计算和物联网技术得到了大力推行并取得快速发展,在这种环境下诞生了巨量的信息数据资料而社会中各个行业对大数据技术的需求也逐渐增高[1]。2010 年左右,许多传统的信息技术领域的企业也加强了对大数据产业的重视,比如IBM 和微软等企业已经开始将大数据产业布局提升到战略地位,与新兴的信息科技公司,如谷歌和亚马逊等展开激烈竞争。后来,时代经历了重大变革,各种新型科学技术也层出不穷,为大数据的发展带来了重大机遇,开始走上历史舞台,并发挥出了十分重要的作用。
当进入2012 年,大数据快速发展阶段就拉开了帷幕。众所周知,从全世界范围来说,美国在大数据技术和应用方面遥遥领先。美国开展大数据研究工作的主要目的是从大量数字数据中将需要的数据和知识成功提取出来,为大数据革命带来了重大机遇。2012 年7 月,日本政府制定了大数据研究和发展的综合战略,将大数据应用作为重点研究内容。紧接着在2013 年提出了一项重要宣言,主要表达了日本大力发展开放公共数据技术的决心。2013 年1 月,英国政府加大了在大数据技术研究和应用领域中的投资力度,大数据技术在伦敦金融服务领域得到应用。我国政府对大数据的重视程度也越来越高,2012 年12 月,国家发改委在专项指南中加入了数据分析软件开发和服务方面的内容,2013 年初科技部加大了对大数据计算领域的深入研究,展开了对大数据的计算能力和处理效率等方面的研究,为我国大数据科学体系的成功建立奠定了坚实基础。同时,各级地方政府对大数据的重视程度也越来越高,相继出台诸多政策来扶持本地大数据技术产业的快速发展。
如今,大数据的战略价值引起了世界上许多国家的关注,各国也都制定了关于大数据配套规划的法律法规,这有利于大数据技术的不断创新和发展。例如,美国在国家战略方面融入了大数据技术的应用研究,在国防、能源、航空航天和地质勘查等多个重要行业中应用了大数据技术,这样做的目的是应用大数据来促进这些领域的快速发展。日本的许多企业也积极开展与大数据相关的业务。
目前,大数据受到了我国政府、学术研究和产业界的重视,并且得到了广泛应用。从政府层面来讲,很多的政府工作报告中加入了大数据提供的相关内容,这样的数据更准确,更直观。在政府的支持下,我国大数据产业取得了迅猛发展。在之后的时间里我国颁发了《中华人民共和国国民经济和社会发展第十三个五年(2016-2020 年)规划纲要》,将大数据上升到战略层面,把大数据看作战略基础资源,并不断推动大数据健康稳定发展,注重各种数据资源的共享,提高大数据信息的应用效率。这些措施的都为大数据发展起到饿了保驾护航的作用。从学术研究层面来讲,大数据发展起来之后,我国的大数据研究机构和学术组织如雨后春笋般建立发展起来,例如中国通信学会和计算机学会共同成立了大数据专家委员会,教育部在人民大学成立了“大数据分析和管理国际研究中心”,“大数据研究中心”也在国家信息中心、电子科技大学和北京大数据研究院的共同合作中成立。从产业层面来讲,大数据是在政府和企业的共同推动下得到发展和进步,例如贵阳市政府联合阿里巴巴成立的贵州大数据安全工程研究中心,这里聚集众多知名大数据安全企业,为大数据安全产业发展积累经验。此外,我国的数据信息数量十分巨大,能够为大数据产业的发展和创新提供动力支持。
大数据随着时代的发展而发展,对于国家和社会的发展具有十分重要的作用。当前阶段,在我国社会经济和科学技术的支持下,大数据研究获得了十分显著的成果,我们应紧跟时代发展潮流,加强对大数据的重视,不断提升大数据在社会各个行业中的应用效率。