大数据及相关技术解读分析

周北一



大数据及相关技术解读分析

周北一

摘 要大数据是随着信息的急剧膨胀而提出的一种概念，目前大数据技术在世界经济、军事、信息传播等领域有了广泛的应用，而这种应用所带来的网络革命效应也越来越多的引起人们的重视。提供大数据服务的企业要积极推广大数据技术的应用模式，开发大数据中的数据安全保密技术，为大数据的长远发展做出贡献。

关键词大数据 技术 解读分析

随着计算机信息化的建设，互联网中的数据量呈现出爆炸式的增长，大数据正是随着信息的急剧膨胀而提出的一种概念。目前大数据技术在世界经济、军事、信息传播等领域有了广泛的应用，而这种应用所带来的网络革命效应也越来越引起人们的重视。本文将对大数据概念进行阐述，讨论大数据与CDN、IDC、云计算之间的关系，对大数据技术未来的发展前景和应用范围进行分析，希望对大数据技术更好地发展和应用提供帮助。

一、大数据概述

大数据技术的发展时间比较短，目前在学术界定上没有一个清晰统一的定义。总体来说，大数据指的是一种数据集合，这种数据集合由于信息资料的规模过于庞大，在一定的时间内，应用目前的信息收集和管理软件不能够做到对数据的收集、分析、处理工作。大数据在广义层面上，可以分为大数据技术、大数据工程和科学等。其中，大数据工程通过对大数据进行分析，建立对数据进行管理的工程；而大数据科学，则是指在大数据发展的过程中，对大数据的发现和研究活动。大数据技术就是指通过科学的分析和合理的规划，从庞大的数据库中获得所需要信息的技术。通过研究发现大数据主要具有下面的特点：

（一）数据信息规模巨大

数据信息规模巨大是大数据最基本也是最重要的特点。目前，互联网技术得到了巨大的发展，使用互联网技术进行数据查询的主体也单纯从机构查询，发展为个人、企业、机构等共同查询的方式。用户在使用互联过程中，进行无意的点击，对于一些信息的分享等都成了大数据庞大信息规模的一部分。现在大数据的数据单位已经上升到了PB的级别。

（二）数据的类型复杂

大数据庞大的数据规模中，数据类型非常复杂。既包括传统的一些基本数据，也包括网页、文档等新式数据；既包括比较完整加工后的数据，也包括加工未完成的数据。

（三）数据的传播速率较快

大数据的传播速率过快，这也是造成传统软件对于大数据难以处理的一个原因。有时大数据的处理结果需要在一瞬间就形成，否则形成的结果就失去了使用价值，这对于传统软件来说是很难达到的，所以大数据对于处理的时效性有很高的要求。

（四）数据间的价值密度较低

一般情况下，大数据的规模在巨量增长的时候，用户需要的信息数据规模却增长缓慢，这在一定程度上加大了获取数据的难度，造成了数据间价值密度较低的特点。

二、大数据技术介绍

大数据技术的前身是商务智能（BI），主要的技术环节包括：数据的收集、数据的处理、数据的计算、数据的研究以及数据结果的表现。其中，大数据的收集工作主要在互联网、当地数据库等展开；在数据分析方面，主要基于人工软件智能进行进一步的研究；在数据表现方面，通过多媒体技术与相关的网页技术相结合，通过图像的形式进行展现。

三、大数据、CDN、IDC和云计算之间的关系

（一）大数据与云计算之间的关系

云计算和大数据之间的关联性比较强。云计算指的是以巨量的数据作为基础，通过对巨量的数据进行研究，在巨大的数据规模中寻找需要的信息数据。云计算的英文简称为Cloud Computing，它的计算方法主要依托互联网进行。一般情况下，对浏览器等软件进行访问，就可以访问到云计算的经营商提供的网络应用，这些应用中的数据信息都存储在网络数据库中。云计算的服务类型主要包括：软件即时服务类型、平台即时服务类型以及基建即时服务类型。总体来说，云计算主要就是应用虚拟化的技术，以互联网为依托，通过对巨量的数据规模进行整合、分析、计算，从而取得需要信息的一种及时计算服务。云计算的特点是虚拟化程度较高，适用人群较广，计算结果准确性较高。云计算的这些特点促使云计算在大数据中有着广泛的应用。同时，云计算和大数据技术也有着一定的不同。大数据更加看重的是对于数据的存储能力，而云计算则强调的是计算，通过计算来获取有效数据的处理能力。

（二）大数据与CDN之间的关系

CDN的英文全称为CONTENT DELIVERY NETWORK，通过CDN的使用可以加快数据传播的速度，确保数据传播的稳定性。CDN的工作原理是通过设置其他地方的结点服务器，以互联网为依托，构建出一层智能网络，通过网络结点中传递的数据和流量，促使客户的数据请求流向最近的服务节点，进而进行数据的收集、查询等工作。由于互联网在实际应用中会出现通读的现象，通过CDN技术的应用，可以有效解决网络堵塞问题，提高互联网的访问速度。

（三）大数据与IDC之间的关系

IDC的英文简称为INTERNET DATA CENTER，中文意思为网络数据中心。IDC是以互联网为媒介，通过集中形式数据汇总、管理、处置和发送数据的相关设备，来为数据的维护提供运行基地，并附带提供配套的服务。IDC的服务对象主要是企业、传媒机构、网站等，并为它们提供高质量的专业化服务。IDC可以提高网络站点的性能，提高访问的响应能力，同时通过对网络服务器的有效利用，确保网络数据传播的安全性和时效性。

（四）大数据与三者之间关系的总结

大数据与CDN、IDC以及云计算之间的关系有着很强的关联性。首先，它们的产生都是由于互联网技术的大力发展，数据处理规模的急剧增加，数据的收集都来自互联网上的信息，可以说，互联网是它们信息传递的桥梁。其次，后三者的存在对于大数据是很好的补充，通过不同角度对数据的收集和整理，实现信息的有效处理。总体来说，大数据信息的有效存储为后三者提供的对于数据的有效计算和处理提供了平台，同时，大数据通过与三者的有机结合，可以更好地进行数据的挖掘和处理，从而及时地提供所需要的信息。

四、大数据技术的发展与应用

随着信息网络技术发展力度的加大，大数据技术在如今的许多方面有了更广泛的应用。大数据技术以前主要在互联网科技公司中进行使用，但现在无论是传统的公司企业、公共机构还是新兴的具有高技术性质的企业单位，对于大规模数据的处理需求越来越大。同时大数据以往的应用主要在企业智能和商务营销方面，但现在它的应用范围越来越广，例如社会科学、经济学等方面都有了广泛的应用。

信息化的大力发展，促进了大数据时代的到来。由于大数据技术的使用可以有效促进公司智能化的发展、提升信息数据的安全性，所以，可以预见，未来大数据的发展前景是极其光明和宽广的。大数据的产业结构可以发展成为三个主要领域：分别是硬件为基础的商业领域；基础软件的商业领域以及应用软件的商业领域。

五、结束语

大数据的发展规模不断壮大，相应的对数据进行收集分析，确保数据安全等方面的人才缺口也会非常大，而相关人才的缺失将会对大数据的发展带来非常不利的影响。提供大数据服务的企业要重视人才短缺的问题，积极推广大数据技术的应用模式，开发大数据中的数据安全保密技术，为大数据的长远发展做出贡献。

参考文献

［1］ 王妍，柴剑平.大数据及相关技术解读［J］.广播电视信息，2014（02）：18-21+24.

作者单位（为北京浩瀚深度信息技术股份有限公司）