网络大数据的现状及展望

董俊伶



网络大数据的现状及展望

董俊伶

国网新疆电力公司科技信通部，新疆 乌鲁木齐 830000

网络大数据时代越来越高要求着IT构架与计算机能力，当然网络大数据的发展也带给人们深入挖掘其价值功能更严峻的挑战和巨大的机遇，同时这就表明加强对大数据的研究，概括其发展规律等将极具现实意义。因此，在分析网络大数据发展现状的基础上，展望其未来发展前景。

网络大数据；发展现状；基本概述

1 网络大数据发展现状

近年来，云计算、互联网等IT技术和通信技术的进一步发展，数据增长速度的加剧带给各行各业更多机遇和挑战，促进着信息社会向大数据时代（Big Data）发展，而这种发展趋势改变了人们生活工作的方式与企业运作模式，更从根本上改变了科学研究模式。

1.1 网络大数据概述

所谓大数据，即数据集合，其在一定时间内无法利用常规软硬件工具或机械实现感知获取等操作。而网络大数据简称网络数据，指的是在Cyberspace（网络空间）内彼此交互融合的三元世界（人、机、物）所产生且能够获取的互联网大数据。目前，随着网络数据复杂程度和规模的增加扩大，促使现行IT架构处理计算能力面临着严峻的考验。据IDC公司2015年公布的数据显示全球数据量储存达到了7910ZB，同时在大数据摩尔定律，即全球数据量约每两年翻一番的背景下，这个发展速度将延续到2020年。IBM则概括出大数据3个V的特点，包括Volume（大量化）、Variety（多样化）和Velocity（快速化）。

1.2 网络大数据发展现状

网络空间数据体量的扩展，数据集合规模也由GB、TB发展到PB，特别是网络大数据计数单位更发展到EB、ZB（1021）等。据IDC研究报告中表明，全球大数据在今后10年内或将增长约50倍，管理数据库的服务器数量也将随之增长至少10倍左右。而且随着网络大数据的发展，其类型也不断突破，现阶段包括结构化、半结构化和非结构化三种数据。据调查显示现代互联网应用中，整个互联网数据量中非结构化数据所占比例高达约75%，同时这些数据往往是伴随新技术的涌现应用而产生的。[1]

目前，世界各国均将网络大数据当作重要战略资源。特别是一些发达国家更将其战略纳入国家战略，为了推动其相关产业更进一步发展，发达国家甚至不惜为其大量投资，其重视程度堪比石油资源。这也表明国家数据运用能力及拥有规模是组成综合国力的重要部分，对其的占有控制权更是国家核心权力之一。数据与土地、资本、人力同为生产中最关键的要素。因此，面对网络大数据关键词在全球范围内极速升温的现状，这就必须保证网络大数据研究内容及层次的全面性。

2 网络大数据的展望

2.1 全新数据计算模式

网络大数据自身的特性使其无法适应传统数据分析、挖掘和处理的模式。故而，在这一背景下就必须采取数据密集型计算模式和新型计算范式，加强对数据计算效率评估方法等基本理论的应用。鉴于数据拥有较大体量，再加上其存在形式多为分布式，因此无法进行集中处理，而需要运用去中心化的自下向上计算模式，而避免从中心化的自上向下模式。此外，网络大数据源自不同的网络用户，由于受到人为因素影响存在极大的随机性，极易增高增多数据噪声和冗余甚至垃圾数据。为此，这就需要采取举要删芜、删繁就简的处理范式，或是寻求类似数据体量结合简单逻辑的方式解决复杂问题。[2]

2.2 新型IT基础架构

网络大数据诞生至今对系统的要求越来越严格，包括如计算机系统和存储传输系统等，简言之即现行数据中心技术无法满足其需求。为此，革命性的重构整个IT基础架构尤为迫切。但鉴于当前数据增长远超存储能力增长，故而还需采取分层存储架构才能满足scale-up式与scale-out式的可扩展性，这也是IT系统最关键的部分。随着网络大数据时代的来临，IT系统要改变既往数据围绕处理器工作的模式，坚持处理能力围绕数据操作的形式，避免将数据推送给计算，做到推送计算给数据。同时，在网络大数据高速传输的背景下，网络大数据计算、传输、存储等平台技术必须进行革命性的创新。[3]

2.3 安全与隐私问题

数据是一种有价值的资源，而由于存在价值也就增加了争夺侵害的概率。无论是那种数据都会面临安全与隐私问题。特别是在数据不断增多的网络大数据时代，其面临的风险威胁更大，必须严格遵守相关规范标准，这也就提出了革新传统数据保护法的要求。当前网络大数据隐私保护需要解决的问题包括：数据密码学与计算伦理学、强制与多粒度访问控制、数据存储与日志管理的安全性、分析挖掘基于商业利益和隐私保护的数据及安全通信等。

2.4 以人为本的发展趋势

网络大数据与以人为本理念相结合，也是其将来发展的趋势之一。由于信息科技时代竞争的主体是人，这就需要契合人的思想需要进行不断的持续发展。大数据时代要实现科学探索和决策，必须基于数据分析的基础上。然而，数据分析从本质来说与人类思维活动不同，因此大数据的发展以人类思维意识为推助力。同时随着互联网IT通信技术的进一步提高，在大数据时代发展历程中人们开始担当不同的角色，不但是其使用者、生产者更是参与者，促进着人类与数据的双边互动合作。由此可见，网络大数据将来的发展趋势必定是与以人为本理念的应用相结合。

3 结语

通过对当前网络大数据发展现状分析不难看出，新时代大数据虽然面临着良好的发展机遇，但同时也面临着更加严峻的挑战，必须进一步增强其发展，不断扩大网络大数据规模。只有更深入地研究网络大数据，并高效有序地利用大数据，才能真正为我国经济发展助力，促进社会稳定持续的发展，从而有效增强国家综合竞争力，达到保卫我国网络空间数字主权，推动国家经济核心产业和战略新兴行业发展崛起的目的。

[1]范媛媛.网络大数据的现状与展望[J].数字技术与应用，2015（12）：246-246.

[2]赵淑芳.浅谈大数据应用现状及发展趋势[J].商，2015（36）：223-223.

[3]廖建新.大数据技术的应用现状与展望[J].电信科学，2015，31（7）：1-12.

The present situation and Prospect of large data network

Dong Junling

Xinjiang electric power company of Ministry of science and technology communication，Urumqi Xinjiang 830000

Network era of big data has higher and higher requirements on it infrastructure and computer ability, of course, the development of network data also bring people dig its value function is more severe challenges and enormous opportunities. At the same time, it shows that strengthen the data research, this paper generalizes its law of development will be of great practical significance. Therefore, this paper will be based on the analysis of the status quo of the development of large data network, and prospects its future development prospects.

network big data; development status; basic overview

TP311.13

A

1009-6434(2016)6-0141-02