基于大数据环境的云存储技术的应用

侯佳路++胡晓凤++王润华

摘要：

随着网络技术的不断发展，信息交互也越来越强，数据交互在整个世界范围内无时无刻不在发生，人类的信息技术迎来一个大数据的时代，而云计算的出现更是加快了信息的传播速度。云存储是云计算最主要的表现形式，在大数据环境下其作用十分突出。文章分析了大数据及云存储的相关概念，对云存储技术的应用及注意事项做出简单分析。

关键词：大数据；云存储；应用

【中图分类号】TP393.09

大数据是一个非常广泛的定义，无论是计算机还是手机，只要通过网络使用信息、通过网络让数据在世界范围内进行交流，均是大数据时代的存在方法，因此，只要通过网络进行信息交互的用户均是大数据时代的参与者。而基于大数据环境下研究云存储，是以大数据为依托，将云存储技术的优势充分发挥出来，使其更好的服务于大数据。

一、大数据对存储的要求

大数据背景下，非确定数据应用中的海量数据对数据存储系统的要求相对较高。一方面，海量数据需要通过分布式数据组织与管理策略进行组织与管理，因此其数据与数据组织方式要能满足非确定数据应用的要求。另一方面，海量数据是通过一个漫长的、持续增长的积累形成的，因此不仅要求存储支持具有一定的规模性及良好的性能，对其可扩展性也有更高的要求，并要求其具备功能完善的索引机制。大数据环境下，存储技术所面临的是海量的不确定性数据，传统的信息存储结构及对象查询方法的效率越来越低，人们迫切需要通过一种新的元数据组织结构及查询方法提高信息应用效率。在分布式环境中，各个网络结点均有数据源，大大降低了网络的传输性能，而各个数据源具有较强的自治性，再加之数据的非确定性，使得海量非确定性异构数据的集成工作越来越复杂。因此要对数据挖掘引擎的布局、多引擎的调度策略加以调整。

二、云存储概念及分类

云存储是云计算最主要的表现形式，而云计算是分布式处理、并行处理及网格计算发展到一定阶段的产物。其是利用网络把庞大的计算处理程序自动分拆为无数个相对较小的子程序，然后再利用由多部服务器组成的庞大系统对其进行计算、分析，最终再将处理结果发送至各个终端用户。云计算技术大大提高了数据信息的处理效率，可以实现与“超级计算机”相同的网络服务功能。云存储则是指通过集群应用、网格技术或分布式文件系统功能，利用應用软件将网络中大量的、不同类型的存储设备集合起来，通过这些集合在一起的存储设备向用户提供数据存储及业务访问的功能。具体而言，云存储可分为公共云存储、内部云存储及混合云存储。公共云存储是目前应用最为广泛的，比如亚马逊、百度云盘、搜狐企业网盘等均是采用的公共云存储模式，供应商可以保证每个客户在独立、私有的状态下实现信息的存储与应用。公共云存储还可以规划出一部分用于私有云存储，而私有云存储通常部署于企业数据中心或相同地点的设施上。内部云存储与私有云存储比较类似，其与私有云存储最大的区别在于，前者位于企业的防火墙内部，国内联想网盘提供的就是内部云存储服务。混合云存储顾名思义就是结合了公共云存储、私有云存储及内部云存储，根据用户要求的访问，尤其是需要临时配置容量时，从公共云存储中划分出一部分容易，用于配置一种私有或内部云，以帮助客户应对迅速增长的负载波动或高峰。

三、大数据环境下云存储的应用

现阶段云存储的应用主要包括以下几个方面：

（一）视频监控的应用

城市建设与社会的发展使得视频监控技术的应用与发展达到了空前繁荣的程度，而城市视频监控系统所面临的重要问题就是如何处理庞大的高清视频数据：网络带宽不足、存储穿间过大、性能要求越来越高、系统扩容升级存在压力等，均是需要面临的问题，而对PB级的海量网络存储需求，传统的直连式存储与网络存储技术根据无法满足这一要求。而云存储向视频监控系统提供了多种应用接口，用户无需安装任何播放及管理软件，其真正突破了传统存储方式的性能与容量的问题瓶颈，提高了系统性能及容量的线性扩展，使得海量数据的存储成为可能。并且由于不同的监控区域处于不同的地理范围，监控点数据巨大，云存储系统便于分布式管理与随时扩容。

（二）互联网络的应用

云存储技术在互联网中的应用越来越广泛，互联网可以提供一个有效的存储媒介，供用户进行交流，通过媒介获取丰富的相关信息资源，提高资源的利用率。随着移动互联网及移动终端的快速发展，用户的同步与分享需求日益强烈，互联网公司也将云存储技术的研发与应用作为自身的生果发展内容，并将互联网产品中需要存储的个人信息与云存储应用绑定，大大提高了信息处理速度。云存储平台与各类消费电子产品实现了互联互通，各种形式的数据信息开始实现跨越时间与穿间的自由流通，为各个社交网络用户提供更为丰富的交流元素。

（三）其它应用

其它应用包括视频编辑应用及家庭网络应用等。云存储技术可以实现不同设备的协同合作，通过虚拟化的管理技术大大简化了视频数据管理的流程，提高整个系统的开拓性与敏捷性。云存储系统对存储设备进行虚拟化管理，实现视频数据与物理存储位置的无关性，视频数据可跨地域存储与调用。家庭网络应用主要是实现家庭媒体文件的上传与在线播放，通过云存储访问代理与云存储平台的交互，实现家庭内多终端间的多媒体资源共享与多屏互动等，优化用户的感知。

总之，云存储不仅是存储，更多的是应用，随着云存储安全性、可靠性、实用性的不断提升，云存储必将在各个行业广泛应用，成为未来数据存储的主要发展趋势。

参考文献：

[1]李国杰，程学旗.大数据研究：未来科技及经济社会发展的重大战略领域——大数据的研究现状与科学思考[J].中国科学院院刊，2014，02（15）：129-130.

[2]文必龙，宗文栋.海量并行处理系统的大数据读写接口优化研究[J].郑州轻工业学院学报（自然科学版），2013，04（19）：105-106.

[3]何鹏.移动互联网时代的企业信息聚合——从大数据的实践到云计算的应用[J].互联网天地，2013，12（20）：206-207.

[4]景亚君，张永生，项文新.电子文件中心、电子文件备份中心和电子政务灾备中心辨析[J].办公自动化，2011，05（25）：206-207.

[5]陈力，郝守真，王志庚.网络信息资源的采集与保存——国家图书馆的WICP和ODBN项目介绍[J].国家图书馆学刊，2013，03（25）：154-155