云计算技术在计算机大数据分析中的应用探析

李寿清

（四川工商学院，四川 成都 611745）

0 引 言

云计算技术在大数据系统中既可以提高数据的运行效率，又可以减少运作与维护的支出，在未来必定会成为兼具广泛性与基础性的一种数据处理技术，同时能够有效解决广大用户在海量数据运算处理和资源储存上的问题，不断提升互联网及平台的服务水平。现代社会已经进入信息化发展的新时代，在研究维度和商业维度，数据均起到了关键作用。在科技的快速发展下，现代化储存技术持续兴起，大众需要从海量的复杂化数据中挖掘所需的信息。因此，必须对大数据技术与云计算技术展开进一步的研究，以此强化甄别数据的能力。

1 相关概述

1.1 云计算技术

大数据本身并不能产生价值，只有拥有了大规模的数据处理能力，并对其进行计算、挖掘和分析，将数据提炼成有用的信息，才能创造价值。云计算是一种基于互联网的计算方式，是并行计算、网络存储、虚拟化等传统计算机和网络技术发展融合的产物。云计算技术能够通过网络以便捷的、所需的方式进入可配置的计算资源共享池（包括网络、服务器、存储、应用和服务等），并提高其可用性。云计算技术可以有效整合网络资源，搭建处理大数据的计算平台，高效、低成本地对大数据进行存储与挖掘。大数据是生产资料，云计算技术是加工大数据的手段和平台，两者密不可分。本质上，智慧城市建设是从海量数据中挖掘城市运行所需的价值信息，并及时对各类业务场景给予“智慧化”的响应。智慧城市作为一个由多应用、多行业、复杂系统组成的综合体，要从根本上支撑智慧城市庞大系统的高效、安全运行，必须考虑基于云计算的网络架构。基于资源共享池的云计算能够有效整合计算资源，处理更大规模的数据，并且能够对数据进行深度挖掘，从而为政府决策、企业发展以及公众服务提供更强大的支撑。因此，云计算技术和大数据已经成为智慧城市建设的重要基石[1-3]。

1.2 大数据技术

1.2.1 大数据的发展历程

在牛津英语辞典记载中，“大数据”这一专业术语在1941 被首次使用。它的前身Hadoop 最初由雅虎公司创建，创建的目的是解决网页搜索。此后，由于Hadoop 强大的技术含量，被Apache Software Foundation 公司引进用于开源应用程序。网络爱好者通过开源应用可以修改并分享一些大数据。Hadoop自身不是一个独立的产品，是由许多软件共同组成的生态系统的一部分。这些软件的出现实现了网络数据信息的全面功能化，使得人们通过软件对数据信息进行灵活和详细的分析与筛选。

用来储存大量数据的Hadoop 分布式文件系统（Hadoop Distributed File System，HDFS）和MapReduce技术的高性能并行数据处理系统共同组成了Hadoop的构架。Hadoop 的构架、分布式文件系统以及分布式程序设计是大数据技术的核心程序。计算机运用这些技术可以将一个复杂化的数据结构进行快速、可靠的分析并基础化。2015 年，美国正式发布了关于促进大数据发展行动的纲要。随着计算机科研人员的不断精心设计和多方协调，大数据技术不断走向成熟，逐渐形成了安全性、高效性、平稳性强且以人为本的服务大众的数据信息项目。2016 年，大数据在技术信息含量和信息处理技术上给予了充分的肯定，我国计算机数据研究工作者对大数据进行了进一步的修改和研发，逐渐将大数据应用在工业、制作业、军事以及医疗等各项产业，建立了跨行业计算机大数据网络[4-6]。

1.2.2 大数据的定义

大数据一般指的是在一定时限内不能利用常规工具采集、处理、管理其相关内容的数据集合。大数据通常包含以下特点：一是具有大量的数据，超过PB 级；二是具有丰富的数据类型，如音频、视频、图片以及文本等；三是具有很快的处理速度，应遵照一秒定律，可在不同类型数据中快速取得相关信息数据并进行归纳处理；四是具有很低的价值密度，在大量的数据中，有用的数据所占比例较少。

1.3 云计算技术与计算机大数据的关系

从技术视域来看，云计算与大数据息息相关。一台单独的计算机难以有效处理大数据，必须要利用分布式结构处理海量的数据。由此可见，若想实现数据在云计算中的应用，云计算需要进行实时分布式处理。大数据计算模式在云计算技术下出现了很大的改变，能够通过网络为不同的用户提供动态化、虚拟化的数据资源。云计算资源基于用户需要进行数据处理，帮助用户完成对网络资源的有效浏览，大幅提高网络资源的应用率。

2 大数据技术应用的不足

随着我国迈入“互联网+”时代，数据支持已成为智慧城市建设的基础。在大量数据信息条件下，大数据的实用性、真实性、安全隐私等相关因素成为影响城市发展的重要瓶颈。社会大众在采集并应用信息数据时，不局限于按照个人的喜好进行推动。在不断的发展中，大数据已从个人、企业上升到社会层面。有效提高整体产业的专业能力与综合素质是大数据高速发展进步的基础条件。此外，大数据行业中的专业人才不足已成为影响企业发展的重要问题。大数据人才不仅涉及计算机人才，而且涉及数学、统计学、理化等复合型人才。人才的断档不能有效弥补，未来大数据的发展将面临严峻的挑战，影响智慧城市的建设。

3 计算机网络安全现状

随着网络技术的不断进步，虽然网速明显提升，但也使计算机网络安全面临着越来越严峻的挑战。首先，网络攻击种类不断增多，攻击面越来越广。随着黑客技术的不断进步，网络攻击手段不断升级，如钓鱼攻击、勒索软件攻击、分布式拒绝服务（Distributed Denial of Service，DDoS）攻击、零日漏洞利用攻击以及人工智能黑客攻击等，给网络安全带来了巨大的挑战。随着物联网、云计算、大数据等技术的发展，网络连接的设备数量和种类不断增加，网络攻击面也越来越广。其次，病毒传播速度更快。由于技术的进步，数据传输速度更快，使网络中的病毒和恶意软件也能够更快地传播和扩散，给用户的信息安全和网络安全带来更大的威胁。最后，网络安全意识不足。使用者缺乏网络安全知识，容易受到网络攻击，如通过弱密码登录、接收垃圾邮件等方式，使网络攻击者能够轻松获取用户的个人信息，降低了网络安全系数。

4 云计算技术在计算机大数据分析中的应用分析

4.1 应用于营销领域

大数据分析以及云计算技术的充分融合促进了个性化营销等行业的发展。新时代，人们对于信息资源越来越重视。云计算技术在营销领域的应用，能够为客户关系管理和维护带来较大的便捷性。尤其是近年来，各种电商平台的出现，可以实时掌握消费者的消费意向，将购买动机转化为购买行为。系统会根据消费者的信息进行综合分析评估，自动记录，保留消费者的浏览足迹，包括浏览点击量、页面信息、时间长短等内容，综合分析用户的购买行为以及现状，根据相应的内容为消费者预测信息，提供相应的推送产品以及内容。在营销领域运用过程中，虽然客户会察觉到App 推送自己搜索过的产品，但不会泄露用户的基本信息，还能为用户推送感兴趣的产品，实现客户资源的有效应用。系统平台还会针对不同类型的客户消费意向以及客户数据采用针对性的统计分析构建消费数据库，充分挖掘有价值、有规律的信息，为商家营销提供决策支持。

4.2 应用于虚拟资源调度

计算机用户比较重视数据资源传输过程的安全性，充分利用云计算网络技术对安全模式进行创新。大数据技术全面采集各种信息资源，能够对资源进行储存管理。信息化的资源调度过程能够保证资源分配和储存的合理性。随着时代的发展，借助大数据分析以及计算机网络技术，能够监控数据传输的整个全过程，保证数据传输的通道安全性，建立资源优化技术体系，对虚拟技术进行数据处理，合理划分虚拟资源，完善计算机应用以及技术服务体系，杜绝发生网络安全问题。

4.3 在政务服务领域中的应用

一方面，采用云计算技术能够实现政务服务的智能化和移动化管理，有利于促进“掌上政务”创新，简化政务服务流程，打破政务服务各个业务系统之间的数据壁垒，将政务服务结为“一张网”，整合传统的业务办理窗口功能，统一由服务台受理，之后进行分类，下发给对接部门，简化业务办理流程，尽可能实现政务服务的一次性办理、全网通办、100%网上申报，提高政务服务事项的审批速度和服务质量，构建和完善居民自主自助服务体系，通过多终端、多渠道随时为广大人民群众提供自动化的服务咨询、业务办理、投诉申报等政务服务。另一方面，采用云计算技术能够使政府各个部门之间实现政务服务信息资源的实时共享，有利于提高政府数据开发利用效率和办事效率，促进政府和广大人民群众更好地进行互动。广大人民群众也能更好地辅助和监督政府开展社会管理，解决实质性问题。

5 云计算技术在计算机大数据分析中的应用建议分析

5.1 加强计算机数据的存储及筛选力度

在大数据时代，海量数据间存在某种联系，与用户和企业的实际需要紧密相关，但并非全部都有实用价值。因此，对这些关键信息进行准确过滤和存储，对于用户和企业都具有意义。计算机工作人员根据时代特征与企业的实际需要，将大量的数据进行有机整合，并通过智能技术筛选出具有较高应用价值的数据供用户或企业使用，从而更好地利用这些数据降低垃圾信息的数量。在加强计算机数据存储和筛选方面，必须大力发展数据挖掘和云计算技术。数据挖掘技术利用现代的数据处理技术，对海量、复杂的数据进行进一步处理，充分挖掘数据之间的内在联系，然后利用计算机技术将数据灵活地运用到用户和公司。在数据挖掘技术的支撑下，计算机资料的存储和传送更加有效，符合员工和公司的实际需要。云计算不但可以处理资料，还可以存储计算机资料，对于资料的筛选有很大的帮助。

5.2 计算机硬件性能和质量建设

随着信息技术的飞速发展，计算机数据存储和传输技术的发展离不开计算机硬件性能与质量的提高。计算机的硬件故障通常表现为早期故障、中期故障以及晚期故障。因此，计算机专业人员要强化计算机硬件性能和质量建设，可以从2 个方面着手。一是计算机网络的优化。当前计算机软件和硬件质量与国际上的应用标准存在差距，对计算机技术的发展非常不利。为了使计算机网络达到最佳化，必须大力发展计算机网络，提高计算机硬件性能和质量。二是要加强计算机软件和硬件质量建设的协同合作。在大数据时代，资讯存储及传输技术的发展要求各方面共同努力，大力发展资讯处理技术。目前，计算机工业的发展特点及时代的变化让很多企业承担着资讯科技的研发工作，为大数据时代计算机数据存储与传输提供了必要的支持与保障。

6 结 论

当前科学技术迅速发展，大数据技术以及互联网技术得到了广泛应用，给人们的工作生活带来了较大的便利。大数据以及云计算属于新兴的领域，必须要完善相应的技术，明确安全风险处理，推动我国社会各项工作的发展创新。企业在进行技术应用时，要深化数据分析技术和云计算网络技术的优势，消除大数据分析和计算网络技术带来的风险，加快专业人才的培养，更好地发挥其价值，提高数据处理效率及指标，满足企业的新时代发展要求。