大数据管理：概念、技术与挑战

武非 河南省郑州市第十一中学

大数据管理：概念、技术与挑战

武非 河南省郑州市第十一中学

所谓大数据，具体来说是指将不同数据汇集，从而形成数量极大的数据组，从本质属性分析和计算机之间的关系极为密切，特别是随着互联网技术的快速发展，促使大数据时代的到来，这不仅提升人民生活水平，带动消费，还在某种程度上缓解就业压力。文章中简要分析了目前大数据时代大数据管理的相关内容，以促进大数据管理获得良好的效果。

大数据 概念 技术 挑战

现阶段社会发展可谓是日新月异，这与科技创新有着密切的关联，促使人与人之间的交流不断强化，这些都需要大数据的有效管理才能最终实现，对于数据进行有效的分析整理，能够帮助企业掌握市场销售规律，满足大众不同的消费需求，以消费拉动经济增长，本文中简要分析了大数据时代到来如何强化大数据管理，从而促使大数据管理能够真正体现价值性。

一、大数据基本概念阐述

针对大数据本身来说，其并不属于具体概念，从本质层面分析，数据规模相对较大，根据最新的研究定义，所谓大数据，其实质上是指规模较大的数据，以至于传统软件工具并不能对其进行采集，也无法进行存储与管理。而从另一个角度分析，大数据还可以是借助现有理论与方法，加之技术与工具，都无法实现短时间数据分析计算，更无法谈得上复杂数据集合。大数据时代的到来给我们的生活带来极大的改变，也对社会经济的发展起到极大的促进作用。

二、大数据关键技术分析

大数据技术的应用在某种程度上能够对大数据进行有效的整理，并且是从不同数据中快速获取有效信息，目前大数据技术种类多样，这使得大数据的收集、存储、处理，再到呈现都更加便捷。通常来说，大数据关键技术主要包含以下几个方面：首先，收集技术。所谓大数据收集，主要是通过大数据智能感知层，对其进行数据的智能化识别，并进行定位、跟踪，再进行连接与传输，而针对基础支持层，其作用在于为数据给予所需虚拟服务器，还有数据库，以及网络资源等等。在这一过程中，则需要优化数据网络传输，完善信息压缩技术，并且还能做好数据隐私保护。其次，大数据处理技术。针对上述环节中所获取的数据，实施抽取与清洗。对大数据抽取具有重要意义，能够最大限度大数据繁杂的弊端，解决种类繁多弊端，从而能够让繁杂的数据逐渐单一化，并且能够快速分解，处理相关信息；而清洗的目的则非常明确，就是将大数据中无用的数据进行处理，或是筛出错误的信息，这样让数据的提取更有效。最后，存储挖掘技术。对大数据进行有效的存储，并且形成特定的数据库，这样能够便于管理与使用。数据库种类繁多，具体来说主要有：键值、文档及图存等等，此外还需要突破以下技术：数控鉴别真伪、隐私保护、数据完整验证等等。而对于数据挖掘来说，能够让人获得直观的感受，提高效率，这样才能让专家获取精准的推测，对于现实生活具有极大的促进作用。

三、大数据面临的挑战

（一）国家重视度较低

大数据管理对我国经济发展起到极大的促进作用，然而其在发展过程中重视度相对较低，大数据的发展是为了更好的发展国民经济，满足时代需求。但是从目前情况分析，大数据在我国并未受到极高的关注度，针对部分重要信息利用率相对较低，特别是相关部门，他们基本上就是各自为营，不能进行信息沟通与共享，从某种程度来说，在信息收集方面存在不健全的情况，同时还存在重复性及缺乏时效性。而对于国外相关企业来说，他们彼此相互信任、互利共赢，并且进行适当的资源共享，相较于我国大数据管理具有绝对的优势。这就需要我国政府部门做好相应的宏观调控，完善相关体制建设，关注信息公开化，从而防止数据分裂形式的产生，并且要求其构建信息网，提升社会服务水平，优化社会服务能力。

（二）缺乏创新型人才

大数据时代的到来促使创新型人才出现缺失情况，而且相关体制建设存在不健全的情况。从人口分布情况分析，我国属于世界人口大国，但是对于大数据应用人才而言缺乏，这就需要针对于此提出积极有效的人才队伍建设，从而打破理论型人才的垄断，逐步向实践型人才靠拢，这样才能将所学知识应用到实践。现阶段网络暴露的弊端越来越显著，特别是安全性问题日益突出，所以国家相关法律法规也在不断完善，改革也势在必行，这样才能防止数据信息流失，被滥用，或是被恶意篡改，避免被不法分子窃取，还能最大限度保障客户信息的安全性，避免私人信息泄露带来的不便，保障大众个人信息安全，同时也能保障信息的安全。

（三）数据管理安全性

在大数据时代，数据管理的安全性是非常重要的任务，现阶段数据安全威胁非常常见，基本随时可以发生，信息网承担着极为重要的职责，一旦出现不法分子破坏，应当引起警觉，这样才能减少对国家发展安全威胁，这期间需要严格关注大数据空气气囊，由此判别大数据的安全是否受到威胁，以便采取相应的措施避免数据管理的安全性受到威胁。

四、结语

总体来说，大数据时代的到来对国民经济的发展起到一定的促进作用，并且能够优化人民的生活状态，改善生活质量，提升大众的生活水平。文章简要阐述了大数据的基本概念，分析了大数据管理涉及到的关键技术，并且重点剖析了大数据管理迎接的挑战，以便更好的认知大数据管理内容，获得更好的管理效果，带动经济的发展。

[1]黎建辉,沈志宏,孟小峰.科学大数据管理:概念、技术与系统[J].计算机研究与发展,2017,54(02)：235-247.

[2]王钦,蒋怀光,文福拴,梅天华.智能电网中大数据的概念、技术与挑战[J].电力建设,2016,37(12)：1-10.

[3]郭长亮.探析大数据技术对财务管理的机遇与挑战[J].财经界(学术版),2016,(09)：186+188.

[4]刘铭.大数据管理面临的挑战及技术新趋势[J].信息安全与通信保密,2014,(10)：42-43.

[5]孟小峰,慈祥.大数据管理:概念、技术与挑战[J].计算机研究与发展,2013,50(01)：146-169.