浅谈统计学在大数据时代面临的机遇、挑战及其发展趋势

2016-12-31 15:48:26符一平
中国管理信息化 2016年14期
关键词:数据量样本时代

符一平

(海南大学 信息科学技术学院,海口 570228)

浅谈统计学在大数据
时代面临的机遇、挑战及其发展趋势

符一平

(海南大学 信息科学技术学院,海口 570228)

由于科技进步,大型网络电商不断兴起,博客、微博、微信等社交平台逐渐建立,庞大的数据量随之出现,大数据时代到来的信号已经发出。随着大数据时代的来临,统计学受到了重大的冲击。因为传统的统计学教育主要应用抽样技术,即在总体中随机抽取部分数据样本进行处理、分析。然而,随着大数据的兴起,数据量不断增多,数据的总体性不断强化,对统计学人才的要求也越来越高。所以,在大数据时代下,统计学的发展受到了制约。但另一方面,大数据也给统计学的发展提供了一些机遇,促进统计学的改革创新。为了促进统计学的发展,培养出更多适应大数据时代的新型统计人才,本文对统计学在大数据时代面临的机遇、挑战和发展趋势进行了系统的研究。

统计学;大数据;机遇;挑战;发展趋势

统计学是指通过应用数学以及其他学科的专业知识,来搜索、整理、分析、评估数据,从而达到推断、预测所研究对象的未来发展情况的一门综合性学科。随着大数据时代的来临,全球的数据量急速增长,这使在短期内完成收集、整理、分析数据的任务,变得十分困难,同时也影响到了统计学的正常教学。但是,大数据时代也为统计学提供了众多的数据研究对象,为统计学的发展提供了一个良好的平台。在这个平台上,统计学遇到了许多机遇,比如:统计学科体系得到延伸。在大数据时代下,只要相关人员把握住这些机遇,顺应大数据的脉络走向,那么统计学的发展趋势必将趋于良好。

1 统计学在大数据时代面临的机遇

1.1统计学应用范围的增大

以往传统的统计是根据所要研究的问题而去收集相关数据,再进行整理、分析、最后得出结论。这种统计,一方面,无法保证收集到的数据即是所需要的数据,也就是说数据的时效性得不到保证;另一方面,在大数据时代下,数据量巨大,欲收集到某一方面的代表性数据或者全部数据是十分困难的一件事,这就导致相关人员的工作量巨增,工作压力增大。然而,在大数据时代下,统计学不仅仅根据问题研究数据,还根据数据挖掘其背后的信息。这一研究方向的转变意味着大数据带给统计学新的机遇。随着社会的发展,许多新型产业应运而生,但是多数人不了解这些产业的运营情况以及促进这些产业发展的奥秘。在大数据背景下,通过分析、研究新型数据往往可以解开一个产业的“秘密”,或者是将数据涉及的信息全面地展现出来,从而促进相关产业的发展。因此,统计学应用范围的增大对产业的发展具有重大意义。

1.2统计效率的提高

传统的统计在收集数据方面,常常会出现数据滞后、失效等情况,而在大数据时代下,数据量大,数据的更新速度快,因此,收集到的数据的质量得到了大幅度提升。不仅如此,在大数据时代下,数据及时性的特点,给数据收集提供了极大的便利,比如:相关人员可以定期进行数据收集,这样不仅能减少工作量,还能确保数据的时效性和准确性。另外,在统计的过程中,数据多样性的特点,给数据分析提供了极大的便利,比如:大数据可以被反复应用在不同方面的研究中。因为,数据的多样性就决定了数据应用范围的广泛性,特别是在数据的统计方面。因此,统计数据时就不该将数据局限于一种用途,而应该深度挖掘数据的应用价值,将数据应用于各类相关的研究方面,从而达到降低相关人士的工作量、控制统计成本、提高统计效率的目的。

1.3统计学科体系的延伸

在统计学中引入大数据,虽然会给统计学带来一些挑战,但是同时也会给统计学带来机遇。现今,大数据逐渐进入统计学科,数据的庞大性使样本统计中的样本选取和标准确定受到了极大的影响。再加上,在大数据时代下,数据具备总体的特征,简单的抽样调查无法满足新时代对统计的要求。因此,传统统计中的样本统计会朝着总体统计的方向发展,统计学科体系将会成为样本统计与总体统计齐发展的体系,以此掩盖样本统计中的不足,保证统计的有效性。

2 统计学在大数据时代面临的挑战

2.1样本选取及其标准确定的难度增大

样本统计是现今统计学中最重要的统计方法,统计学正是通过运用该方法对客观事物的数据展开数量特点及数量间关系的研究。样本的选取和其标准的确定,是考察样本统计是否具备价值的重要依据。随着大数据时代的来临,样本选取和其标准的确定,变得越来越困难。一方面,大数据意味着数据量不仅十分巨大,甚至大到超乎想象,而且数据还有分散性和多样性的特点。这使在选取样本的过程时,收集数据的难度系数将变高,标准将很难界定,工作量将加大;另一方面,在大数据背景下,人们面对海量数据,不会只想知道出现这些数据的原因,还会想了解这些数据代表的涵义。这不仅改变了传统统计对数据的诉求,还迫使统计学进行改革、创新。另外,随着众多电商和社交网络的兴起,互联网上的数据量不断增多,其研究价值也越来越高。但是,网络数据大都属于非结构化数据,而统计学研究的是结构化数据。因此,在运用样本选取方法的过程中,难免会错失很多有价值的数据,使样本选取不够全面。总之,大数据时代给统计学带来了挑战。具体的挑战体现在:能否将非结构化数据转化为结构化数据和是否能找到准确分析非结构化数据的方法。

2.2统计软件及统计方法欠缺

统计软件是基于计算机运算环境下,信息计算机技术迅速发展而研制出来的。它主要用于提升统计学的数据分析和处理的效率,提高一般性的统计实践操作质量,并通过设置统计模型来简化统计的复杂操作。在大数据时代,常见的统计软件有Eviews、SPSS、SAS、Stata等,但是这些软件要运用于大数据,在存储、传输方面还有欠缺,它们还需要得到进一步的完善和升级。可是,完成升级、完善统计软件的任务相对困难,并且无法与互联网、电子商务等公司相提并论。另外,在大数据背景下,数据不仅具备海量化,多样化的特点,而且其获取途径众多,因此,分析、研究数据变得困难,再加上,我国的统计方法相对欠缺,所以,统计学在大数据时代下面临着挑战。

3 统计学在大数据时代下的发展趋势

3.1加大应用型统计教学力度

统计学和其他理论型学科不同,它是一门实用性极强的学科,无论是非统计学人士,还是统计人员,或多或少的都需要掌握统计学的应用方法和技巧。在大数据时代,数据具有多样性、总体性、分散性及海量性等特点,因此,欲从数据背后得到精确结论,必须对所研究数据进行全面且精准的统计分析。另外,根据大数据的这些特点,不难看出,新时代对统计人才的要求越来越严,对统计学教育也更加重视,因此,在统计学教学过程中,加大应用型统计的教学力度必不可少。应用型统计是指轻理论、重实践的统计教学。这种教学类型,在提高学生的实践操作能力,帮助积累实践经验,掌握统计技巧方面,具有重大意义。教师加大应用型统计学的教学力度,主要从三方面入手。第一,加大数据收集的教学力度。收集数据是统计的基础步骤,也是初步判断统计结论是否有效的参考因素。就某种意义而言,只有加强对数据收集的教学力度,才能保证学生在大数据时代下,能收集到保质保量的数据。第二,加强数据整理的教学力度。由于,在大数据背景下,收集到的数据具有多样化、海量化的特点,所以如何高效地整理这些数据成为一大难题。正因为如此,才在高校中呼吁教师加大对数据整理的教学力度。第三,加大数据透视的教学力度。数据的透视是指通过数据透视化技术,来使非结构化数据直观化的一项教学内容。因为在大数据时代下,会出现许多非结构化数据,而传统的统计方法只能统计结构化数据,所以,加强数据透视的教学力度,有助于提高统计的高效性,帮助培养统计人才。

3.2提高大数据统计思维

无论是在传统的统计学教育中,还是在大数据时代下,统计思维一直都是教师着重培养的一方面。良好的统计思维,不仅能提高学生收集、整理数据的能力,还是将理论有效地付诸实践的重要保证。从另一角度看,如果统计人员不具备统计思维,那么在海量的大数据下,就无法准确分辨出所需的数据,也就无法高效地完成工作。传统的统计思维包括平均思维、变异思维、普遍联系思维、动态思维等,面对大数据时代下,数据的混杂性和总体性,提高统计思维还需注重培养学生的大数据统计思维。大数据思维不仅具备容错性和复杂性,其还强调数据之间联系和注重相关数据间的分析。

3.3加强基础性统计知识教学力度

现今,统计学教学现状不容乐观,学生在学习统计学时,普遍会出现基础知识薄弱,畏难情绪较严重的现象。为了改善统计学教学现状,缓解大数据时代下统计学的危机,教师应加大基础性统计知识的教学力度,确保每位学生都能掌握良好的统计学知识,从而促进统计学的发展。由于统计学中的概念、公式较多,而且较抽象,学生不易理解,所以,教师要尽量做到深入浅出,保证学生准确掌握相关知识。但是,不是所有教学内容都可以做到深入浅出,所以,教师应重视基础知识的教学。只有在学生对统计学的基础概念、公式、原理等都充分了解的情况下,才能为后续的学习打下坚实的基础,才能提高后续教学的效率。大数据时代的到来,促使统计学进行改革。在改革后,统计学的教学要求更严,教学内容更深,所以,不具备良好的统计学基础是无法完成学业的,更无法促进统计学的发展,培养出新型统计学人才。

3.4重视复合型人才培养

统计学不仅能为数学、物理等学科提供数据分析方法,还在生活、经济等领域具备重大意义。以前,数据简单化,来源较单一,所以对统计人才的要求并不高。然而,随着大数据时代的来临,统计人才不再是单纯具备良好统计知识的人,而是复合型人才。在大数据时代下,许多数据比较混乱、庞杂,只有具备良好的编程技能、统计能力的人,才能将其收集、整理为有价值的数据。在大数据时代下,行业间竞争十分激烈,数据的统计工作也变得十分艰辛,只有具备大数据专业知识,超强的数据分析、处理能力的人,才能在这个时代具备强大的竞争力。在大数据时代,统计不是单纯的加减运算,只有具备统计思维、数据甄别能力、计算机专业技术的复合人才,才能高效地进行统计工作。因此,在大数据背景下,培养复合型人才十分必要。

4 结 语

统计学作为教育阶段最重要的学科之一,不仅能促进物理、数学等学科的发展,在推动政府的情报决策、工商业的发展方面也具有重大意义。地方政府在进行市场经济的宏观调控、指导、规划等方面离不开统计,也只有对数据开展精细的分析、统计工作,才能得到更具说服力、更具价值的结论,实践于生活中才更有利。而且,在人口普查、环境评估等方面也会经常运用到统计学。由此可见,统计学十分重要。虽然,我国的统计学教学现状不容乐观,在大数据背景下,统计学还面临众多挑战,但是,相关人员更应看见其中的机遇,把握好时机,共同努力,携手推进统计学的发展。

主要参考文献

[1]田茂再.大数据时代统计学重构研究中的几个热点问题[J].统计研究,2015(5).

[2]崔路云.基于大数据时代背景对统计学教育的几点思考[D].北京:首都经济贸易大学,2014.

[3]朱怀庆.大数据时代对本科经管类统计学教学的影响及对策[J].高等教育研究(成都),2014(3).

10.3969/j.issn.1673 - 0194.2016.14.178

C81

A

1673-0194(2016)14-0245-02

2016-06-02

海南省自然科学基金(20151002)。

猜你喜欢
数据量样本时代
基于大数据量的初至层析成像算法优化
计算Lyapunov指数的模糊C均值聚类小数据量法
用样本估计总体复习点拨
高刷新率不容易显示器需求与接口标准带宽
宽带信号采集与大数据量传输系统设计与研究
电子制作(2019年13期)2020-01-14 03:15:18
推动医改的“直销样本”
HANDS OFF THE WHEEL
随机微分方程的样本Lyapunov二次型估计
e时代
足球周刊(2016年14期)2016-11-02 10:56:23
e时代
足球周刊(2016年15期)2016-11-02 10:55:36