周建彬
摘 要:大数据时代的标志是:社会数据量不断增加,爆炸式增长的数据量已经渗入到广大人民群众的生活中,通过千变万化的形式将数据展示。在大数据背景下统计数据的质量问题受到关注,之前统计数据秉承精准性的内涵,要求统计数据准确无误。但是这样精准性的内涵在大数据背景下不能使企业得到很好的发展,企业要想得到长足的发展必须要在统计数据质量方面最大程度满足用户需求。统计数据质量包括数据搜集质量、整合数据质量、存储数据质量以及最后用户的使用数据质量,具有重要的意义。本文对大数据背景下统计数据质量影响因素进行研究,从流程、技术以及管理三个要素出发探讨了具体的影响因素,此外,也提出了相关的对策,旨在促进企业、国家更好地发展。
关键词:大数据;统计数据质量;影响因素
当今社会大数据已经在各个行业中得到广泛的应用,海量数据的质量参差不齐,高质量的数据需要政府相关部门和企业一起挖掘。大数据时代的来临既是机遇也是挑战,对各行各业的发展具有关键作用。大数据的海量、实时化、电子化易处理、数据多元化等特点为企业和政府带来了巨大的机遇和挑战,一方面极大的方便了各行业的数据处理和查找,是企业和政府做出合理的决策的数据基础;另一方面,微不足道的数据质量问题如果不及时得到解决,会严重影响数据的整体质量。所以影响数据质量因素的研究不仅是统计部门的任务,也是各部门的要求。
一、大数据背景下统计数据质量内涵的进一步分析
精准的统计数据要制定严格的生产数据标准,统计部门严格遵守标准,在特定的生产数据时间内依照生产方式规范进行数据统计,才能在不断升级的数据系统中保持较高的数据质量。传统统计数据采用的方式是:统计部门在各层收集数据,再将数据上报给上级部门,上级部门进行审核,这样的模式耗费时间长,还容易在上报的过程中发生数据传递失真的现象,不利于企业的数据统计,制约企业的发展。大数据背景下,大数据技术得到发展,上级部门可以通过信息平台或者网络直报系统直接了解整体数据,提高数据的质量的同时也提高了企业的效率,数据需要不断更新,才能减少低质量数据的产生。此外,原始数据的质量对整个数据质量具有重要意义,不同部门对原始数据的判定标准具有差异性,统计部门要充分保持原始数据的质量,防止原始数据丢失。完善数据收集和统计系统,改变传统统计数据方式,保证统计数据质量。
二、影响因素分析
大数据背景下影响统计数据质量的因素主要是流程、技术和管理三个因素,这三种因素对统计数据质量产生影响,通过影响因素概念模型可以了解基本的影响流程以及影响后果。
1.流程因素
(1)数据搜集
数据统计的基础是数据的搜集,每个企业的统计部门搜集数据的方式会有差别,传统的搜集数据的方式是统计调查,企业委派相关工作人员对原始数据进行搜集,搜集到的重点数据应当重点关注,再将搜集的数据做成统计报表。大数据时代的来临,传统的搜集数据的方式不能够提高数据质量和提高企业的经济效益。搜集数据是在海量的数据基础之上,数据的范围较广,需要解决很多实际的问题,例如:时效问题,数据讲究时效性,可以通过智能设备和统计数据的技术实时更新数据,才能在大范围的数据中搜集高质量的数据。
(2)数据维护
提升统计数据的质量需要妥善维护数据库,对实时更新的数据进行统计,专业人员要对各种数据进行整理,针对不同类型的数据采取不同的存储方式,才能最大程度减少存储空间还能妥善保管数据。为数据统计奠定坚实的基础。对于出现的特殊问题要及时解决,防止出现灾难性问题。
2.技术因素
大数据时代新技术是影响统计数据质量的重要因素,对统计数据影响最大的是数据库技术、数据质量检测识别技术以及数据分析技术。企业的数据每天都在变化,统计部门要掌握瞬息万变的数据必须要依靠数据库技术,数据库技术具有较全面的数据,企业可以通过数据库技术找到自己想要的数据,促进企业更好地决策。在大数据时代背景下如何判定一项统计数据的质量是否符合标准,为了解决这一问题,数据质量检测技术应运而生,数据质量检测技术通过建立统计数据评价体系以及反馈体系及时检测出数据库中统计数据所存在的问题,监督数据库的运行,利用质量检测算法对新的统计数据进行检测,使企业及时、准确发现存在的问题,及时采取措施解决问题。利用数据分析技术对海量的数据进行分析,才能对分析结果一目了然,更加有利于企业提升统计数据的质量。
3.管理因素
任何一项工程项目或者计划都需要管理,管理因素也是影响提升统计数据质量的重要因素。企业管理者是管理的主体,起着重要的作用。企业管理者要及时更新自己对大数据的认知,对大数据的运行模式、价值、发展前景等都要进行系统的学习,对数据质量要有较强的敏感度,建立统计数据管理制度,支持大数据的发展。专业的数据库人员是指有着专业的数据库知识和技术,为政府和企业进行数据搜集和维护工作的人员,是达到有效管理数据库目标的重要成分。因为不同的企业和部门进行数据统计时所遵循的统计体制和标准不同,所以企业管理者要建立统一的统计体制,方便数据工作的开展。要增加政府进行数据统计时的透明度,提高民间组织、企业对于数据来源以及结果的认知,也更加方便政府开展工作。
三、提高大数据背景下统计数据质量的对策
从多数的研究来看,我国的统计数据的质量还需要得到提高,我国统计数据部门没有充分挖掘大数据的潜在价值;企业内部的数据仅限于内部分享的做法导致资源无法充分共享;专门的数据统计人员数量较少,多数工作人员的工作能力达不到要求,无法进行统计数据工作,导致我国的统计数据质量亟待提高。
1.不同主体的应对之策
国家方面:国家站在我国的基本国情上制定统计管理体制,改变当前的统计管理体制。党和政府充分发挥带头作用,肩负提升统计数据质量的责任。企业方面:企业统计数据部门要将大数据的潜在价值充分发掘,将内部的数据信息及时分享,提高数据的利用效率。个人方面:统计人员是提高统计数据质量的直接推力,统计人员要加深自己对大数据的了解,创新统计方式,在数据标准的规范下推广应用统计数据。
2.在各因素方面的解决对策
流程因素方面:在数据搜集、数据维护和数据使用方面要遵守国家制定的标准规范,降低在过程中的干扰因素,避免数据封闭,将资源在数据统计过程中充分共享,尊重客观实际。技术方面:充分引进统计专业技术人才,提高整体统计数据水平,将各项统计数据的技术进行完善,注重开发新技术,提高技术能力。管理方面:领导人员要树立管理意识,大数据所带来的变化要充分关注,保证在大数据背景下统计数据的质量得到提升。
参考文献:
[1]程开明.基于利益相关者视角的统计数据质量管理体系研究[J].商业经济与管理,2013,(3).
[2]祝君仪.大数据时代背景下统计数据质量的评估方法及适用性分析[J].前沿理论,2015,(7).
[3]聂富强,崔名铠,向蓉美.政府統计数据质量内涵的演化与启示[J].统计研究,2011(5):72-77.
[4]辛金国,龚恺.基于物联网技术统计数据采集的影响因素[J].统计与决策,2015,23:34-37.
[5]朱建平,章贵军,刘晓葳.大数据时代下数据分析理念的辨析[J].统计研究,2014(2).
[6][英]维克托·迈尔-舍恩伯格.大数据时代--生活工作与思维的大变革[M].周涛,译.杭州:浙江人民出版社,2013.