大数据视角下数据分析的应用研究

(安徽财经大学 安徽 蚌埠 233000)

一、引言

近年来，随着计算机技术的普及与发展，信息量呈现指数式增加，促进了各行各业的快速发展，同时使得商业模式发生创新性的变化，这也意味着大数据时代已经到来。而数据分析能更好地利用数据，从海量的数据中提取有效信息，让企业明确发展方向，实现利润最大化。因此，数据分析给社会带来经济效应已成社会发展的必然趋势，对数据进行分析是企业发展的迫切需求。在大数据时代，商家可以比父母、恋人甚至是你自己更了解你自己。数据分析对商业领域的改变，这仅仅是露出水面的端倪。

二、数据分析的内涵

(一)数据分析的定义

数据分析一般是指用适当的方法，例如搭建模型，对收集来的大量数据进行处理，提取有用信息进而形成结论的过程[2]。在实际工作中，数据分析可以作为准确判断的依据，从而做出适当的决策。阿里巴巴创始人马云说过，“阿里巴巴不是零售公司，而是数据公司。” 淘宝首页会推荐你想要的东西，是通过你搜寻商品的关键词以及在社交网络显示的行为轨迹，使淘宝捕捉到了你的行为信息。如你经常搜索手机等电子产品，基本可以得出结论：你在手机等电子产品方面有需求，很有可能购买，这个过程就叫做数据分析，也是数据分析在商业领域的应用实例。

(二)发展前景及职业

无论是在商业领域还是社会上，AI人工智能越来越广泛，世界论坛经济的一篇报告就指出，在未来三年，各类行业将会逐渐被AI取代，如文字写作及与法律相关的工作。由于AI具有高准确度及快速处理能力，因此重复型的、机械性的工作都将被AI逐步取代。在大量的数据面前，如何从繁冗的数据指标中提取有价值的信息，并且系统、有效地将数据应用在各行业上，是当今社会的一大人才需求。目前关于数据分析的职业发展主要有商业分析师(Business Analytics)、数据科学家(Data Scientist)、数据分析师(Data Analyst)。

(三)相关技能

在进行数据分析时，需要具备一定的数据分析能力。提升数据分析能力可以从两方面着手：一方面是提高数据敏感度，可以将数据与业务结合，多与业务结合起来看数据，深入了解业务，提升对数据的兴趣和经验积累。另一方面是提高商业理解能力，从数据角度系统性地理解商业，结合商业经典理论去理性分析商业现象。与此同时，运用Excel、SQL等工具辅助理解数据，能更好地提升数据分析能力。

三、数据分析的主要步骤

(一)明确数据分析的目的

开始分析一个项目前，要明确分析的方向以及分析数据的价值，从而确定分析的目的。数据分析的目的主要分为以下三种：对事件发生的原因、对现状以及对未来发展趋势等进行分析。

十九世纪中叶美国西部掀起了一阵淘金热，人们疯狂前往淘金时，一位年轻人发现淘金风险大，但是在此过程中他发现淘金者的工作裤易磨损，询问走访过程中了解到工作裤的消耗高，于是放弃加入淘金大军，重新把目光定在淘金者的工作裤上，创造了牛仔裤品牌——Levi’s。不可忽视的是在这过程中，商业理解能力对确定数据分析的目的起到了至关重要的作用。商业理解能力，顾名思义，就是理解能力在商业领域的应用，通过分析商业事件，能够探寻事件的特性及规律。李维斯发现制作耐磨的淘金裤比淘金收益更高，凭借独特的商业见解建立了正确的数据分析目标。

(二)数据收集

掌握好的数据分析方法和精准的数据来源是拥有好的数据分析成果的两大途径。目前数据收集的工具主要有以下三种：一是数据清理爬虫抓取数据(extensive search)。随着大数据时代的来临，越来越多的信息在网络上呈现，因此网络上的数据内容和种类也就变得越来越多。与此同时，由于数据量越来越大，通过人工方式获取数据方式变得困难。在这种背景下，数据分析师为了节约物力人力，同时为了加快数据获取速度，引入自动化的工具便成为了一种趋势。其中，较为自动化的数据抓取工具—爬虫，通过这种方法能通过消耗较少的人工，就能将数据信息采集出来。二是问卷调查。获取一手信息，即原始信息，可通过问卷、访谈、询问得到。三是到相关网站的官方网站上查询。如联合国数据中心，国家统计局，世界银行网站等。

(三)数据清理

数据收集过程中会出现数据不完整、数据不唯一、数据缺乏可信度、数据不符合常识等问题。改善收集到数据的质量，将原始数据中缺失、错误的部分进行修改，是为了让数据变得有效。针对以上问题，我认为可以通过以下方法解决：将数据补充完整、通过前后数据补充信息或是数据剔除来完善数据。数据不唯一可去掉重复数据，进而提高数据的精确度。而数据缺乏可信度可在官方网站提取数据，例如你想要了解中国近几年的经济指标变化情况，可以在中国统计局查询，数据的权威性给数据分析提供保障。另外，数据不符合常理大部分在于逻辑关系不正确，根据数据量的大小可分为：在数据分析量小时可采用人工处理；数据量大时在程序中设定强制合法规则，根据实际情况决定，凡是不在此规则范围内的，强制设为最大值或者判为无效，将此数据剔除。

(四)数据分析报告

数据分析报告是基于数据收集和清理后，进行数据分析得到的报告，是判断一个项目计划可行性及是否投资的重要依据，同时还更好地体现和分享信息，提高信息价值提升的效率。如何让数据说话，更清晰明了向受众传达数据背后代表的意义，这就需要进行数据分析。数据分析是数据可视化的过程，通过应用适当的算法和语言工具，使数据具象。

(五)执行与反馈

当你拿到一份完整的数据分析报告，需要做的是根据数据分析显示的结果调整执行方向或落实执行计划，并根据执行的情况对数据分析报告进行反馈。

四、数据分析的应用

近几年来，越来越多的企业进军大数据领域，顾局人工智能，也使得我们在越来越多的场合听到数据分析这一概念。

(一)数据分析在商业领域的应用

1.波兰电信公司

受智能手机的影响，波兰电信公司在一段时间内流失了大量客户。波兰电信公司希望通过有效途径来预测并解决客户流失问题，因此他们将客群进行分类，方法是构建一张社交图谱，分析客户数百万个通讯记录，特别关注“谁给谁打了电话”“打电话的频率”两个方面，社交图谱把公司用户分为几大类，有联网型、桥梁型、领导型、跟随型，这样的关系数据有助于电信服务供应商深入洞悉一系列问题，如哪些人会可能“弃用”公司服务的客户产生较大的影响，挽留最有价值客户的难度有多大，运用这些方法，公司成功地通过有针对性的营销策略挽回了一部分影响力较大的客户，最后有效地解决了客户流失问题。

和笼统地采取降价方式相比，波兰电信公司通过挑选出最值得挽留的客户，并根据他们的特点提出针对他们的个性化优惠，从而利用他们的影响力达到挽回流失客户和提高忠诚度的效果。

2.摩拜单车

当下炙手可热的共享经济也运用到了数据分析，摩拜单车利用大数据助力城市交通系统优化，通过结合GPS定位技术及用户信息分类，收集自行车使用区域、单车使用时间、用户使用单车的场景等数据，提取用户对单车使用的活跃区域、高峰时段、功能需求等信息，实现智能调度、平衡供需、提升用户体验，设立和管理职能停车点，在为城市交通优化提供参考数据的同时，也为公司带来了巨大的经济效益。

3.王者荣耀手游

数据分析不仅应用在线下产业，线上手游运用数据分析促进了其经济飞快发展，王者荣耀手游就是一款。王者荣耀通过用户绑定的QQ、微信账号记录，包括性别、年龄、地理位置等，以及登录时间、使用英雄角色的次数、皮肤、胜率等，建立用户画像、用户分布图、英雄排行榜等，提取各英雄的人气值、商业价值、偏好属性，就能得出男女玩家各自的消费偏好、不同地区的消费水平以及各英雄潜在经济价值的结论。

(二)电信行业

电信行业的数据分析一般通过WiFi网络得到实现，用户在获取电信服务的过程中电信服务商能够收集到客户的使用情况，并通过数据分析得到不同类型用户的使用习惯，消费趋向，以此对系统和相关服务进行完善，并提升服务质量。

(三)金融行业

例如信贷机构，通过社交媒体和其他网络工具将客户的碎片化信息整合并关联起来，从而预约客户的违约风险，做出正确的信贷决策。

(四)医药行业

在医药行业研制新药也会用到数据分析，一般通过建立模型来观察疾病的愈合和病毒的死亡时间，从而测试某些药品的治疗手段是否有效。

五、结束语

当下，大数据时代带来许多新的经济资源和潜在商机，如何能从数据库中提取有价值的数据，数据分析就起到了至关重要的作用。在日新月异的社会背景下，经济平台层出不穷，即使新的和改进的服务和特性也可以很容易地复制。因此，运用数据分析能解决这些问题，将数据轻松、安全地提取并集成信息，并将数据变成巨大的财富。