刍议大数据时代网络爬虫技术在商业银行中的应用

彭 芳

（武汉交通职业学院，湖北 武汉 430070）

大数据时代与过去非常不同的一点就是，信息存储的方式发生了很大的不同，各项信息主要在计算机当中进行存储，这样的存储方式更加方便快捷。对于商业银行来说，需要记载很多的真实作数据，所以将这些大量的数据更加有效地进行储存是非常重要的，而为了对数据进行储存，第一步就是要对所要储存的数据信息进行收集采纳，挖掘出更多的真实有效的数据信息。此时网络爬虫技术应运而出，一跃成为商业银行中不可缺少的一项重要网络技术，网络爬虫技术的不断进步和发展对人们的日常生活有着非常大的帮助。因为商业银行能够利用网络爬虫技术更加准确地挖掘采集各种数据信息，同时也能帮助银行各方面的能力的提升以及也更加方便有效地对各项业务进行处理。

1 大数据时代网络爬虫技术的定义

网络爬虫还叫作网页蜘蛛，它存在于FOAF社区当中，发挥着网络机器人的作用。又把这种作用机器人叫作网页的追逐者，对于所需要的网络信息进行跟踪和追逐，简单地说，这种网页追逐者就是一种小程序，有的时候是一种网络脚本，它对于信息的追逐是经过设定的，是自发进行的，所以网络爬虫技术等同于智能机器人，对网络自发地进行访问，搜索自己所需要的信息并进行保存，同时还可以检测其他人的信息，将他人的电脑数据和信息记录下来，复制到自己的数据库种，进而收获更多的数据并进行储存，这也是网络信息技术的主要使用作用和人们使用此技术的主要目的。

2 网络爬虫技术的分类

随着现代网络技术的不断进步和发展，网络爬虫技术也得到了深化演变，现在经常所使用的网络爬虫技术主要分为几类。

2.1 深度优先搜索方式

网络爬虫技术在最开始出现的阶段经常使用的就是深度优先搜索策略，深度优先搜索策略的操作步骤就是先选择一个文件进行搜索，然后找出一个节点，再更加深入地对这个根据找到节点所具有的超链接进行检测，然后回到之前的文件当中。如果搜索的内容已经搜索完毕，就说明已经无法更加深入搜索了，这样的搜索方式能够将文件的全部信息检测一遍。

2.2 宽度优先搜索方式

宽度优先搜索方式的原理和深度优先搜索原理不同，宽度优先搜索是对一级页面从上往下进行搜索，并且不断地重复循环，直到不能搜索为止。然后再开始下一级的页面搜索，同之前的方法一样进行循环搜索，然后将所有的页面都按照这样的方式进行搜索，直到没有页面可以进行搜索。宽度优先搜索方式也是现阶段网络爬虫技术最经常使用的搜索方式，所以，宽度优先搜索方式也是最有效、最优异的搜索方式，如果运用网络爬虫技术搜索信息，最先考虑的就是宽度优先搜索方式。

2.3 聚焦搜索方式

聚焦搜索方式与前两种搜索方式不同，首先，需要对所要搜索的主题信息进行分析计算，选择相匹配的主体链接，然后再采用聚焦搜索将这些匹配到的网页信息进行筛选，这个时候被网络爬虫所选择的网页信息都会被存储，然后再将这些选择的网页进行更加深入的分析和筛选，同时创建相关的搜索目录，方便以后查询这些数据信息，检索起来也更加便利。

3 网络爬虫技术在商业银行中的应用

商业银行使用网络爬虫技术是为了更加深入地了解自身情况，同时也能够帮助了解客户信息，分析竞争对手的情况，以及深入分析当前金融行业的经营环境，有利于银行的经济效益的收获。并且网络爬虫技术的应用能够让银行与客户实现共赢。下面将具体分析这些应用的体现。

3.1 监测网络舆情

商业银行通过对网络舆情进行监测，能够帮助银行深入研究人们的真实心理，了解他们的需求，商业银行可通过网络舆情来采集银行客户的意见并且对银行进行一定的宣传，如宣传银行的服务理念和服务特色。而网络爬虫技术对于网络舆论的检测有着非常大的作用，通过网络爬虫技术能够收集到不同深度的网络舆情，并且能够筛掉一些不必要的信息，借此有效避免银行声誉受到伤害，使自身的品牌名声得到提升，用户的使用效果也能够更好，有利于客户和银行达到共赢。

3.2 构建客户全景画像

目前的金融行业竞争力度越来越激烈，商业银行也是相同的竞争局面，为了增强竞争力，就需要缩短经济收益，并且还需要提高客户营销的标准和尽量避免用户出现任何风险。商业银行主要从客户和风险两方面进行管理，最注重的还是管理如何发现潜在客户，并且如何识别客户贷款后可能出现的风险，为了有效提升这两方面的管理很多银行都投入了大量的人力、财力和时间。网络爬虫技术对于银行这两方面的需求就有着非常大的帮助，通过网络爬虫技术能够构建客户的全景画像，银行能够通过此全景画像深入了解客户，进而有效维护银行与客户之间的关系，并能够更好地控制用户贷后风险。

运用网络爬虫技术来建造客户的全景信息图像的步骤：首先输入银行用户的个人基本信息，或者输入客户的公共网络地址，然后设置好格式，让网络爬虫对此信息进行处理，进而筛选出符合相关规定的客户信息。首先需要先特别设定好基本数据信息，作为搜索基础，之后商业银行相关工作人员需要在网络爬虫系统当中输入相关信息，再与客户留下的网络地址信息联系在一起，把这些信息数据装合为信息爬虫种子，进而启动相关爬虫程序。爬虫程序的工作人物就是收集客户的信息数据，然后将这些信息数据整理保存在一起。除此以外，还需要通过网络舆论监测的帮助，除了需要对自身进行监测以外，还需要监测客户，利用网络爬虫技术实时监测客户对于银行服务的体验评价，并及时收集客户对于商业银行的舆论，银行通过这些信息数据来决定经营方案。

经过以上研究分析可以发现，运用网络爬虫技术来收集采纳客户的信息数据，能够实时检测客户的信息动态，并且能够及时更新数据库中的客户信息数据，从而从多个方面去收集客户的实时状况，发现客户的一些潜在商机，并借机进行营销，有效提高商业银行的营销效率。同时还能够分析判断客户是否存在信用风险，借此对客户贷后风险进行更好的管理，从而能使银行的经济效益得到快速提高。

3.3 分析竞争对手

商业银行也在随着时代的变化而不断发展，各银行之间的竞争压力也越来越大。银行想要在竞争中占据优势，获得更好的收益，就需要对竞争对手进行充分的检查与研究，因此，网络爬虫技术对于银行具有非常重大的作用。银行通过网络爬虫技术能够搜索任何时候的网络信息，深入筛选研究自身所需要的信息。除了以上作用以外，商业银行通过运用网络爬虫技术制定一项更加具有竞争优势的管理规定，及时发现竞争对手的劣势，并由此制定出相应策略使自身的优势作用发挥到最大，从而使自身的商业银行获得竞争胜利，经营收益获得提高。

3.4 行内垂直搜索

商业银行的工作人员可以垂直搜索的搜索方式将各项数据信息整理在一起，并且需要加入商业银行的行业色彩，从而使这项搜索方式更加具有行业特色。这种搜索方式最大的特点就是使所需信息的搜索范围缩小，从而更加快速有效地搜索到自己所需要的信息。而将网络爬虫技术与这种行内垂直搜索进行有效结合，能够帮助商业银行从多方面了解并认清目前行业所处的环境，并且根据大环境经营模式和市场的发展需要及时调整自身的经营脚步，对所需数据信息进行最深入的搜集，以满足商业银行的经营需要。商业银行在此过程中也能不断地完善和发展自身的服务体系，让客户得到最好的商业体验。

4 结语

由于信息网络的发达，商业银行对于网络爬虫技术的使用也越来越多，两者实现了有效的结合，网络爬虫技术可提供更加新颖的方法帮助银行获取信息数据，并且搜索的信息数据都更加有效准确，同时还能帮助商业银行将这些信息数据整理在一起，商业银行有效提升为智慧型银行。同时通过网络爬虫技术的银行信息存储也更加方便，效率也有了重大的飞跃。除此以外，通过深入的研究和分析，可以发现网络爬虫技术在商业银行中的应用还有很大的发展空间，以后的商业银行通过网络爬虫技术将会更加有效便捷地处理银行日常事务。