涂 敏,袁 静
(江西警察学院,江西 南昌 330100)
警用舆情引导研判分析系统的研究与开发
涂 敏,袁 静
(江西警察学院,江西 南昌 330100)
针对各公安实战部门对数据挖掘、情报研判的需求,提出一个基于省市级警务综合平台汇集的各类综合数据,建立一个面向各级研判分析人员的图形化情报信息查询、轨迹展现、关联分析、证据链和情报线索发掘以及面向各种不同业务主题分析的警用舆情研判分析系统的设计方案。该方案在可视化图形研制分析、多维统计分析、自定义业务模型、舆情研制分析引导方面均有一定特色,可为情报分析人员提供更加便捷、丰富的研判分析手段,以促进信息高端应用,提高公安情报信息化应用水平。
情报;研判;数据;挖掘;可视化
近年来,伴随着全国各地公安机关信息化的迅猛发展,各省市级警务综合应用平台建设已初步实现了各级信息互联、共享和主要业务模块的应用,目前各公安实战部门对数据挖掘、情报研判的需求空前高涨。
目前各应用系统平台的信息查询和比对分析结果展现一般都基于研判分析的文字描述和报表数据,缺乏图形化等展示,成果应用往往取决于研判人员分析和表述能力,必须采用智能化研判分析工具,建设警用舆情引导研判分析应用,为实战部门提供高效、有价值的情报信息。
为解决上述问题,进一步推进省市级警务综合平台及情报研判高端应用建设,充分发挥平台各类信息资源汇集整合的优势,为各级公安机关和广大民警提供更加便捷、丰富的应用手段和网上作战和情报研判工具,促进信息高端应用,提高公安机关信息化应用水平,我们开展了警用舆情引导研判分析系统的研究。
我们期望通过系统的研究与开发,推进情报研判分析分析方式的变革,为情报研判人员提供一个方便使用且分析功能强大的图形化信息关联、线索轨迹展现、情报线索挖掘的工具手段和系统平台(如图1所示),推进情报主导警务战略,有效打击犯罪。
系统采用B/S架构,支持以Web服务的方式连接到后台或者远程数据库,在数据库中查询情报研判分析相关的信息,最后数据以XML的方式返回给前端,并以图形化的方式进行展现和线索关联。另外,前端的可视化展现部分可以页面集成的方式集成到任何支持Java的浏览器页面中,和其他公安系统的信息系统进行集成,也可以调用相关API中的功能定制用户操作界面,将用户的查询请求可视化的展现。分析服务器后端数据处理层负责访问和存取远程公共信息库,生成基于客户端查询请求响应的VLK数据文件,并可以支持Web界面和高级分析客户端同时使用。
(一)可视化情报研判分析系统总体架构
可视化情报研判分析系统在总体上分为三部分:信息资源、资源采集、情报研判(如图1所示)。
信息资源指将分散在不同的数据库和业务系统中的所有类型的基础业务数据进行整合,是分析研判的基础。
资源采集主要通过数据抽取、转换、加载来实现分析研判专题库。
情报研判是通过建立各种订制的分析模块为专业研判分析人员提供可视化研判分析服务,它也是系统的关键。
(二)系统功能架构
情报研判分析系统功能包括数据层,数据分析层和业务分析层三部分(如图2所示)。
图2 警用舆情引导研判分析系统功能架构
1.数据层对系统的数据存储进行分析。分析引擎可通过通用数据访问接口访问来自各种不同数据源的数据信息,包括公有数据(集中存储在公安资源库的航班信息、旅馆数据、案件数据等),私有数据(分析人员采集的片散个案信息,电话数据、账户数据等)以及分析需要的其他外省市信息(通过请求服务方式机进行访问),这些来自不同数据源的各类信息共同构成了分析系统的数据层。
2.数据分析层包括核心的可视化关联分析引擎及相关分析模块。数据管理完成对各类分析数据源的数据结构维护及数据管理(包括私有数据、公有数据等);分析模型定义完成针对分析数据源的“要素-关联”建模,即针对要分析的数据定义相关实体及链接关系,并进一步建立关联分析模型。可视化分析模块提供将具体用户的业务分析请求转换为相应的系统分析调用,调用数据访问接口访问相关数据,并将分析结果以标准方式返回给客户端进行图形化展现。分析模块具体包括综合关联分析及后端分析功能,综合关联分析提供分析用户针对已定义的实体模型进行查询并扩展相关信息,业务分析模型提供针对已定义好的分析流程及模版的任务调度服务,分析用户可以将分析请求以后台任务的方式提交分析服务器进行运行并查看分析相关分析结果。
3.业务分析层提供面向分析用户的相关分析功能(综合关联分析)及业务模版(民航旅客分析、旅馆住宿分析等)。分析用户可以通过业务功能模块请求访问系统后台分析服务。
警用舆情引导研判分析系统是基于分布式文件系统、面向并行计算分布式计算环境全文检索技术、可视化智能分析技术、多维统计分析技术开发构建的高端智能研判分析系统,而且能够与现有的公安系统进行方便的集成。
(一)可视化图形研判分析
基于全新的可视化分析概念和技术,其不同于传统分析方法之处在于采用了国际领先的图形化数据展现和分析技术,采用可视化证据链及线索关联分析系统将对警用舆情检测分析所涉及的海量分散的数据组织起来,建立数据之间的关联以揭示其内在的含义,并从海量数据中发现线索及可操作的信息,并通过图形化的方式进行展现,并运用众多图形化分析方法(群集分析、链接分析、路径分析、时间序列分析、关联关系分析等)来发现和揭示相关舆情及重大事件隐含的公共要素和关联。简而言之,就是通过图形化分析解决方案,帮助客户从海量舆情信息中发现有价值的线索和关联关系信息,为找出相关舆情信息的幕后操纵人提供方法论和技术支持,使得舆情研判处理部门能够快速直观的处理舆情信息,变被动为主动,使负面舆情朝着可控或有利的方面发展。
(二)多维统计分析
多维分析功能是基于舆情信息,通过OLAP技术实现对于主题信息的多角度、多层面的剖析与观察。舆情研判人员可以选择指定的舆情主题(诸如涉黑、涉毒、涉案等)、网站分类(如本地网站、异地网站、境外网站、其他网站等)、舆情信息类别(如新闻、论坛、博客、微博、QQ群、境外、视频、事件等)系统支持进行多种维度的切换、调整和细分的方式。
(三)自定义业务模型
业务分析模板功能提供舆情研判分析人员基于某一分析主题,根据预定义的分析模型流程,采用一定的图形化及数据关联算法,从后台数据库的大量数据中寻找可能存在的关联关系、线索信息及规律性信息,并最终形成分析图表,同前端分析不同,后端分析一般不能提供实时分析结果,而以后台作业的方式运行。用户可以用户查看所有当前运行的任务的状态,并可以查看运行结束的任务的结果(分析图表),并可在图表上进行进一步分析(如可以通过一个事件入手可以关联相关的发帖人信息、发帖人所发帖的网站信息等)。
警用舆情引导研判分析系统提供对分析系统中所有的数据资源(包括数据连接、数据表、视图、数据集包括数据字段内容)进行定义和集中管理的综合模块。具体功能包括:
1.数据源管理:定义全局可访问的公共数据库连接名称,设置外部系统的数据库类型、IP地址、SID、数据库名、用户名、口令。
2.数据表定义:选择数据源中要分析的数据表,定义表名称及字段名称,并将这些信息记录入系统管理表中。
3.数据管理:管理员可以查看及浏览公共表数据,分析用户可以对自己拥有的私有表数据进行管理,对表中的数据进行浏览、修改、删除等数据维护操作。
4.数据的权限管理:分析用户可以选择将自己的私有表共享给其他用户(可选择共享数据表中的某些字段);管理员可选择将公有表开放给部分分析用户。
自定义分析模型功能支持根据用户具体的分析流程,定义实体—链接关系的组合流程及参数设置,并保存为分析模型。具体功能包括分析模型定义、分析模型共享、业务分析模板运行及任务管理等功能。
分析模型定义:管理员或分析用户根据常用的分析流程,定义实体—链接关系的组合流程及参数设置,并保存为分析模型。
5.分析模型共享:分析用户可以将私有的分析模型共享给其他用户使用(但不共享实体及链接)。
6.业务分析模板运行及任务管理:业务分析模板功能提供分析人员基于某一分析主题,根据预定义的分析模型流程,采用一定的图形化及数据关联算法,从后台数据库的大量数据中寻找可能存在的关联关系、线索信息及规律性信息,并最终形成分析图表,同前端分析不同,后端分析一般不能提供实时分析结果,而以后台作业的方式运行。用户可以用户查看所有当前运行的任务的状态,并可以查看运行结束的任务的结果(分析图表),并可在图表上进行进一步分析。
(四)舆情研判分析与引导
互联网站检测到的有危害信息通过安全接入平台传输到内网(主要包括:接收单位、网站名称、信息标题、域名,URL地址、物理地址、信息类别、活动形式、关键词、信息原标题、上报内容、信息相关组织、相关人员、编辑人、编辑时间、核稿人、审批人,备注、附件),保存到系统中成为一条“舆情上报”,研判人员或小组根据事件的危害程度、事态可能要发展的趋势进行分析研判并设置舆情级别升级为预警信息下发给相关的舆情处理人员,舆情处理人员点击“舆情预警签收”按钮,将该舆情设置为我的工作内容之一,签收后的舆情可进行“评论”、“灌贴”等操作进行引导管理。
针对各公安实战部门对数据挖掘、情报研判的需求,本文提出了一个基于省市级警务综合平台汇集的各类综合数据,利用先进的图形化关联分析技术,建立一个面向各级研判分析人员的图形化情报信息查询、轨迹展现、关联分析、证据链和情报线索发掘以及面向各种不同业务主题分析的警用舆情研判分析系统的设计方案,系统的构建为情报分析人员提供了更加便捷、丰富的研判分析手段,以促进信息高端应用,提高公安情报信息化应用水平。
责任编辑:张 艳
D631.4
A
2095-2031(2015)06-0051-03
2015-10-08
涂敏(1967-),女,江西南昌人,江西警察学院教授,从事公安信息化建设、计算机取证技术研究;袁静(1965-),女,湖南人,北京航天理想科技股份有限公司高工,从事公安信息系统开发研究。