崔昌云
大数据的发展和大数据平台的应用,使很多领域的工作发生了翻天覆地的变化。在智慧城市建設的各个方面中,均离不开对大数据平台的应用。通过应用大数据平台,可以更有效地整合各方信息资源,实现对海量数据的有效收集、监测、管理、分析、挖掘、共享及应用,从而充分发挥出信息资源的价值。
大数据是指规模巨大与类型复杂的数据的集合,它主要依托于计算机网络技术、信息技术、数字技术等高新科学技术,这些技术是实现大数据捕获、存储、分析、处理及预测等能力的基础。大数据具有鲜明的特征,例如其体量大(即数据规模庞大及数据增长迅速)、多样性(即数据类型繁多及数据构成复杂)、价值高、速度快(即数据处理迅速及数据时效性强)。大数据平台则是指大数据的应用和管理平台,它是以数据为核心的新一代信息平台。现如今,大数据平台已经被广泛应用到了各个领域当中,可以说它改变了世界,也改变了人们的生活与工作方式。
(一)平台体系架构
大数据平台是以数据为核心的新一代信息平台,利用它可以实现对各类数据信息的综合分析与处理。大数据平台不但能够对数据中蕴藏的各类影响和关联因素进行有效分析,同时还能够单独分析每项因素,以及对数据中的有利和不利因素进行剥离分析,从而大大提高数据的利用价值。在大数据平台的体系架构过程中,主要需部署的内容有:分布式数据库、分布式文件系统、分布式协调任务、资源管理器、数据仓库、计算引擎、作业调度等。利用PC服务器来搭建大数据集群,通过合理的设置将多元服务组织分配给不同服务器。
(二)数据构建与处理
由于海量数据中的大部分其实是无用数据,而有价值的数据通常只占一小部分,因此在开展数据分析与处理工作前,应先对数据进行有效的建模,并找到数据之间的准确规律,然后再利用数据网来进行数据分析与处理。在数据模型的构建过程中,需先通过对采集的数据进行分析以找出其特征点,再应用数学统一归纳思想对数据内容进行综合分析,最后再利用抽象处理概念来综合处理数据,如此方能够有效构建出数据模型。需注意,在处理数据之时,应对数据蕴藏的价值进行充分考虑,有效协调好各类数据信息,站在全局角度上来关注数据特点,而不能一味寻找那些只带有局部特征的数据,这样才能够避免因数据的局部特征突出而导致处理不当。
(三)网格计算
对于大数据而言,一些计算过程与算法往往无法全部转换,还有一些函数无法被嵌入到数据库当中,对此,通常需要先将数据从定义函数中有效提取出来,然后再利用相关分析工具和软件进行综合分析。然而,随着分析任务的不断增多,服务器的容量会渐渐变得捉襟见肘,理论上来说需要对服务器进行适当的扩容或是增设服务器才能够满足实际要求。但众所周知,服务器的价格是十分昂贵的,因此一般都会选择利用网格配置来降低成本。网格计算的原理是将不同的任务分配到不同的计算机,以使每台计算机所承担的任务都各不相同,这等于是变相提高了系统性能和容量,同时又不必增加过多成本。
(四)自动化运维
在数据处理过程中需要将运维对象的内容全面展示出来。可以将处理平台划分成多个不同的功能区,如巡查管理及运维监控区、设备和知识库管理区、第三方平台接入区等。基于可视化技术,一方面可以利用图形或图像的形式将大数据表达展示出来,另一方面还可以利用图形或图像的形式来实时展示数据变化情况。不过相关工作都必须要依托于流程细化和平台集中化来开展。基于自动化运维技术来管理数据,只需设置简单的平台,即可对文件进行有效加密,并将文件以一般的形式保存在存储中心当中。基于云计算模式来存储数据,并构建相应的大数据中心,能够实现对重要数据的加密保管。
(一)智慧城市交通
交通系统是现代化城市中的重要系统,更是智慧城市建设的重点。当今时代,随着国民经济的不断发展与人民物质生活水平的不断提高,越来越多的家庭购买了私家车,这虽然大大方便了人们的交通出行,但同时也给城市交通系统造成了更大的压力。近年来,很多城市,尤其是一二线城市的交通拥堵现象正日益严重,而若想有效缓解交通压力,就必须要尽快打造智慧城市交通。在智慧城市交通建设中,离不开对大数据平台的应用,将大数据平台与道路监控系统有机结合,能够方便交管部门通过网络图像来识别与统计交通数据、处理车辆数据,进而再根据实际情况对拥挤路段的交通信号灯进行灵活调整。
(二)智慧城市社区
智慧城市社区是一种现代化社区管理新理念,同时也是一种新时代社会管理创新模式,它是指基于移动网络技术、物联网技术、云计算技术以及大数据平台等,借助集成智能设备和移动终端,打造安全、舒适、便捷、高效的智慧化生活情景,并形成数字化、信息化、智能化社会管理模式的社区。基于大数据平台,可以智能化管理社区住户信息;可以自动识别小区车牌并进行停车费自助结算和缴费;还可以提供有效的数据集成,结合信息监控中心实现对社区全部数据和影像信息的整合、控制及显示,并对整体可视化监控管理及系统联动指挥调度进行中心管控。
(三)智慧城市医疗
医疗服务问题是广大百姓及社会各界所最关注的一项问题。随着现代人健康意识的提升,人们已经不仅仅是在患病后才会去医院就诊,越来越多的人平时也会定期去医院进行健康体检,这导致医院的服务工作日益繁忙。通过建设智慧城市医疗,可以在很大程度上简化医疗服务流程、提高医疗服务效率。大数据平台在智慧城市医疗中的应用体现在各个方面,包括诊断、治疗、用药等等。此外,在临床医疗操作和医学研究领域中,也可以应用大数据平台来获得更加直观的数据分析。
(四)智慧城市政务
大数据平台在智慧城市政务中有着重要应用。基于政务中现有的电子网,通过对政务各部门的纵向网络进行有效整合,建设统一的信息资源共享平台,能够进一步推动城市政务信息的集中。智慧城市政务的特点是智慧性、公开性、服务性、责任性。智慧城市政务需要依托于大数据平台来提高内外部工作质量与工作效率,也需要依托于大数据平台来与事业单位进行协调统一。大数据平台的应用,有效实现了智慧城市政务的智能化工作、服务、决策及管理功能,大大推动了服务型城市政务建设。另外,大数据平台还对情报指挥功能进行了有效结合,从而强化了对数据的挖掘与分析,进一步提高了政府对社会公务的服务保障、对公共财产的安全保障。
(五)智慧城市公安
现阶段,我国的公安系统工作已经全面实现了信息化管理,而大数据平台的应用进一步完善和加快了公安系统的信息化建设。基于大数据平台,可以轻松实现多警种、高质量、规范化的数据库,从而改变过去公安系统工作的独立性、打破数据资源库的局限性,使不同警种部门之间能够高效沟通、信息共享。大数据平台的应用是以动态形式建立公安系统数据库,让各个公安部门可以掌握更加全面、具体、准确的数据信息,它大大提升了公安系统的快速感应能力。有了大数据平台后,公安系统的很多工作都可以由过去的被动化变为主动化,只需借助大数据平台提前进行预测和判断,即可简单、快捷地掌握相关信息。
综上所述,建设智慧城市是现代城市建设的重要要求,而在智慧城市的建设过程中,必须要牢牢掌握住大数据平台的发展机会。大数据平台对智慧城市交通、智慧城市社区、智慧城市医疗、智慧城市政务、智慧城市公安等的建设均意义重大,我们不能失去大数据平台发展的先机,而应积极根据现有生产技术和市场需求来大力开展大数据平台系统创新。
作者单位:山东万博科技股份有限公司