监控分散式存储与集中式存储的探究

孔亚江

浙江中控太阳能技术有限公司 浙江杭州 310053

约束满足问题（commercial service provider，CSP）是人工智能的中心问题之一。在计算机科学特别是人工智能领域中的很多问题都可表示为约束满足问题，即对包含n个变量集合中的各变量在其相应值域内赋值，求出所有可能n元组，使得给定约束集合同时得到满足的问题。求解这类问题一般采用回溯法。一般情况下求解比较困难，甚至是NP-hard问题。为减少回朔次数，提高搜索算法的执行效率，多是采用相容技术进行优化。相容技术在解决约束满足问题中起着重要作用。一方面，在搜索之前进行相容的检查，可以产生解的集合或极大地化简问题的规模;另一方面，在搜索过程中保持相容，相比其他算法在付出一定的时空代价的情况下能够得到合理的问题规模的压缩，因此仍然被认为是处理大规模难解问题的最有效的一般方法。相容算法可以看成是求解约束满足问题回溯搜索的一种优化和预处理过程。已有的并行相容算法的研究主要是针对弧相容的。并行弧相容算法存在两个主要的问题：①如果出现不相容弧，影响并行效率，并行度下降（甚至变成了串行）；②不乏适用于全局约束相容性检查。全局约束包含多个或者所有问题中的变量，可以使得它们相比于简单的局部相容具有更好的剪枝。

1 分布式存储的主要问题

软件定义存储（SDS-Software-definedstorage）是一种数据存储方式，使用通用的x86设备组成分布式存储替换传统集中式存储，是一种新的高性价比的存储技术解决方案。某运营商省分公司自2015年开始对国内几个大厂商的分布式存储产品进行功能及可靠性测试，2016年初开始在虚拟化资源池进行小范围部署，2017年扩大部署规模并接入重要业务系统，根据2018年的年中统计，目前分布式存储承载的核心系统包含中心化、CBOSS、CRM、统一开通等；非核心系统包含日志分析、数据稽核、统一认证和渠道管理系统等[1]。

2 监控分散式存储与集中式存储

2.1 二次升级后系统所需分析

在系统进行二次升级之后，无论是需求还是阵痛都经过了一定的瓶颈以及限制，人们必须重新规划原有网络。①针对项目进行规划，并对设备进行选型。对于项目规划好坏来说，这是整个项目经历长时间的运行以及二次升级之后，项目一期则是针对某安防企业进行的一种设计，建设三期工程的时候，有比较重要的瓶颈效应产生。在网络具体需求以及发展的过程中，该项目团队还邀安防厂商和传输设备的厂商以及系统集成厂商展开了全面深入地探讨，并且确定了技术发展的趋势以及业务所需。②针对安防前端进行监测，并且对存储升级进行分析。从服务器再到前端的摄像机展现了设备实时的管理以及具体的巡检，进而使得前端摄像机再到存储设备数据进行了存储，能够降低中间服务器所需以及故障节点出现问题，可以在第一是间对前端以及存储服务器之间存在的差异进行确定，已经有越来越多地存储缺陷开始出现，必须对CVR和云存储等密度比较高的设备进行引进，通过集约化和扁平化存储的架构实现数据的存储以及调用。撒吗提高二次检索所需以及重要数据的可靠性[2]。人像卡口和视频浓缩以及事件回放等多种智能化工艺的产生，必须一传统十倍的NVR突发流量在调取过程中的需求进行，无论是一般的NVR，还是DVR以及RAID功能NVR，都很难得到最终的目的，必须在专业CVR和云存储设备的作用下开展推流保障。对于人像的卡口和微卡口以及车辆出入等多种类型的高度离散以及安全性需求来说，需要选择RAID5/6以及网络化的RAID才可以对数据安全性进行保障。此时，必须提高存储以及传输网络本身的可靠性。④设计传输的网络。需要对一张万兆的数据环网进行建设，以此对数据可靠性以及高效性进行保障，与此同时，因为数据方面的影响，集中式的存储所提出的传输网流量要求非常高，工作人员需要对以往的星型网络的架构实施万兆升级以及多链路配置。

2.2 分散存储与集中存储的利弊

①分散存储减少干线需求。可以减少干线的网络压力和避免因上联网络的中断所造成的录像中断。②分散存储设备小、功耗小、易入门、易布置。分散存储一般采用64路或128路的NVR，结构简单布置方便。但带来的问题主要有维护距离远、无数据保护、运维监管难。NVR的系统是采用通道添加的方式，当一个64路NVR设备出现第65路摄像头的时候就必须重新添加存储服务器，灵活性较差。③分散存储日常维护和环境监测麻烦。由于早期采用分布式存储，每次维护周期需要走遍27个街道机房进行例行检查。当发生硬盘故障、电源故障等问题时，路程时间就占了70%以上，单次故障的抢修成本超过500元（车辆+人工）。采用了分布式的存储，每次需巡检27个机房的电压、温度、湿度等信息，发现异常还需要和其他部门协调。④分散存储设备扩容麻烦，如果每期扩容都要考虑26个机房UPS、机架空间、空调制冷、交换机端口等是否能够满足承载的问题，工作量较大。如采用集中存储可以将设备集中在3-5个分中心机房，在机房扩容的时候只需要考虑这几个分中心机房的各项因素，远比考虑27个机房的扩容省时、省力、省心[3]。

2.3 现阶段集中式存储与分布式存储适用场景建议

由于现阶段集中式存储在时延、稳定性和软件成熟度方面有明显优势，因此较适合应用于有数据强一致性要求、高IOPS、低时延的OLTP类交易业务场景；而分布式存储适用于海量数据、大数据块、顺序读写、时延不敏感的场景。

3 结语

综上所述，在该项目当中，经过分散存储向集中存储的升级改造之后，从以往的存储节点上进行了降低，以往的千兆干线也向万兆干线进行了升级，使得千线万兆得到了很好地传输，保存录像云存储，能够帮助公安网络浓缩视频，并且融入智能化的数据保障。