四、云存储系统

1、监控云存储建设要求

随着前端监控点位的增加，存储系统中需要存储大量的视频数据，存储系统里面的录像也会快速增长,存储空间要求增大。而且当存储系统内的录像过快增长，录像的检索查找等操作将会给存储系统带来巨大的压力，特别是单台存储下面存放的录像超过一定数量会造成查找效率急剧下降。为了满足存储空间后期扩展要求，以及配合大数据平台实现快速存储、快速查找，本次基于已建IPSAN存储设备实现云存储升级，要求对原有存储设备进行有效利用，并实现无缝接入。

视频云存储系统需安全、可靠、易管理，实现大容量视频、图片、过车数据的集中存储，事件发生时可以随时变更录像时长并即时生效和不停机扩容存储以满足增加时长的存储量要求，以确保视频图像存储的安全性、可靠性。

云存储要针对治安监控、卡口大数据分析与挖掘，满足大量结构化数据、非结构化存储和分析需求研发而成，整体系统提供高速的数据库读写和大数据分析服务。系统支持高达千亿级的数据存储和分析，结合Hadoop架构，能够具备更快的检索和计算能力。基于Hadoop架构和云存储系统的高耦合对接，完善实时事件处理功能，实现海量信息的快速处理和推送。

云存储系统应采用集群架构，通过虚拟化技术实现存储资源的统一分配、空间调度管理。支持视频图像、图片按照时间段分布在存储系统内不同的存储节点上，对应的存储空间能够无缝的扩大和缩减。系统支持负载均衡和智能路由，保障系统整体设备运行的稳定性和高效性。存储节点的添加或删除不能影响整个系统的正常工作，系统最大存储容量不低于240PB。

要求云存储系统能够在系统容量达到规划规模时，性能指标不下降。视频存储应避免长期循环复写产生的文件碎片问题。支持视频、图片、数据信息数据的直存功能。

设备性能要保证当有硬盘故障，设备做RAID重建时，原接入容量视频数据依然能可靠写入数据不丢失，并且满足调阅要求，性能指标不下降。

存储设备的关键部件必须做到双冗余，降低存储设备硬件故障，并考虑多种硬盘冗余技术的使用;

前端设备故障情况(被破坏，意外停电，网络中断)，前端设备故障前时间段图像数据必须保存在存储设备上(时间粒度到秒)，历史图像能够做到一秒不丢，保障公安视频录像的完整性和可靠性，并能被多个用户的客户端设备立即检索到;任意一台存储设备故障情况下，允许系统自动指定网络上任意一台备份存储设备接替工作;

从公安实战及大数据挖掘应用角度出发，要求存储录像能够满足尽量减少检索时间，能够快速精度定位到需要查询的时间点，并检索到当前时间前一秒的录像，如具备即时回退等功能;

视频存储设备应采用高密度设计，尽可能节约机房空间，降低系统基础用电量。支持基于硬盘、硬盘组和整机的自动/手动休眠和自动/手动唤醒，有效降低系统能耗，节约运行维护成本。

卡口图片存储应满足至少3个月时间期限，过车数据存储时间应至少满足2年时间期限，在大规模数据下，数据查询需快速、准确。