LeoStor公安视频监控数据中心存储配置方案

龙骧数据
摘要：LeoStor以其优异的大小文件数据吞吐能力、单卷300PB、简单易用的横向扩展和系统运维，超过传统的NAS over FC-SAN和Ceph架构存储，可广泛使用在视频存储的数据中心存储和边缘存储，优异的并行文件读写性能同时满足视频结构化和大数据识别分析使用，让系统的性价比更高。

总体需求

高清摄像头为1080P分辨率，码流为6Mbps，需要保存3个月数据，某市一期技改升级5000个高清摄像头，则存储需求如下：

项目 数据
码流 6Mbps
单摄像头/3个月 3.8TB
5000摄像头/3个月 18,896TB

存储设计

因为视频监控以MB级视频文件为主，KB级图片为辅的存储模式，考虑到视频业务的特点、存储服务器的故障率和最大化有效空间利用率，LeoRaid 2+M、4+M、8+M （M=1、2、3、4）等模式比较适合视频存储。

通过分层存储技术，分成多个目录，原视频流使用LeoRaid 8+2冗余方案的目录，可允许2个存储节点同时故障；视频分析后生成的图片文件和短视频文件，可使用LeoRaid 4+2冗余方案目录，本配置暂时不考虑这部分数据的存储。

  1. 冗余后容量：LeoRaid 8+2，可利用率为80%，则裸容量(1)= 18,896TB ÷ 80% = 23,620TB ；

存储节点设计方案

LeoRaid 8+2方案中，允许同时2个节点故障，若需要2个节点同时故障时，原有数据可读，而数据又可写，则最少需要配置N+M+M个节点，N=8，M=2，则系统最少安全配置节点为12个。

单硬盘容量 硬盘数量 实际裸容量(TB) 24盘位设备 36盘位设备
8TB 2,953 23,624 123 83
10TB 2,362 23,620 98 66
12TB 1,969 23,628 82 55
14TB 1,688 23,632 70 47

备注：绿色区域代表可选。

元数据节点配置方案

由于节点数量多，系统配置4个元数据节点，以确保系统的响应能力，同时每个元数据节点配置2TB的SSD硬盘。设备内的2块操作系统盘做硬Raid 1，所有盘都需要支持外置热插拔，不允许内置。

项目 配置
节点数量 4
CPU 2 * 12核银牌CPU
内存 128GB
元数据盘 2 * 2TB 三星/Intel 企业级SATA SSD HBA
网络 2 * 10GE

LeoStor存储节点配置

设备内的2块操作系统盘做硬Raid 1，所有盘都需要支持外置热插拔，不允许内置。

  • 存储优先型

    1. 节点数量：47 * 4U 3.5”36盘位设备;
    2. 存储硬盘：36 * 14TB希捷企业级SATA机械盘；
    3. 其他：2 * 12核银牌CPU，64G内存，2 * 10GE或4 * 10GE或2 * 25GE；
    4. LeoStor容量许可；
    5. LeoStor对象存储企业版软件许可；

  • 识别全能型

    1. 节点数量：82 * 2U 3.5”24盘位设备;
    2. 存储硬盘：24 * 12TB希捷企业级SATA机械盘；
    3. 其他：2 * 16核银牌CPU，64G内存，4 * 10GE或2 * 25GE；
    4. LeoStor容量许可；
    5. LeoStor对象存储企业版软件许可；
视频监控 海量 数据中心