大华iSCSI直存解决方案

iSCSI直存解决方案目录第一章.概述...............................................................................................................................3第二章.需求分析.......................................................................................................................42.1背景挑战...........................................................................................................................42.2主体需求...........................................................................................................................52.3补充需求...........................................................................................错误!未定义书签。第三章.方案架构.......................................................................................................................6第四章.业务流程.......................................................................................................................74.1直存配置流程...................................................................................................................74.2录像存储流程...................................................................................................................7第五章.方案特点.......................................................................................................................8第六章.产品介绍.....................................................................................................................11第一章概述当今视频监控技术伴随着计算机、网络、存储、芯片技术的进步而迅速发展，从模拟视频监控逐渐往IP网络监控发展，监控图像的高清化需求也日益强烈，监控的规模也从原来的一个园区扩大到整个城市，甚至是跨省联网监控。但随着监控规模、监控点位、监控质量的提升，海量的高清视频数据该如何传输，以什么样的方式进行存储，如何才能提高存储业务的可靠性和高效性，是业内亟需解决的问题。基于市场急需一套安全、可靠、高效、稳定并且便于维护的解决方案来管理整个监控数据存储业务，大华依托强大的研发实力，推出了iSCSI直存解决方案，将视频监控的视频数据采取“时间索引+块数据”的数据管理方式，能够帮助用户在提高存储业务的可靠性与高效性的同时降低系统复杂度，并且减少投入与运行的成本，满足大规模可靠性应用的需求。第二章需求分析2.1背景挑战业界目前较为典型的监控存储的数据管理方案是：“视频编码器＋媒体服务器＋存储系统”。其中媒体服务器是系统的核心，由其负责媒体数据流的分发、录像、以及VOD点播，前端设备采集的视频流经流媒体服务器转发以打包的形式写入到存储设备。如下图：这种流媒体服务器+存储系统方案中，数据管理基于文件系统，所有的录像数据通过媒体服务器时，被转成了标准的流媒体文件，再进行存储。存储方式利用了传统文件系统自身的特点，系统开发较为简单，但降低了监控存储的效率。除文件系统自身的不足之外，方案还会受到流媒体服务器能力的影响。随着监控规模日益扩大，一台流媒体服务器无法满足业务的需求，需要将更多数量的媒体服务器组成一个集群。受限于媒体流服务器的集群能力，媒体服务器的数量不能太多，一般十几台媒体服务器就达到了一个集群的极限。在构建平安工程这类大规模监控系统时，此种方案往往会遇到比较大的问题，主要体现如下：集群式的服务器管理模式，投入、运行成本高、能耗大，不符合绿色环保。系统复杂度高，大量的媒体服务器使系统管理变得复杂，出现问题时难以定位，可维护性差。系统存在全局故障点，当面对突发事件，出现多个热点区域的时候，大规模突发的流量很容易导致服务器的瘫痪，而中心服务器或流媒体服务器因故下线时，会导致整体或者部分存储业务无法进行，增大了丢失视频数据的可能性，系统可靠性差。2.2需求分析基于iSCSI协议的直存方案，其核心在于前端编码设备通过iSCSI协议，把视频流直接写入存储设备，中间无需过多的转发环节，尽显简单、高效、稳定、易扩展等特性。主要需求包括如下：1，方案中无需为了存储而部署流媒体转发服务器流媒体服务器仅仅体现在客户端实时请求视频转发和录像点播上，一般情况下，由于客户端数量和大屏上墙数量有限，方案中，无需太多流媒体转发服务器。2，存储设备无关性iSCSI直存方案中，只要支持iSCSI协议的IPSAN，都能接入到方案中。存储设备无关性将有效提高系统的兼容性和可扩展性。3，数据块存储，录像秒级查询媒体流以数据块的方式进行存储，以时间轴的形式展现给用户，拥有更快的定位速度和读取速度。4，存储业务高度完备、独立，容错性更高iSCSI直存方案中，当管理服务器出现故障时，原有存储业务不会中断，保证录像存储的安全、可靠。第三章方案架构iSCSI直存解决方案采用了基于iSCSI协议的IPSAN直存技术，抛弃了传统的流媒体服务器，在IP网络的基础上，采用前端设备直写IPSAN存储的方式，实现了全局性的存储资源读写访问，简化了系统架构系统。方案架构主要分为前端采集、后端存储和中心管理管理平台组成。前端采集系统：主要负责前端实时视频采集；后端存储系统：主要负责存储前端采集的视频数据；中心管理管理平台：主要负责前端设备管理、存储空间分配管理及直存配置管理等业务业务流程图如下：第四章业务流程前端设备基于标准的iSCSI协议，将录像等数据存储到标准的iSCSI存储设备（ESS系列磁盘阵列）上，平台管理服务器能从iSCSI存储设备读取得到录像文件，进行录像回放等业务处理逻辑。管理服务器与前端设备之间仅进行一些必要的控制信令交互。前端设备从管理服务器获取初始配置后，可脱离管理服务器长时间独立工作，存储数据流只发生在前端设备与iSCSI存储设备之间，如此大大降低了管理服务器的运行压力。4.1直存配置流程用户可通过平台客户端对前端设备进行集中直存配置，包括需求容量、码流类型、存储计划等，平台根据用户的配置信息，从储存资源池内为前端设备分配存储块，前端设备根据录像计划往存储空间写入录像数据。4.2录像存储流程前端设备根据平台配置的存储空间，按照存储计划，通过iSCSI协议直接向ESS存储块写入录像数据和录像索引，管理平台同步获取对应的元数据信息，以便后期快速检索。第五章方案特点1)端到端存储，消除了全局故障点，即使宕机也不影响录像业务的正常运行，系统不存在性能瓶颈，保证了录像业务的可靠性；2)减少了大量流媒体服务器部署，简化了系统架构；3)全局性资源统一管理：中心管理平台负责对所有存储设备、存储空间进行逻辑上的集中管理。同时通过虚拟化技术，所有存储设备相当于一个巨大的虚拟存储硬盘，实现存储空间的动态分配，提高存储空间利用率；4)支持对磁盘阵列进行负载均衡管理，不会导致单个节点存储压力过大；5)基于“时间索引+块数据”存储，支持海量数据秒级检索，大幅提高了数据管理的效率；6)支持检索前端设备断电或者断网前一秒录像；7)磁盘任意区域被破坏，都不影响其他未被破坏数据的回放；甚至格式化后，未被破坏的数据依然可以恢复；8)增加前端点位，不需要线性增加流媒体服务器，大大降低了系统的建设成本、运行成本（电费、空间、空调冷却）；第六章产品介绍综合监控管理平台-专业版DH-DSS-PRO产品特点：•Linux操作系统•支持录像数据修复管理；•存储空间虚拟化管理•采用云机制支持存储空间在线动态伸缩；•基于“时间索引+块数据”存储，支持秒级检索；•支持二次开发，提供平台SDK；•支持符合GB28181、Onvif标准协议的设备接入；•支持符合GB28181/DB33协议的平台级联；•支持双机热备•支持N+M备份•支持业务的负载均衡；•强制断电500次系统无异常；•支持网络或U盘一键升级，并确保服务器不间断运行；详细参数：型号DH-DSS-PRO主处理器英特尔至强E5-2609CPU频率2.4GHZ操作系统嵌入式Linux系统内存8G(4*2)硬盘容量500G*2硬盘接口SAS网卡千兆网口尺寸1U（434mm*394mm*42mm）整机功耗250w安装方式机架式业务功能客户端支持多屏应用，同时展现多个业务界面；支持客户端抓图、连续抓图及本地录像；支持录像打标，按关键字搜索定位录像；支持三维定位控制云台；支持定义用户等级，用于对云台的抢占/锁定；支持多路回放，最多支持36路回放；支持拼接控制器、网络键盘，控制视频上墙操作；支持报警联动存储、上墙、短信、邮件、视频弹出、前端I/O输出；支持智能应用接入（行为分析、智能跟踪、人数统计）；支持远程配置前端设备参数；支持光栅图，百度、Google在线GIS地图；支持地图上视频预览，云台操控，框选选中，设备搜索，查看节点属性，报警闪烁，报警定位居中；支持主流报警主机(博世/霍尼韦尔)接入、支持传感数据接入；智能网络存储DH-ESS50系列产品特点：•专业IPSAN/NAS一体化产品•SBB规范控制器架构•高性能，可扩展性，轻松实现数据存储•支持256路2M、128路4M、64路8M网络视频接入•为视频监控数据提供容错保护机制，切实保护客户的数据安全，支持Raid0，1，5，6，10等磁盘数据冗余技术。•支持硬盘热插拔功能，更换硬盘时业务不间断。•高品质冗余风扇，高稳定电源，加上大华专利的机箱设计，确保满足各种环境下7x24小时不间断存储需求。•支持Windows、Linux、Unix等操作系统。•支持SAS\SATA硬盘•提供基于WEB的配置管理功能，简单易用。•针对监控领域进行软硬件优化，配套其他监控产品形成完整解决方案。•完全标准化设备，兼容各类软件平台。详细参数：型号DH-ESS5048SDH-ESS5048S-RDH-ESS5024SDH-ESS5024S-RDH-ESS5016SDH-ESS5016S-R系统主处理器64位存储专业处理器操作系统嵌入式LINUX操作系统电源-R支持热插拔冗余电源风扇冗余风扇，支持在线更换控制器数量1内存最大8GB机箱整机完全自主设计。采用1.2mm的加厚热镀锌钢板；高精度铝合金滑道；自主专利的抽拉式硬盘架。配置界面WEBGUI存储协议存储协议iSCSI、SAMBA、NFS、FTP视频性能视频接入256路@2M、128路@4M、64路@8M数据管理硬盘个数48个