UnitedInformationTechnologyCo.,Ltd.存储应用介绍文件级别:公开2011-09主讲人:汪晓峰UnitedInformationTechnologyCo.,Ltd.Page2存储高清视频应用技术介绍存储高可用技术介绍存储虚拟化技术介绍存储备份、容灾应用介绍主流存储解决方案介绍UIT典型成功案例内容提要目录UnitedInformationTechnologyCo.,Ltd.3高清视频存储的本质应用需求•监控数据一般起码是7×24小时连续工作存储,而且存放时间从半月,一月,半年甚至增长到1年,数据量随着时间增加呈线性增长。•采用高清的数据流量,再加上监控路数达到几千甚至上万路,那就更是对存储的数据容量提出了更高的要求。海量存储需求存储性能需求•视频监控主要是视频码流的持续写入,表现性能好坏决定存储能同时支持多少路码流(通常每路标清码流是384Kbps-2Mbps,高清更是达到4M-10Mbps)。•在多路并发写入数据的情况下,对带宽、数据处理能力、缓存等都有很大影响,对存储需要有专门针对视频性能的优化处理。海量数据安全性需求•在监控视频的录像数据必须在第一时间就能保证是完好的,必须要做到对录像数据的实时性,不间断性和冗余性。UnitedInformationTechnologyCo.,Ltd.4高清视频存储的本质与应用需求•安防监控应用中,由于需要大量存储设备,存储设备中的海量数据,必须被有效的管理起来,需要对最终使用者的使用提供方便、可靠、透明的支持。集中管理需求网络化需求•TCP/IP网络是安防监控技术向网络化方向发展的网络基础,基于TCP/IP网络的存储技术将在安防监控技术网络化进程中发挥不可替代的作用存储的应用方式需求•集中存储与管理;•DVR升级NVR的网点改造;•高清视频监控系统(高清编码器、高清摄像机等)对高清存储的要求。UnitedInformationTechnologyCo.,Ltd.5适合高清视频监控存储技术-集中管理存储IP监控专网…………编码器编码器电视墙集中存储设备应用服务器群组矩阵应用模式分析•服务器和存储设备之间可以通过SAS、iSCSI、NAS、FC协议连接;•前端IPCAM直接接入IP网络,视频信号直写存储设备;•集中存储方式适合于大中型平台的部署•从实际的部署和效果来讲,FC存储由于强大的性能和数据处理能力,在节点较多的监控环境里较为合适;•IP存储由于性能和扩展性的限制,在中小型应用中能具备更高的性价比。………………………………IPCAMUnitedInformationTechnologyCo.,Ltd.6视频管理平台+SAN存储的应用背景及技术特点(集中存储)•具有共享存储及可扩展性的主要,本质上是一种分布式存储系统;•IPSAN可被用于拓展服务器的存储容量,并能提供更多的IT功能,比如RAID、失效备份和虚拟存储等;•IPSAN总体成本廉价便宜;•IPSAN可以作为服务器和嵌入式NVR的替代产品.IPSAN监控应用背景IPSAN技术特点•标准化接口应用简单灵活;•高度集成低廉价成本;•兼容性强,应用领域广泛;•安全可靠。FCSAN监控应用背景•从实际的部署和效果来讲,FC存储由于强大的性能和数据处理能力,在节点较多的监控环境里较为合适。FCSAN技术特点•高性能;•扩展性强;•成本较高;•传输距离有限。UnitedInformationTechnologyCo.,Ltd.7第三方平台软件IP监控专网编码器DVR/DVSIPCAM监控客户端功能定制适合高清视频监控存储技术-NVR(分布式存储)应用模式分析•存储设备中嵌入第三方平台或视频监控软件,实现完整视频监控存储应用功能;•流媒体协议直写存储;•视频流iscsis数据块直写存储;UnitedInformationTechnologyCo.,Ltd.8NVR存储应用背景及技术特点监控应用背景•准消费级:比如连锁商铺、网吧等;这类的应用市场的特征是个体规模较小,但数量庞大,往往有互联网的应用需求,这是NVR的主要低端市场之一;•商业级:主要包括企业工厂、医院、学校、小区、图书馆,写字楼等;这类应用市场的特征是,监控点集中性较强,个体建设规模较大,对录像的要求较高,是中端NVR的主要目标市场;•行业级:主要包括政府机构、金融、军队等大型联网型机构;这类市场对图像的质量、录像时长、设备可靠性要求均比较高,往往有级联联网组网,行业应用系统融合等需求,这也是NVR尚未真正展开应用的主要高端目标市场。NVR的技术特点及在监控系统中的应用优势(相对DVR基础上)•NVR产品技术形态主要包括:基于PC视频管理软件,称其为软件式NVR;基于存储服务器设计的视频存储设备;嵌入式集视频接入、存储、预览、回放和管理于一体的设备,也就是所说的NVR产品•NVR实现部署成本的降低和管理使用的便利;•NVR的网络化传输有效减小干扰,更好的保证图像传输的质量;•NVR系统可以实现真正意义上的视频监控智能化管理;•监控系统建设中NVR更易于系统的融合。高清监控时代NVR新的存储形态:磁盘阵列+录像服务器UnitedInformationTechnologyCo.,Ltd.适合高清时代的运营级视频监控存储-云存储高性能系统扩展数据安全大容量传统监控系统新一代智能监控实现更多的功能普通DVR或存储设备实时监控实时分析统一接口•局域网•广域网•以太网•关键数据可冗余保存,保证关键视频录像的安全•无缝实现容量扩展、硬件更换•全局命名空间•统一的存储访问接口基于云存储架构的高清视频监控系统环境实时监控实时分析资产管理数据挖掘远程网络•存储容量达到PB以上,•实现分级存储•支持更大规模的高清摄像头接入,视频回放更流程9云存储NVR集中存储UnitedInformationTechnologyCo.,Ltd.10监控云存储的应用背景及技术特点•云存储走进视频监控领域主要背景为:视频图像信息的巨大,要求具有足够的存储空间。存储设备作为视频监控系统的主要后端设备之一,应能将前端采集并压缩后的数据通过各处的网络进行集中或分散的存储和管理,并满足视频监控海量存储的需求;•云存储的核心是应用软件与存储设备相结合,针对监控存储,通过应用软件来实现存储设备向存储服务的转变云存储可以实现存储完全虚拟化,大大简化应用环节,节省客户建设成本,提供更强的存储和共享功能。另外云状存储中所有设备对使用者完全透明,任何地方任何被授权用户都可以通过一根接入线与云存储连接,进行空间与数据访问。用户无需关心存储设备型号、数量、网络结构、存储协议、应用接口等,应用简单透;•监控云存储的出现,将突破传统存储方式的性能和容量瓶颈,使云存储提供商能够联结网络中大量各种不同类型的存储设备形成异常强大的存储能力,实现性能与容量的线性扩展,让海量数据的存储成为了可能,从而让企业拥有相当于整片云的存储能力,成功解决存储难题。中心CMUC摄像头控制节点数据节点控制节点数据节点C摄像头二级中心CMU二级中心CMU三级中心CMU三级中心CMU控制节点数据节点控制节点数据节点云存储平台云存储平台云存储平台云存储平台UnitedInformationTechnologyCo.,Ltd.Page11视频存储容量计算实例配置•裸容量(标称容量)•可用容量(使用容量)•RAID损失注*:硬盘是按10进制标称容量1KB=1000B,1MB=1000KB,1GB=1000MB,1TB=1000GB而实际需要容量都是按2进制计算容量1KB=1024B,1MB=1024KB,1GB=1024MB,1TB=1024GB需要换算成统一的计算格式以1000GB的硬盘为例,实际可用容量为1000/1.024/1.024/1.024=931G750GB的硬盘为例,实际可用容量为750/1.024/1.024/1.024=698G例16盘位:每个柜子做一个RAID5(14+1+1),并且每个柜子1个热备,RAID后有效容量比例:14/16每个柜子做一个RAID5(15+1),无热备盘,RAID后有效容量比例:15/16例12盘位:每个柜子做一个RAID5(10+1+1),并且每个柜子1个热备,RAID后有效容量比例:10/12每个柜子做一个RAID5(11+1),无热备盘,RAID后有效容量比例:11/12UnitedInformationTechnologyCo.,Ltd.Page12容量计算实例配置•计算方法公式1:视频监控路数*码流(Mbps)*保存天数*每天录像时间(小时)*3600(秒)/1024/1024/8/RAID比例/TB为单位公式2:视频监控路数*码流(Kbps)*保存天数*每天录像时间(小时)*3600(秒)/1024/1024/1024/8/RAID比例/TB为单位•例子:1300路摄像头,4Mb码流,存储30天计算,需要存储容量,如配置16盘位柜子,所需要柜子数量?1300*4*30*24*3600/8/1024/1024/0.875/0.93=1975TB,按照2T硬盘配置,共需988块硬,配置16盘位的柜子需62个盘柜。UnitedInformationTechnologyCo.,Ltd.Page13存储高清视频应用技术介绍存储虚拟化技术介绍存储高可用技术介绍存储备份、容灾应用介绍UIT存储产品应用解决方案介绍UIT典型成功案例内容提要目录UnitedInformationTechnologyCo.,Ltd.存储应用架构的发展趋势外部存储SAN整合存储内部存储容量可管理性便利第1阶段第2阶段第3阶段30%15%25%UnitedInformationTechnologyCo.,Ltd.机房设施数据网络服务器1存储1服务器2存储2服务器3存储3服务器n存储n。。。。。。。。。。。应用1应用2应用3应用n系统A系统B系统Z机房设施机房设施如何告别“烟囱式”的传统IT结构?UnitedInformationTechnologyCo.,Ltd.如何提高整体效率!将数量众多的物理资源池化成少量的甚至单一的资源,便于集中管理将基于人工的和易于出错的存储管理任务自动化将存储的物理复杂性隐藏起来,将所有的存储作为单一资源来管理提高存储系统的性能提高数据的可靠性和可用性,保证业务的连续性如何改变现状满足未来发展提升整体运行效率降低管理成本降低使用成本UnitedInformationTechnologyCo.,Ltd.存储虚拟化技术•通过将存储系统/子系统的内部功能从应用程序、计算服务器、网络资源中进行抽象、隐藏或隔离,实现独立于应用程序、网络的存储与数据管理”。•存储虚拟化技术将底层存储设备进行抽象化统一管理,向服务器层屏蔽存储设备硬件的特殊性,而只保留其统一的逻辑特性,从而实现了存储系统的集中、统一、方便的管理。定义:UnitedInformationTechnologyCo.,Ltd.Page18存储高清视频应用技术介绍存储虚拟化技术介绍存储高可用技术介绍存储备份、容灾应用技术介绍UIT存储产品应用解决方案介绍UIT典型成功案例内容提要目录UnitedInformationTechnologyCo.,Ltd.19•持续数据保护(CDP)是这样一种在不影响主要数据运行的前提下,可以实现持续捕捉或跟踪目标数据所发生的任何改变,并且能够恢复到此前任意时间点的方法。CDP系统能够提供块级、文件级和应用级的备份,以及恢复目标的无限的任意可变的恢复点。•CDP的部署通常用来保护特定的应用,比如exchangeserver、oracle、sql这样的数据库,cdp允许被删掉的email被恢复,这样和从磁带中恢复会显得更加有效率,管理员只需要CDP的log,就可以发现被删除或丢失的信息,并在磁盘中重建。定义:SNIA定义真正的CDP必須兼备的三大特点:1.数据的变更必须连续的被记录和跟踪2.所有更新的数据必须保存在其他位置3.数据恢复点RPO是任意的而且不需要事先设定-备份复制同步备份备份快照快照快照快照快照I/OI