电影数字化的低成本之道

HDS产品学习2011年1月北京海量智能数据技术有限公司齐晓凯[e-mail]2目录HDS公司HDS技术特点中端产品高端产品HDS公司1989年成立于美国硅谷(美国国家半导体子公司)–承传30余年大型主机设计及制造经验–在全球60+个国家有直接生意往来–在全球170+个国家有间接生意往来–总部位于美国的SantaClara3HDS公司自2000年3月起专注于存储–HDSUSP/9900V/9500V系列–SUN代理9900V系列(2001－2006年)–SGI代理9900/9900V系列(1998－2006年)–IBMGlobalServiceUSA代理HDS9900V系列(2002年－)–HPOEM9900/9900V，XP系列(1998－2008年)–NTTDataOEM9900／9900V系列（1995－2008年）–LenovoCo-Branding(2004/5)–Unisys(2005/4)–AcerCo-Branding(2004/5)4HDS公司5服务中心东北：沈阳西北：西安华北：北京华东：上海华中：武汉华南：广州西南：重庆HDS连续四年高端存储市场份额排名第一6HDS服务和支持7中国地区部分用户8各厂商产品9技术特点先进的系统架构缓存优化及并发能力双活的前端控制器自动负载均衡技术基于SAS的高性能磁盘架构性能指标虚拟化的存储整合企业级容灾平台10先进的系统架构HDS全交换无阻塞架构Vs.共享总线架构11技术特点先进的系统架构缓存优化及并发能力双活的前端控制器自动负载均衡技术基于SAS的高性能磁盘架构性能指标虚拟化的存储整合企业级容灾平台12优化缓存算法是高性能的基础根据控制缓存和数据缓存的操作特点，进行针对性优化13缓存并发能力HDS的320路并发Vs.EMC的32路并发14USPV的控制缓存并发能力为256路，数据缓存并发能力为64路，共256＋64＝320路并发缓存操作HDSUSPV缓存并发能力DMX4的每块Cache板分成四个区，每个区最大只能支持一个IO并发操作，其他IO只能等待。DMX4最大8块Cache板，共8×4＝32个区，即缓存并发能力为32路DMX4只在满配时，才能达到32路缓存并发能力EMCDMX4缓存并发能力缓存并发能力HDS控制缓存和数据缓存分离154321总的数据缓存访问次数:一次完整的读访问，只占用数据缓存的64路并发中的2个Diskreads:把数据从硬盘缓存传输到数据缓存3Metadata:通过指令通道从控制缓存中获取相关数据的位置和状态。本操作和数据缓存不发生关系。1Metadata:通过指令通道从控制缓存中获取相关数据的应该放置的位置和状态。本操作和数据缓存不发生关系。2Diskreads:把数据从数据缓存传输到CHIP4缓存并发能力竞争对手控制缓存和数据缓存不分离16Front-endBack-endMetadata:通过指令通道从缓存中获取相关数据的位置和状态。本操作需要访问Cache。12341总的Cache访问次数:一次完整的读访问，占用了数据缓存32路并发中的4个2Metadata:通过指令通道从缓存中获取相关数据的应该放置的位置和状态。本操作需要访问CacheDiskreads:把数据从硬盘缓存传输到Cache3Diskreads:把数据从Cache传输到CHIP4技术特点先进的系统架构缓存优化及并发能力双活的前端控制器自动负载均衡技术基于SAS的高性能磁盘架构性能指标虚拟化的存储整合企业级容灾平台17双活控制器18标准清晰度（50Mb/s）实测数据：112路并发读19技术特点先进的系统架构缓存优化及并发能力双活的前端控制器自动负载均衡技术基于SAS的高性能磁盘架构性能指标虚拟化的存储整合企业级容灾平台20基于SAS的高性能磁盘架构21Specifications146GB146GBModelNumberST3146356SSST3146356FCInterfaceSAS3Gb/sFibreChannel4Gb/sCache16MBytes16MBytesCapacity146GB146GBArealdensity(avg)165Gbits/inch2165Gbits/inch2PHYSICALHeight(max)26.11mm(1.028inches)26.11mm(1.028inches)Width(max)101.85mm(4.010inches)101.85mm(4.010inches)Length(max)146.99mm(5.787inches)146.99mm(5.787inches)Weight(typical)674grams(1.487pounds)674grams(1.487pounds)PERFORMANCESpindleSpeed15,000rpm15,000rpmInternal(Mb/s)1051to22251051to2225Sustained(MB/s,1000x1000)171to110171to110Averagelatency2.0msec2.0msecRandomreadseektime3.4msec3.4msecRandomwriteseektime3.9msec3.9msecRELIABILITYMTBF1,600,000hours1,600,000hoursAnnualFailureRate0.55%0.55%PowerMaximumstartcurrent,AC3.88amps3.90amps基于SAS的高性能磁盘架构22全双工SAS接口和点到点交换结构，最大96Gb/s后端带宽32条后端磁盘通道，每个磁盘扩展箱箱有都8条冗余通道配置消除了传统FC环路仲裁瓶颈(其它中端阵列均采用的后端设计)有利于故障和失效部件的快速定位和隔离通用的磁盘扩展箱可灵活混合配置SAS和SATA磁盘，实现存储系统内的自然分层管理SASvsFC23FCSAS仲裁环设计的架构全交换架构4Gb/s传输率3Gb/s传输率*4路并联=12Gb/s带宽分享给环路上的硬盘共享每个硬盘独享3Gb/s带宽机械组件完全相同技术特点先进的系统架构缓存优化及并发能力双活的前端控制器自动负载均衡技术基于SAS的高性能磁盘架构性能指标虚拟化的存储整合企业级容灾平台24性能指标权威第三方机构SPC25TheStoragePerformanceCouncil(SPC)isanon-profitcorporationfoundedtodefine,standardize,andpromotestoragesubsystembenchmarksaswellastodisseminateobjective,verifiableperformancedatatothecomputerindustryanditscustomers.SPC(存储性能委员会)是一家非赢利性组织，旨在制定存储系统基准、实现其标准化并进行推广，致力于为计算机行业及其客户提供客观、可证实的性能数据。所有公司、学术机构和个人都可成为SPC的成员。基于存储行业的需要以及行业所关注的问题，SPC于2001年创建了第一个行业标准性能基准，旨在促进存储性能的提高。(GB)ConfigIBM-SANVolumeControllerEngines01-Feb-10380,48997,581.66IBMSystemStorageSANVolumeControllerv5.1(6-nodeclusterwith2IBMDS8700s)Sun-StorageTek9990VSystem01-Oct-07200,24626,000.00Oracle-StorageTek9990VSystemHDS-USPV01-Oct-07200,24626,000.00HDS-USPVHP-StorageWorksDiskArrayXP2400001-Oct-07200,24626,000.00HP-StorageWorksXP24000DiskArrayIBM-SystemStorageDS8000Turbo05-Dec-06123,0339,103.36IBMSystemStorageDS8300TurboHDS-AdaptableModularStorage250024-Mar-0989,49215,900.00HDS-AMS2500Oracle-SunStorage6780Array01-Jun-1062,26213,742.22SunStorage6780Array(8Gb)IBM-SystemStorageDS530008-Mar-1062,24413,742.22IBM-SystemStorageDS5300(FDE)NetApp-FAS3170System10-Jun-0860,51519,628.50NetAppFAS3170Sun-StorageTek6540Array15-Jun-0746,4926,890.00OracleStorageTek6540ArrayIBM-SystemStorageDS480010-Apr-0745,0156,871.28IBMSystemStorageDS4800HDS-AdaptableModularStorage230024-Mar-0942,5037,955.00HDS-AMS2300HDS-AdaptableModularStorage210024-Mar-0931,4993,967.50HDS-AMS2100USPV性能比较一览27比较项目HDSUSPVEMCDMX-4IBMDS8300Turbo体系结构全光纤交换式结构全光纤点对点结构双机cluster结构前端通道最大数量/速度224/4Gbps64/4Gbps128/4Gbps后端通道最大数量/速度64/4Gbps64/4Gbps64/2Gbps前端实际最大带宽896Gbps256Gbps512Gbps后端实际最大带宽256Gbps256Gbps128Gbps最大IOPS450万无任何官方材料无任何官方材料SPC-1第三方独立测试结果200245.73未有任何测试纪录123033.4最大Cache544GB数据缓存512GB控制缓存32GB512GB(可用256GB)256GBCache最大并发数3203216技术特点先进的系统架构缓存优化及并发能力双活的前端控制器自动负载均衡技术基于SAS的高性能磁盘架构性能指标虚拟化的存储整合企业级容灾平台28虚拟化的存储整合平台29ERPVideoStreamingDataMiningE-mailPrintServices100%HighPerf.ArchiveBackup99.9%GeneralPurposeFileandVTLServicesOneplatformforalldata存储整合技术对比30功能基于存储控制器HDSUSP系列基于网络的虚拟化产品（如IBMSVC)卷映射由USP控制器完成，位于SAN网络边缘位于SAN网络核心，大量改造现有SAN架构数据移动现有的SI、TC、HUR、VolumeMigration等各种技术需要开发新的复制工具配置信息保存在可靠的磁盘阵列中保存在网络层异构主机连接Mainframe和开放主机开放主机是否增加存储系统的复杂性USP使用标准存储接口，不增加存储系统的复杂性需要主机Agent，新的交换机型号,新的数据移动工具,映射表，虚拟应用服务器和软件高性能，低延迟3500KIOPS,没有网络延迟增加网络层延迟，没有性能增加灵活的连接性和扩展性由于提供虚拟端口，可以连接更多主机,而且能够管理petabytes的容量没有虚拟