华为服务器主题演讲

HUAWEITECHNOLOGIESCO.,LTD.SecurityLevel:姓名:余洲职位:服务器与存储产品管理部部长华为服务器主题演讲HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt:R153G0B0:LTMedium:Arial32pt:R153G0B0黑体22pt):18pt黑色:LTRegular:Arial20pt):18pt黑色细黑体华为服务器高速成长2011年中国服务器厂商销售第一发货量高速增长，复合增长133%为一流的互联网厂家提供产品及服务Revenue(USDinmillions)2008200920551202010持续为客户创造价值，实现高速成长2011E250130H1Page2HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt:R153G0B0:LTMedium:Arial32pt:R153G0B0黑体22pt):18pt黑色:LTRegular:Arial20pt):18pt黑色细黑体2011年华为服务器进展回顾华为首发X8000整机柜服务器，带来8%的TCO降低面向虚拟化优化的网卡，网络性能提升50%大内存技术，提升虚拟机数量30%第3代高性能SSD卡，IOPS260k高能效，高性能，30多项SPEC世界记录Page3HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt:R153G0B0:LTMedium:Arial32pt:R153G0B0黑体22pt):18pt黑色:LTRegular:Arial20pt):18pt黑色细黑体华为服务器全景图SolidStateDiskX8000RackCloudServerE6000BladeServerX6000CloudServerContainerServerVirtualizationNetworkCard22款服务器即将上市RH54854wayRackmountServerRH1285,22851U/2URackmountServerPage4HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt:R153G0B0:LTMedium:Arial32pt:R153G0B0黑体22pt):18pt黑色:LTRegular:Arial20pt):18pt黑色细黑体数据中心机柜服务器X8000部署密度提升100%节约62%部署时间单柜年节能5880度电Page5HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt:R153G0B0:LTMedium:Arial32pt:R153G0B0黑体22pt):18pt黑色:LTRegular:Arial20pt):18pt黑色细黑体数据中心服务器X6000超级扩展：支持1280核极高能效：SPEC能效No.1高可靠：支持40度工作XH310EntryComputingNodeUP,HalfwidthXH320HighPerformanceNodeDP,HalfWidthXH620VirtualizationNodeDP,FullWidthX6000Chassis2U-4NodesPage6HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt:R153G0B0:LTMedium:Arial32pt:R153G0B0黑体22pt):18pt黑色:LTRegular:Arial20pt):18pt黑色细黑体为虚拟化而优化的刀片服务器：E6000虚拟化优化+30%VM高可靠性无源背板高性能SPECNo.1BH620Highperformance&PCI-EEXPDP,12DIMMs,2*SAS/SATABH622VirtualizationBladeDP,24DIMMs,2*SAS/SATABH620Highperformance&BigstorageDP,12DIMMs,4*SAS/SATA8U10blades240DIMMs40CPUsPage7HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt:R153G0B0:LTMedium:Arial32pt:R153G0B0黑体22pt):18pt黑色:LTRegular:Arial20pt):18pt黑色细黑体服务器战略：专业、专注、持续创新通用经济长期共同发展端到端无后顾之忧高性能系统性价比最高可持续发展的合作伙伴专业、完整的应用解决方案差异化、增强的性能模块，实现应用性能加速标准、主流、低能耗的服务器Page8HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18pt服务器应用领域的性能加速大数据应用性能加速数据库应用虚拟化应用Page9HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18pt数据爆炸的时代2011年，全球被创建和被复制的数据总量为1.8ZB每两天创造的信息等于从文明伊始至2003年所有信息的总和全球信息总量每过两年，就会增长一倍非结构化数据占80%Page10HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18ptHadoop适合BigData应用并已趋于成熟Hadoop自Yahoo开源、Facebook/Twitter等逐步完善，到Cloudera、Hortonworks等开始提供完整解决方案；国内互联网及企业的业务应用，标志着Hadoop已经走向成熟。以Hadoop为代表的海量数据（BigData）处理技术日趋成熟使得“业务为王”向“数据为王”转变Page11HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18pt为Hadoop加速，应对性能挑战数据流产生创建基于模式分析的数据流分析过程运行于网格计算、Hadoop、MapReduce环境的云基础分析分析员重点关注的问题数据集分析、过滤相关结果报告，分析结论，其他WEB网页等告警、事实现状等输入到其他数据分析系统数据探索（过滤/存储/分析）数据传播数据处理加速专用服务器处理平台网络处理加速数据算法加速Page12HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18ptHadoop数据处理加速：10倍速的提升AcceleratedApplicationLogicFPGAChipPCI-ENICDebugDRAMFlashServiceLayerAcceleratedApplicationDataControlHostServiceLayerMMIOMailboxDMAPROGDebugAcceleratedCardDriverSoftwareHardwarePlugInFPGA支持多种算法实现基于OpenCL的软件实现Page13HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18ptHadoop数据访问加速：数据压缩02004006008001000120014001600NoCompressionZlibLZO14771256586任务运行时间(s)压缩算法压缩后TeraSort测试效果TeraSort性能提升60%CPU占用率降低95%数据量减少了50%60%Page14HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18ptHadoop网络处理加速：网络协处理器HostCPU零参与性能提升50%延迟降低80%Page15SwitchNetworkPacketDistributedEngineCore1Core2CorenOrderEngineDMAEngineSecu.EngineHighSpeedInterconnectBUSAlgor.Engine协处理器HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18pt服务器应用领域的性能加速大数据应用性能加速数据库应用虚拟化性能加速Page16HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18pt数据库数据访问和存储介质特点数据文件随机写异步写入大量的小数据块的随机读写操作日志文件顺序写同步写入，响应延迟低连续位臵的随机读写操作数据库应用面临问题IOPS：数据文件随机读写，日志写带宽：数据文件连续读延迟：在串行化操作中对延迟要求高SSDIOPS：260K@4KB随机读；30K@4KB随机写带宽：读写1400/800MB/s延迟：200us硬盘IOPS:160@4KB随机读；160@4KB随机写带宽：读写160/120MB/s延迟：6ms1、PCIeSSD以100x以上于磁盘的iops以及更小的时延适合数据库IO的要求，2、PCIeSSD内臵的ECC与Raid5引擎给服务器数据库带来更强的可靠性Page17HUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18pt01000020000300004000050000600007000080000RAID10x8SASPCIeSSD(1inst)PCIeSSD(2inst)SSD－MySQL存储应用DBT2benchmark测试环境配臵：2QuadCore5520Xeons(with2HTpercore,16CPUsviaLinux)1000warehouses–100Gdata32connectionsZerothinktimeMySQLConfiguration：innodb_buffer_pool_size=32Ginnodb_flush_log_at_trx_commit=1FileSystem:ext3Page18性能提升8X；使用多instance可再提升1.5X使用优化的Schooner/Percona版本提升更明显8X1.5XHUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18pt0500100015002000250030003500400045005000RAID10x4SASPCIeSSD(1inst)SSD－MySQLcache应用DBT2benchmark测试环境配臵：2QuadCore5520Xeons(with2HTpercore,16CPUsviaLinux)1000warehouses–80Gdata+45Glog=125G32connectionsZerothinktimeMySQLConfiguration：innodb_buffer_pool_size=16Ginnodb_flush_log_at_trx_commit=1FileSystem:ext3FlashCacheCachesize：80Gcache与数据量之比:80/125=0.64Reclaimpolicy：LRUdirty_thresh_pct：80%blocksize：4K合适的cache容量保证较高的命中率,可以获得4X性能提升Page194XHUAWEITECHNOLOGIESCO.,LTD.HuaweiConfidential35pt32pt):18pt服务器应用领域的性能加速大数据应用性能加速数据库应用虚拟化应用Page20HUAWEITECHNO