1©Copyright2009EMCCorporation.Allrightsreserved.高校数据中心建设2011年03月25日虚拟化、一体化及高性能计算2©Copyright2009EMCCorporation.Allrightsreserved.校园数据中心的建设意义1.整合资源,减少学校在运行环境、维护人员等方面的重复投资2.运行平台整合,设置合理架构3.有利于实施有效的安全防护与管理4.架设合理的数据库结构,方便应用之间的数据交换和共享5.数据存储的有效管理3©Copyright2009EMCCorporation.Allrightsreserved.高校信息化建设的趋势建设新一代的数字化大学–资源中心–数据中心–计算中心–管理中心4©Copyright2009EMCCorporation.Allrightsreserved.数字化大学核心应用的特点(示例)应用数据类型性能容量数据保护连续性一卡通系统数据库高中高高数字化校园数据库高中高高网络计费数据库中低高中电子邮件文件中高高中VOD点播文件中高低低网络教学文件中高高中个性化门户文件中中高中高性能计算文件高高中中图书馆管理系统数据库+文件中高中中图书馆自建资源系统数据库+文件中高高中5©Copyright2009EMCCorporation.Allrightsreserved.建设数字化大学面临的挑战数据容量迅速增大服务器不断增加,管理越来越复杂关键应用的业务连续性–高性能–服务不停顿–数据不丢失6©Copyright2009EMCCorporation.Allrightsreserved.EMC虚拟化与云实践的里程碑1990Symmetrix44002006物理分配3GB3GB4GB虚拟资源调配2005全局文件虚拟化SAN虚拟化平台InvistaAvamar虚拟矩阵架构V-Max虚拟LUN技术20032004服务器虚拟化虚拟磁带库FAST技术‘道里’计划2008VMware服务伙伴2009甲甲云端乙云端乙丙云端丙云端云端云端‘e云’服务7©Copyright2009EMCCorporation.Allrightsreserved.信息基础架构更加智能地存储信息实现关键系统的高性能适当的平台,适当的时间,适当的成本8©Copyright2009EMCCorporation.Allrightsreserved.在线事务处理非结构化事务处理(成本低)普通业务系统关键业务系统文件共享要求FCSAN(存储区域网络)数据块NAS(网络附属存储)文件IPSAN(iSCSI)数据块EMC的创新一体化存储解决方案市场领先、面向所有信息和应用程序的存储解决方案9©Copyright2009EMCCorporation.Allrightsreserved.生产服务器磁盘存储系统SAN光纤交换机生产中心iSCSILAN客户端NASNASiSCSISAN存储整合信息基础架构——网络存储•FCSAN:整合第1层应用,提供高性能•IPSAN:使第2层应用程序的整合在成本上可接受•NAS:整合需要共享的大量文件数据数字化校园数据库邮件开发测试•8Gb/s光纤通道•10Gb/s以太网10©Copyright2009EMCCorporation.Allrightsreserved.EMC虚拟化数据中心统一存储平台VMwareESXServer光纤通道SAN磁盘存储系统灵活的连接选项:NAS、iSCSI和光纤通道在需要时为带宽密集型应用程序添加光纤通道以太网iSCSISAN以太网NAS11©Copyright2009EMCCorporation.Allrightsreserved.响应时间(毫秒)051015202530354045505560工作负载–每秒IO数0500100015002000250015KFC驱动器闪存驱动器突破性能障碍前所未有的应用程序性能特征每秒IO数提高30倍以上响应速度提高10倍每驱动器功耗降低38%每IO功耗降低98%每TB重量减少58%无移动部件,实现了高可靠性OLTP工作负载12©Copyright2009EMCCorporation.Allrightsreserved.通过闪存驱动器优化应用系统性能典型应用环境:–数据库系统:Oracle,DB2,SQLServer等典型问题:–随着数据量的不断增长,或并发访问量越来越大,数据库响应速度越来越慢EMC解决方案:–第一步:将数据库的INDEX放置于FlashDisk上,能提高查询性能(最少需要3块闪存驱动器,其中2块做RAID1,1块作为热备盘);–第二步:将数据库的临时表空间放在FlashDisk上,可以提高数据聚合与排序的速度;–第三步:将数据库数据文件都放到FlashDisk上,可以提高数据库整体性能。13©Copyright2009EMCCorporation.Allrightsreserved.?如果存储可以自动分层,将会怎样?挑战您的思维您的关键业务应用程序将始终得到优化永远不需要在容量和性能之间作出取舍可在降低成本的同时提高服务级别14©Copyright2009EMCCorporation.Allrightsreserved.全自动存储分层:FAST支持使用最新的驱动器技术同时优化性能和成本计划在所有EMC平台上都支持此功能FAST基于不断变化的需求自动移动和放置数据第1层第2层第3层适当的平台,适当的时间,适当的成本15©Copyright2009EMCCorporation.Allrightsreserved.西南财经大学一期--存储备份系统16©Copyright2009EMCCorporation.Allrightsreserved.西南财经大学二期—容灾系统CX4-24017©Copyright2009EMCCorporation.Allrightsreserved.高性能计算MPFS系统结构图SAN主存储SAN+NAS高性能运算计算节点MPFSAgent文件系统Metadata文件NFS/CIFS/MPFSEthernet1.计算节点通过NFS发起文件访问请求;2.通过NFS将文件的Metadata返回给计算节点;3.计算节点通过FC或iSCSI进行文件读写。应用服务器群邮件服务器•数据访问接近线速和阵列吞吐量•支持标准文件访问协议(NFS、CIFS)•支持光纤通道或iSCSI连接•对应用程序透明数据库18©Copyright2009EMCCorporation.Allrightsreserved.东北大学网络中心项目项目需求:–应用服务器:10~15台,能够实现数据集中存储,存储容量60TB–高性能计算系统:20TB,需要高IOPS–邮件系统:安宁文件系统邮件服务器,大约30000用户建设目标:–高性能计算系统:多节点并行数据运算,提供高速数据共享访问–提供多平台应用数据集中存储服务–为邮件系统提供可靠安全高效的存储系统19©Copyright2009EMCCorporation.Allrightsreserved.东北大学网络中心系统结构图SAN主存储EMCNS-480图示光纤连接线冗余光纤连接线网络连接线高性能运算计算节点MPFSAgentNAS文件系统文件数据NFS/CIFS/MPFS1GbpsEthernet1.计算节点向NS-480发起文件读请求2.NS-480文件系统将文件的Metadata和文件数据块存储位置返回给计算节点的MPFSAgent3.计算节点通过FC从NS-480中读取文件数据块,并通过MPFSAgent将读取到的文件数据与文件Metadata整合。文件读取完成。文件服务器群邮件服务器20©Copyright2009EMCCorporation.Allrightsreserved.信息基础架构使保护更加有效而且成本合理新一代备份业务连续21©Copyright2009EMCCorporation.Allrightsreserved.使信息保护高效且价格合理根据客户需求量身打造的产品而非“万金油”SnapViewSnapSureRecoverPointAvamarNetWorkerRepliStorEDLPowerPathAutoStartRecoverPointMirrorViewSANCopyCelerraReplicatorRepliStorEDLAvamarVMware/SRMAutoStart远程处理自动处理恢复:无人值守远程信息所有关键数据在远程位置上都能确保安全现场恢复快速、准确、可预见的恢复备份频繁、一致、无中断的备份平台存储、交换机和服务器保护本地远程目标:运营保护及恢复目标:灾难保护及恢复22©Copyright2009EMCCorporation.Allrightsreserved.确保虚拟和物理基础架构中的......所有数据都得到备份并可恢复......同时控制成本并提高效率?如何能够...大量的数据增长转移到虚拟备份和恢复面临巨大压力物理虚拟过渡到专用云EB486EB2,502EB4年增长了5倍23©Copyright2009EMCCorporation.Allrightsreserved.重复数据消除EMC提供了最广泛的采用重复数据消除技术的集成磁盘备份解决方案集到2012年,重复数据消除将应用于75%的备份(Gartner)24©Copyright2009EMCCorporation.Allrightsreserved.信息基础架构虚拟化信息基础架构自动化数据中心运营25©Copyright2009EMCCorporation.Allrightsreserved.虚拟化的目标实现集中统一管理、提高管理效率虚拟化提高业务的连续性提高资源利用率、降低成本提高灵活性和响应度实现IT资源的整合26©Copyright2009EMCCorporation.Allrightsreserved.大连理工大学网络中心项目信息中心的目标:–成为数据中心、计算中心–产品品牌化–服务专业化:原厂5年服务面临的挑战:–提高管理的效率:在编14人,其中网络系统运营仅3人,其他人负责应用开发和应用运行保障–减少系统维护的工作量,让数据中心的老师从事更有价值的工作–应用系统不断增加,服务器数据量的增加造成机房空间不够–数据中心的运营效率:服务器、应用、数据越来越多,每小时耗电140度应用系统:–Email:学生、老师、校友,海南的易邮软件,3*DELL服务器,OCFS共享文件系统–Web服务,DNS6台:32台DELL1U服务器–FTP集群:7台DELL2950,每台直连PowerVault2250JBOD,Lusture并行文件系统–数字化校园:IBMp570小型机,Oracle数据库–VMWare集群:11台DELL6950,每台4双核CPU(整合各院系的小应用,实现应用的动态调整和灵活部署)–网络:以锐捷为主,Foundry,Juniper安全,2层架构:所有核心设备都在数据中心,每个楼只有2层交换27©Copyright2009EMCCorporation.Allrightsreserved.大连理工大学系统架构(一期)SAN主存储EMCCX4-960图示光纤连接线冗余光纤连接线网络连接线iSCSI12个1GbpsEthernet接口FTP服务器群邮件服务器群VMWare服务器群IBMp570Oracle4Gb/s光纤分级存储:Flash+FC+SATA数据保护:SnapView应用服务器群iSCSI28©Copyright2009EMCCorporation.Allrightsreserved.Xx客户成功案例--集中备份项目系统现状客户痛点–凯德商用在全国有32个分支机构(shoppingmall),每个分支都有一套POS系统的数据(1.5GB/分支)需要每天备份,并将备份数据汇总到北京总部异地保存;客户原来的做法是:每周将备份的数据刻到光盘上,通过外包服务提供商送到北京。这种