医院容灾演练方案

EMC容灾演练方案河池XX县人民医院存储容灾演练方案2011年11月EMC容灾演练方案目录第1章实施步骤、效果说明和测试方案.............................................................................................................21.1整个EMCRecoverpoint实施步骤和时间预估....................................................................................21.2效果说明................................................................................................................................................21.3测试目的................................................................................................................................................21.4测试环境说明........................................................................................................................................31.5服务器系统............................................................................................................................................43.5.1常见系统故障................................................................................................................................43.5.2常见系统维护................................................................................................................................41.6测试项目设置........................................................................................................................................51.7具体测试内容........................................................................................................................................63.7.1数据一致性测试............................................................................................................................83.7.2数据容灾故障恢复测试................................................................................................................93.7.3容灾:任意时间点回滚测试........................................................................................................103.7.4容灾:容灾存储恢复至主存储数据测试....................................................................................113.7.5容灾:主存储误操作数据恢复测试..............................................................................................11EMC容灾演练方案第1章实施步骤、效果说明和测试方案1.1整个EMCRecoverpoint实施步骤和时间预估编号实施内容实施所需的时间备注1安装1号VNX5100阵列、2号VNX5100阵列和recoverpoint容灾装置和软件、SAN-Switch交换机3天2安装HIS、LIS服务器，接入到SAN网络，用于连接VNX51001天集成商安装服务器3将数据迁移到新的VNX5100上1天集成商或客户，申请系统维护时间切换时间30分钟4演练1天1.2效果说明1,实现存储间的数据互联互通、相互流动的功能。2,实现主备存储间数据实时同步，主备存储的数据一致、高可用的功能。3,实现当主存储发生逻辑错误后，可以通过备用存储对主存储的数据追回、不丢失数据的功能。4,实现存储上的数据任意时间点回滚功能，有效地避免主数据库的逻辑错误或突然断电导致数据库无法正常运行的故障。并将数据丢失率降低至最小。5,实现备用存储的在线使用功能，当备用存储的数据修改后，能够直接恢复到主存储。该功能可以在备用存储上打开数据库，实现报表、测试、升级、培训等操作，分流用户的业务，降低生产系统的负载。6,完成备用存储的报表、测试、升级、培训功能后，可以通过主存储将其变化的数据继续同步到备用存储，恢复存储间的数据实时同步，保持数据一致、高可用状态。1.3测试目的为了检验是否可以达到客户的要求，在首次完成recoverpoint后，需要按EMC容灾演练方案照以下的要求进行测试：1，实现医院现有NX40及HIS/LIS等应用系统容灾，实现现有存储设备数据同城或者异地容灾功能3，对出现故障以后(服务器,存储,应用软件)进行数据恢复演练，测试数据及应用恢复时间。1.4测试环境说明测试环境组网架构图如下：为实现上述的测试目标，需要在医院测试环境中搭建一套RecoverPoint系统，主要组成部件有:VNX5100，VXN5100系列存储各一台.光纤线及光纤交换机2台IBM服务器，安装WIN2008系统和oracle数据库EMCRecoverpointRPA两台控制电脑两台EMCRecoverPoint应用装置(RPA)本地复制卷本地日志卷VNX5100本地生产卷IBM服务器HIS/PACS光纤交换机VNX5100EMC容灾演练方案1.5服务器系统3.5.1常见系统故障本测试根据实际工作环境下系统可能发生的故障或事故，EMC总结了应用运行时常见故障，并提供数据安全解决之道。常见多发故障：服务器故障SAN网络故障生产存储硬盘损坏生产存储控制器损坏数据库逻辑错误导致数据库无法启动工作人员误操作导致数据丢失黑客攻击人为恶意篡改数据3.5.2常见系统维护本测试根据实际工作环境下系统可能发生的业务和工作情况，EMC总结了常见维护事项，并提供例行维护解决之道。生产服务器补丁升级数据库补丁升级业务系统统计报表应用软件开发测试工作人员培训系统容量不足增加硬盘设备性能不足设备替换EMC容灾演练方案1.6测试项目设置根据上述故障和例行维护特点，同时结合EMC以往客户在安装、实施、运维时的经验设计了以下测试场景：维护项目解决方法测试项异构存储整合EMCRecoverPoint现场不演示生产服务器/小型机故障异地容灾现场演示容灾切换SAN网络故障双链路负载均衡本次不测试生产存储硬盘损坏Raid保护存储基本功能，本次不测试生产存储控制器损坏主备控制器倒换存储基本功能，本次不测试数据库逻辑错误导致数据库无法启动异地容灾现场演示容灾切换工作人员误操作导致数据丢失任意时间点回滚现场演示任意时间点回滚黑客攻击人为恶意篡改数据任意时间点回滚现场演示任意时间点回滚生产服务器/小型机补丁升级容灾存储使用现场演示容灾存储使用数据库补丁升级容灾存储使用现场演示容灾存储使用业务系统统计报表容灾存储使用现场演示容灾存储使用工作人员培训容灾存储使用现场演示容灾存储使用设备性能不足设备替换数据迁移现场演示数据迁移EMC容灾演练方案1.7具体测试内容数据一致性测试：-添加CDP保护卷：模拟生产系统在正常运行时，将指定的应用数据纳入RecoverPoint系统保护的过程，以此验证RecoverPoint系统实施的方便和灵活程度。-删除CDP保护卷：模拟生产系统在正常运行时，将指定的应用数据脱离RecoverPoint系统保护的过程，以此验证RecoverPoint系统更改的方便和灵活程度。-CDP数据复制：模拟生产系统在正常运行时，受保护的生产数据向CDP备份卷复制的过程。-CDP粒度设置：模拟生产系统在正常运行时，在RecoverPoint系统中设置恢复时间点，调整恢复点的粒度，从系统优化的推荐值到最小1秒钟或者是精确到每个I/O-CDP一致性组：模拟生产系统在正常运行时，将指定的应用程序及数据库数据加入到一致性组，以此验证RecoverPoint系统在多个数据源之间的一致性。容灾故障切换测试：-故障切换：模拟生产系统在正常运行时，主存储阵列故障导致应用数据不可用时，RecoverPoint系统如何在备份端启动应用并保证数据一致可用。-故障回切：模拟生产系统切换到备份端运行时，主存储阵列恢复正常后，备份端对应用数据所做的修改可以被保存，并且在应用切换回主存储阵列时上述修改不会丢失，验证整个切换过程的方便和灵活程度。容灾数据回滚测试：EMC容灾演练方案-CDP回滚：模拟生产系统在正常运行时，由于操作失误造成数据丢失，使用RecoverPoint系统恢复到最近一个正常的时间点，在最短时间内恢复应用同时使得数据丢失量最小。-CDP模拟回滚与物理回滚流程：-模拟生产系统在正常运行时，由于操作失误造成数据丢失，使用RecoverPoint系统模拟回滚到最近一个时间点，经检查后此时间点数据仍是丢失状态，继续回滚到上一个时间点，检查数据是否仍然丢失，直至找到最近一个正常的时间点，验证模拟回滚和物理回滚之间操作的便利性。容灾存储使用在主生产存储在使用时，在容备存储打开数据库，进行报表，开发，培训，校验等，同时不影响容灾业务。EMC容灾演练方案3.7.1数据一致性测试测试内容基本功能测试厂商人员测试时间2011年月日局方人员测试目的1、完成对生产数据的复制，生成本地备份数据2、生成基于时间点的复制信息3、检查RecoverPointCDP时间点的粒度环境描述方案/步骤方案描述：1、选定生产环境中的LUN2、指定本地备份存放LUN3、启动CDP保护4、检查CDP时间点的粒度5、在生产服务器上对数据库进行数据更新测试预期结果说明-RecoverpointCDP是基于IO拆分的带外复制技术，其实施对生产主机完全透明-依赖LVM的CDP方案，对生产主机不可避免影响性能，尤其是目标端存储性能配置较差时-依赖LVM的CDP方案，不能做到RPO为零，因为其时间点颗粒数量有256这个限制-依赖LVM的CDP方案，并不能确保RTO为零，因为主机LVM的技术限制造成生产端存储在灾难发生时，生产卷和复制卷的数据不一定能够保持完全一致-Recoverpo