飞康培训教程第二部分故障恢复和维护

IPStorCDP培训教程（第二部分）美国飞康公司2©FalconStorSoftware2007·AllRightsReservedSESSION灾难恢复3©FalconStorSoftware2007·AllRightsReserved•1:常见应用系统故障的恢复•2:站点级灾难的恢复流程4©FalconStorSoftware2007·AllRightsReserved（一）一般系统灾难的恢复5©FalconStorSoftware2007·AllRightsReserved生产磁盘故障EMC/HDS6©FalconStorSoftware2007·AllRightsReserved生产磁盘故障时的系统报警信息出现报错7©FalconStorSoftware2007·AllRightsReserved数据丢失的恢复•1:通知生产中心/灾备中心提取快照/时间点数据库加载关联数据传输回生产中心（export/FTP)•2:在本地生产中心提取快照/时间点数据库加载（要求具备查询服务器）•加载CDP数据盘的方法：#cfgmgr–vlfcs0（fcs0取决于实际FC卡连接）#importvg-ydatavghdiskXX8©FalconStorSoftware2007·AllRightsReserved出现数据库瘫痪•1:选择快照或者Journal历史轨迹录像•2:rollback回滚•3.启用CDP盘接替生产，生产运行•4.随后通知飞康公司支持人员进行向生产存储的镜像修复9©FalconStorSoftware2007·AllRightsReserved系统升级•1:HACMP双机切换•2:单侧系统升级•3:HACMP系统回切---CDP系统均正常运行，不中断10©FalconStorSoftware2007·AllRightsReserved（二）站点级别灾难的恢复流程11©FalconStorSoftware2007·AllRightsReserved站点级灾难•1:停电•2:自然灾害•3:计划内停机•4:多个设备故障•5:生产网络瘫痪•……….12©FalconStorSoftware2007·AllRightsReserved基本切换原则•1:提升灾备中心CDP（promote/reverse),分配存储给灾备主机•2:识别关联VG/PV/LV--importvg–ydatavg-fhdiskXX--lsvg–o--lsvg–p--lspv–l•3:网络切换•4:启动灾备中心应用系统13©FalconStorSoftware2007·AllRightsReservedSESSION系统维护和优化14©FalconStorSoftware2007·AllRightsReserved•1:CDP常见硬件维护和故障处理•2:CDP软件系统故障的处理•3:日常维护流程15©FalconStorSoftware2007·AllRightsReserved1.必须具备CDPConsole一台2.必须能够以SSH的方式登录到CDP管理器（CDP只提供这一种登录到内部的手段）维护须知16©FalconStorSoftware2007·AllRightsReserved（一）CDP硬件维护硬件支持电话:8008580960硬件报修方式电话支持：861065309507邮件支持：网站支持：软件支持方式硬件服务码序列号:88W2HZX快速服务码:1795185125717©FalconStorSoftware2007·AllRightsReserved1、2、3、4、硬件或软件服务码--快速服务码当前的系统版本故障的现象内容及发生的时间软件的x-ray等日志信息向技术支持工程师描述您的故障现象时,请准备好下述信息和资料,这将有助技术人员更有效的提供服务。技术支持必备信息18©FalconStorSoftware2007·AllRightsReservedCDP硬件故障快速处理序号故障现象描述处理操作1磁盘灯告警磁盘LED灯告警报告飞康公司1.保修卡的硬件维护码2.LED面板的错误代码2CDP设备告警CDP设备告警报告飞康公司1.保修卡的硬件维护码2.LED面板的错误代码3CDP设备LED有错误代码CDP设备LED有错误代码，CDP设备自身无告警1.协商某一时间进行关机2.长按开机键30秒3.重新开启CDP，19©FalconStorSoftware2007·AllRightsReservedCDP硬件故障快速处理(续）序号故障现象描述处理操作4更换硬件需要CDP在关机状态下更换硬件1.协商某一时间进行关机2.CDP关机后，断开所有电源线3.更换硬件设备4.重新开启CDP，20©FalconStorSoftware2007·AllRightsReserved(二)CDP软件系统错误快速处理序号现象描述处理操作1CDP的控制台不能连接到CDP执行PingCDPIP，确认CDP是否存活1.查看CDP硬件是否良好，若硬件出错，执行硬件处理流程2.开启CDP设备通过SSH登录到CDP中，执行#ipstorstatus，有若干进程为“STOPPED”状态。1.软件报修提供软件服务码提供STOPPED的进程名称2.修复所有状态为“RUNNING”3.参见维护手册中的客户端的维护步骤进行主机的磁盘同步和复制策略恢复所有硬件状态良好，无法Ping到CDPIP1.报网管处理网络问题21©FalconStorSoftware2007·AllRightsReservedCDP软件系统错误快速处理(续)序号现象描述处理操作2不能登录容灾中心CDP容灾中心CDP运行良好，但不能登录1.报网管处理网络问题容灾中心CDP出错1.常见问题容灾中心快速修复2.软件报修提供软件服务码提供STOPPED的进程名称3.参见维护手册中的客户端的维护进行修复保护设定或策略22©FalconStorSoftware2007·AllRightsReservedCDP软件系统错误快速处理(续)序号现象描述处理操作3复制状态为挂起复制状态信息出现警告，同时复制为挂起1.在生产中心CDP的复制菜单中选择恢复，在下一复制时间点会开始复制4复制出错复制信息显示错误，无法复制1.报网管查看网络状况2.在复制菜单中选择“同步”进行手动复制容灾中心CDPIP变更1.在生产CDP的复制属性中修改容灾中心CDP的IP复制出现异常错误1.软件报修软件服务代码提供CDP的X-ray文件现象详细描述23©FalconStorSoftware2007·AllRightsReservedCDP软件系统错误快速处理(续)序号现象描述处理操作5快照资源为离线快照资源区域显示为离线状态，无此虚拟磁盘卷的TimeView1.检查硬件状态2.停止复制3.选择快照资源菜单“重新初始化”4.启动复制快照资源区域显示为离线状态，在SAN资源中有此虚拟磁盘卷的TimeView1.删除此磁盘卷的timemark2.停止复制3.选择快照资源菜单“重新初始化”4.启动复制6未知问题的处理除常见问题外，CDP发生了未知问题1．收集CDP的X-ray2.提供CDP的软件服务码3.现象详细描述4.现象发生的具体时间点5.发生此现象之前的操作24©FalconStorSoftware2007·AllRightsReservedCDP系统错误快速处理(续)序号现象描述处理操作8新的timeMark不创建新的timemark不创建，快照资源离线1.停止TimeMark2.修复快照资源状态3.重新设定timeMark策略新的TimeMark不创建，快照资源良好1.挂起TimeMark策略2.恢复TimeMark策略25©FalconStorSoftware2007·AllRightsReservedCDP系统错误快速处理(续)序号现象描述处理操作9TimeMark数量少于设定数目TimeMark的数量少于设定的数量，一直未增加1.检查TimeMark策略2.更改快照资源“停止写入”为“删除以前的timemark”TimeMarK一直新增，但总数少于设定总数1.检查CDP的磁盘容量剩余空间2.在控制台中对此磁盘的快照资源进行扩容26©FalconStorSoftware2007·AllRightsReserved(三)CDP系统日常维护步骤27©FalconStorSoftware2007·AllRightsReserved•飞康CDP维护（一）IPStor状态检测License状态检测物理适配器状态检测物理资源状态检测逻辑资源状态检测复制状态检测X-RAY获取的方法28©FalconStorSoftware2007·AllRightsReserved•飞康CDP维护（二）PV状态检测VG状态检测PV出现问题时的现象无法varyon卷组时严格遵守操作规程（如两台主机不能同时varyon同一个卷组）系统扩展29©FalconStorSoftware2007·AllRightsReserved•飞康CDP维护（三）CDP开机顺序CDP关机顺序30©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-IPStor状态检测•查看状态，执行：ipstorstatus如左图所示，正常情况下都是running状态•可以用ipstorstart/stopall启动或停止服务31©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-检查License状态进入Console右键点击CDP主机名-License出现KEY，左下角是KEY的信息点击“License”摘要，可以看到功能列表32©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-检查物理适配器状态33©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-检查物理资源状态34©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-检查逻辑资源状态逻辑资源是从物理磁盘中“分割”或“整合”形成的；检查逻辑资源是否正常，点击每个逻辑资源看“常规”状态检查逻辑资源是否还在规划的客户端下35©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-检查复制状态1、查看Console界面的复制标签，检查上一次成功同步时间，如果和现在的时间相差在10分钟之内，说明复制正常2、生成复制报告36©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-X-RAY的生成★X-RAY是系统报修的必备文件右键点击CDP服务器，选择X-RAY。然后选择保存的路径即可。37©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-主机PV状态检查1、查看物理磁盘状态lsdev-Ccdisk2、lspv–lhdiskname38©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-PV出现问题时的状态出现报错39©FalconStorSoftware2007·AllRightsReserved飞康CDP维护-PV出现问题时的状态出现报错40©FalconStorSoftware2007·AllRightsReserved#lspvhdisk1PHYSICALVOLUME:hdisk1VOLUMEGROUP:pbc-db01-vg01PVIDENTIFIER:0002adaf827f96cbVGIDENTIFIER0002adaf827f97a6PVSTATE:activeSTALEPARTITIONS:34ALLOCATABLE:yesPPSIZE:16megabyte(s)LOGICALVO