搜索
文档编号产品版本密级QD-POS-037V1.0内部产品名称：共5页应急预案培训与演练(仅供内部使用)编写：编写日期：年月日审定：审定日期：年月日批准：批准日期：年月日1/5钱袋网系统应急预案根据《钱袋网应急处理和灾难恢复的制度》的相关规定，制定《钱袋网系统应急处理预案》。本预案适用于钱袋网系统出现的各种突发情况，不适用于正常的系统运维工作。运维部门依照本预案的应急工作指引，采取有效的应急措施，尽快恢复系统的运行，最大限度地保障业务的连续性，降低由于系统原因而导致的影响和损失。一、一般性系统故障应急预案：一般性系统故障是指主机及服务器系统、网络通讯、应用系统、业务信息和数据等资源的运行故障。针对以上故障将采取以下预案：1、web服务器故障Web服务器采用了RoseMirrorHA双机热备的方式，当正在运行的主机出现硬件故障的时候，系统会自动报警并进行备份机的切换，将运行系统的主机切换到备份的那台服务器上。2、数据库服务器故障：数据库服务器采用PostgreSQL和双机热备软件：RoseMirrorHA。利用RoseMirrorHA实现时时数据库镜像功能来保证系统的冗余和安全性，当数据库服务器出现硬件故障的时候，RoseMirrorHA将自动将服务切换到备机。并在备机镜像数据的基础上，继续为客户端提供业务服务，不会使整个系统出现中断。3、网络通讯故障：交换机等设备在机房有相同硬件的备份。网络设备的配置文件都在本地有留存。当交换机等硬件设备出现问题的时候，立即用相同的设备进行替换，并把本地留存的配置文件在硬件上恢复。这样整个系统可以立即恢复。4、应用系统故障：应用系统分布于web服务器和数据库服务器中，web服务器和数据库服2/5务器采用双机热备的方式。一旦应用系统出现故障，将自动切换到冗余备份系统。二、机房整体性故障应急预案：机房整体性故障是当前系统所在的机房出现大面积的网络通讯故障，经与机房确认半小时之内无法恢复、以及出现火灾、水灾、地震等重大灾害导致的机房整体瘫痪等情况。一旦出现上述情况，将采用同城异地机房切换预案：1、运维管理部门根据《钱袋网应急处理和灾难恢复的制度》立刻在同城备份机房启动备份系统。2、对备份系统实时监控，确保主机设备、网络通讯、应用系统、数据访问全部运行正常。3、通知各相关部门系统已经切换到异地备份系统，做好相应的维护管理工作。4、配合主机房完成系统恢复工作，如主机房故障严重，24小时内无法恢复，根据《钱袋网应急处理和灾难恢复的制度》建立新的同城异地备份系统。钱袋网系统人员培训1.1安全管理人员的配备系统配备四名安全管理人员：系统管理员、后备系统管理员、数据库管理员、网络管理员。3/51.2关键岗位人员管理与培训1.2.1关键岗位的双人员配置：关键岗位系统管理员配备后备系统管理员一名，当系统管理员因某种原因不能到岗时，后备系统管理员承担系统管理员的全部责任和权限，带领数据库和网络管理员进行系统的维护和监测，保证系统安全、有效、稳定的运行。1.2.2关键岗位的人员培训和上岗制度：关键岗位人员必须从在公司有一定工作年限的人员中挑选。人员上岗前必须进行严格的培训，培训时间不得低于2个月。培训结束后必须在新岗位上实习3个月才可以上岗。关键岗位人员必须半年进行一次培训，并由公司内审部门对关键岗位人员进行审计，以保证关键岗位的安全。1.2.3关键岗位的人员的双人控制原则：敏感或重要信息均采用两人或多人共同协调操作。登录口令和操作口令需分人保存。保证重要或敏感数据不能被一名人员直接访问，从而保证数据的安全性。1.3人员录用后培训新员工通过常规人员录用条件（见人员录用、离岗、考核等方面的管理制度）后，上岗前由在岗同事带领对整体系统进行学习熟悉，系统管理员和后备系统管理员学习期为三个月，数据库和网络管理员学习期两个月，以保证新员工胜任当前工作。4/5钱袋网系统应急演练每1个月系统管理员分别会就主机系统、网络通讯设备、应用程序系统、和数据库系统在备份机房进行模拟故障恢复演练：1、web服务器故障Web服务器采用了RoseMirrorHA双机热备的方式，当正在运行的主机出现硬件故障的时候，系统会自动报警并进行备份机的切换，将运行系统的主机切换到备份的那台服务器上。2、数据库服务器故障：数据库服务器采用PostgreSQL和双机热备软件：RoseMirrorHA。利用RoseMirrorHA实现时时数据库镜像功能来保证系统的冗余和安全性，当数据库服务器出现硬件故障的时候，RoseMirrorHA将自动将服务切换到备机。并在备机镜像数据的基础上，继续为客户端提供业务服务，不会使整个系统出现中断。3、网络通讯故障：交换机等设备在机房有相同硬件的备份。网络设备的配置文件都在本地有留存。当交换机等硬件设备出现问题的时候，立即用相同的设备进行替换，并把本地留存的配置文件在硬件上恢复。这样整个系统可以立即恢复。4、应用系统故障：应用系统分布于web服务器和数据库服务器中，web服务器和数据库服务器采用双机热备的方式。一旦应用系统出现故障，将自动切换到冗余备份系统。