中国邮政Teradata扩容方案及门户优化

中国邮政储蓄客户信息管理系统扩容建议方案及门户优化1议题Teradata服务器硬件扩容建议应用服务器硬件扩容建议门户优化方案2系统未来一年空间估算估算说明：1、不含恢复已清理的历史数据的估算方法：基础数据与接口是根据每年业务增30%计算，保留13个月数据2、汇总数据：日报1年；月报不低于5年；季报和年报不低于10年；其余有固定生成期限的报表保存期限不低于1年3、汇兑按照每月2000万交易量，年增长20%计算，每交易按照1000B计算，基础占63%,汇总占37%(按目前基础与汇总所占空间比例计算);4、对公的业务量按与国际业务相当计算空间系统当前数据空间(G)到2009-7-31日为止的空间需求(G)基础表汇总合计不含恢复已清理的历史数据含恢复已清理的历史数据基础表汇总合计储蓄3,139.461,839.524,978.984,395.242,648.917,044.15国际业务(上线9个月)48.8733.9582.8268.4284.88153.29代理基金-基金(上线半年)100.97149.16250.13141.36447.48588.84反洗钱900.0072.29972.291,260.00216.871,476.87代理基金-国债与理财100.97149.16250.13汇兑300.00184.00484.00对公数据48.8733.9582.82合计4,189.302,094.926,284.226,314.863,765.2410,080.1012.35TB到2009-7-31日预计系统空间将达到12.35TB3系统所需要扩容的磁盘空间按照Teradata磁盘空间计算方法：用户数据量：12.35TBTeradata空间计算考虑因素：容量计算因子：3.0RAID1：2文件系统因子：1.093Spool空间：1.40磁盘容量计算：12.35TBx2x1.093x1.4=37TB到2009-7-31日，系统需要磁盘容量37TB4系统目前配置（8个节点19TB磁盘空间）5450-45450-35450-25450-14980-44980-34980-24980-16843-26843-1RoboticsSL500(8*LTO2)6841-26841-1160*73G112*73GRoboticsSL500(4*LTO2)2*LTO250Slots4*LTO250Slots2*LTO290Slots2*LTO250Slots2*LTO250Slots生产系统容灾系统4个4980节点:节点：4个4980(MP-RAS,32位,28DPN)磁盘阵列：6841-6456(112*73GB=8TB)磁带库：SL500(3*LTO2,100Slots)TeradataV2R6.1/TTU8.14个5450节点：4个5450(MP-RAS,32位,40DPN)磁盘阵列：2*6843(160*73GB=11TB)磁带库：SL500(5*LTO2,90Slots)TeradataV2R6.1/TTU8.1目前系统磁盘容量：19TB55500系列新产品和目前5450节点技术比较5500H从硬件到操作系统到数据库软件，彻底采用64位，相对于5450是跨代产品每节点可以支持最大32GB内存和4颗CPU每节点支持更多的AMP，因此更节约机房空间和能源具有更高的性能价格比节点5500H5500C5450H类型64位高性能32位共存32位/64位CPU/核心2/41/22/2最大内存32GB4GB4GB/6GB操作系统Linux（64位）MP-RAS（32位）MP-RAS（32位）Linux（64位）性能提升2.6倍1.5倍1扩展性BYNETV31-1024节点BYNETV31-1024节点BYNETV31-1024节点TPerf29.5916.911.21新节点6采用Teradata新产品的两种扩容方案采用新产品的扩容考虑32位产品与64位产品的选择投资保护与性能价格比的考虑最能保护投资的更新换代时机方案1：5500C方案全部保留32位的MP-RAS（每节点内存4GB）与现有4980、5450节点共存目前系统共19TB，因此扩容需增加18TB（37TB-19TB）增加6+2个5500C节点（含2台热备节点）方案2：5500H全部采用64位的Linux现有的4节点4980用于以下应用，以分散负载，提升系统整体性能：Portal数据库服务器反洗钱历史数据查询系统历史报表系统现有4节点5450H从32位的MP-RAS迁移到64位Linux增加内存到6GB，与新增节点共存扩容后目标系统容量为37TB，4节点5450H已有11TB，因此扩容节点需增加26TB（37TB-11TB）增加4个5500H节点75500C方案（MP-RAS、32位）详细配置4个4980:节点：4个4980(MP-RAS,28DPN)磁盘阵列：6841-6456(112*73GB=8TB)磁带库：SL500(3*LTO2)升级到Teradata124个5450节点：4个5450(MP-RAS,40DPN)磁盘阵列：2*6843(160*73GB=11TB)磁带库：SL500(5*LTO2)升级到Teradata126+2个5500C节点:6+25500C(MP-RAS,52DPN)磁盘阵列：4*6843(312*73GB=22TB)磁带库：扩容SL500(8*LTO4)Teradata125500C-65500C-55500C-4HSN5500C-35500C-25500C-1HSN6843-46843-36843-26843-15450-45450-35450-25450-14980-44980-34980-24980-16843-26843-1RoboticsSL500(8*LTO4)6841-26841-1160*73G112*73G312*73GNVServer85500H方案（Linux、64位）详细配置4个4980Portal系统、反洗钱查询、历史报表系统升级软件到Teradata124个5500节点:4个5500(Linux,92DPN)磁盘阵列：3*6843(368*73GB=26TB)磁带库：扩容SL500(8*LTO4)，做LAN-BASE，增加相应的BAR服务器及交换机Teradata124个5450节点：4个5450(迁移到Linux,40DPN)磁盘阵列：2*6843(160*73GB=11TB)升级Teradata125500H-45500H-35500H-25500H-15450-45450-35450-25450-16843-26843-1RoboticsSL500(8*LTO4)160*73G368*73GSwitchMBS-ADMBS-4MBS-3MBS-2MBS-16843-36843-26843-195500C方案与5500H方案技术比较5500H方案能够具有更大的内存，更高的性能，占用更小的机房空间，更能节约能源目前系统5500C方案5500H方案扩容节点6+2节点5500C4节点5500H总节点4个49804个54504个49804个5450H6+2个5500C4个5450H4个5500H系统总内存32GB64GB152GB磁盘总容量(TB)1941388TB（4节点4980）总体Tperf性能值76162165.930（4节点4980）相对于目前系统Tperf性能提升86/2.13倍89.9/2.18倍195.9（含4节点4980）/2.6倍说明115500系列产品在国内银行客户使用情况5500系列是成熟产品，在国内多个客户的系统中已经使用考虑数据安全，国内银行客户都采用单独的开发/测试系统生产系统开发系统测试系统交通银行10个5450+6个5500HLinux平台3台540S1个5450H建设银行18个5500HLinux平台1台550P6个5450H浦发银行2个5450+4个5500Linux平台2台540S540S工商银行8个54501个5450H3+2个5450H12开发系统550P节点：2*DualCoreCPULinux操作系统6287磁盘阵列：64*73GB（4.6TB）RAID1Teradata12550P13议题Teradata服务器硬件扩容建议应用服务器硬件扩容建议门户优化方案14Web服务器：2台OLAP与报表服务器：4台CIM应用服务器：4台ETL服务器：2台通信服务器：2台备份服务器：1台F5负载均衡：2台PC服务器共：15台F5负载均衡：2台交换机：1台客管系统目前应用服务器情况15客管应用服务器扩容需求1期和1.5期接入了本币储蓄、国际业务、代理基金等5个源系统，为满足下阶段系统建设需求，还需接入汇兑、对公、小额信贷等系统，并提供新的应用，提升系统整体性能和安全性，需对应用服务器进行扩容。为满足下阶段系统建设需求，需对应用服务器进行扩容1反洗钱系统建设并未在最初系统服务器设计方案中2由于反洗钱系统的建设并未在系统初期设计方案中考虑，故目前反洗钱应用与CIM服务器共用服务器。由于反洗钱应用包含大量明细信息与CIM服务器本身Weblogic应用系统资源竞争，尤其是内存资源，有时会出现反洗钱的Weblogic应用自动关闭情况。16客管应用服务器扩容需求系统用户数和访问量成倍增长，要求门户访问提供更高的响应性能3系统建设初期的系统用户数设计为10,314人，但随着系统建设与推广，系统目前用户数达到52,000人，月初高峰日登录达14,000人次，系统日均登录4,800人次，较2006年底日均登录2,000人次，增长率为140％。目前门户Weblogic应用与门户Oracle部署在同一台服务器,当大并发量用户访问时会引起了Weblogic和Oracle资源竞争，降低了系统的响应速度。17客管应用服务器扩容需求客管系统提供应用功能点约470个，其中支持的各类统计分析报表约为373张，需按照国家、省、市、县各级别动态生成报表，提供给分布在全行2921个各级机构中的52，000个用户访问。高峰日功能点访问量154，000次，高峰小时功能点访问量32，400次报表日均访问量达到6,901次/日,较2006年底日均访问量2,082次/日，增长率达到231.46%。下阶段随着系统建设的推进，汇兑、对公等新系统接入后预估报表数量至少会增加50％，因此需要对目前报表服务器进行扩容。系统报表数量和报表访问量快速增长，对系统报表生成和访问性能提出了更高要求418客管应用服务器扩容建议增加2台Web服务器2将Oracle从当前的门户Weblogic服务器中分离出来，采用RAC（RealApplicationCluster）方式组建，避免资源竞争，提高可靠性。新增两台Web服务器提高门户响应效率，满足系统访问量增长。增加2台反洗钱专用服务器，将反洗钱应用从CIM服务器中分离出来3新增两台服务器专门用于反洗钱报文生成和数据报送及反洗钱应用服务使用，解决与CIM应用服务资源竞争的问题。利用4980，或者增加2台Oracle数据库服务器，作为门户用数据库服务器119客管应用服务器扩容建议通过对报表服务器的扩容，提高生成报表和报表访问的性能，为下阶段系统建设做准备。增加4台报表服务器，均衡生成报表和报表访问压力，并为下阶段系统建设做准备4建立专门用于文件转发和接口文件的匹配合并处理服务器5建议将目前处于停用状态的全国中心通信服务器启用，专门用于文件转发功能和接口文件的匹配合并处理。网络设备的增加，提高系统稳定性和整体性能6增加两台F5服务器；增加一台与F5连接的交换机（不少于48口）；增加两个机柜。20客管应用服务器扩容后示意图利用4980，或者增加Oracle服务器：4台增加反洗钱应用服务器：2