PFI-201508-系统说明书

页码：1/10北京宏远贵德监管报送系统系统说明书编写：北京宏远贵德文件编号PFI-201508-系统说明书文件版/次生效日期总页数10模板编号模板版/次系统名称北京宏远贵德监管报送系统用户确认用户确认页码：2/10修改说明日期版本号摘要作者2015-08-101.0郝宪禄PFI-201508-系统说明书.doc页码：3/10正文目录1概况.........................................................................................................................41.1编写目的...................................................................................................................41.2参考资料...................................................................................................................42应用框架.................................................................................................................42.1框架示意图...............................................................................................................42.2应用框架说明...........................................................................................................43第三方数据接口.....................................................................................................53.1接口方式...................................................................................................................53.2提供现有数据状况...................................................................................................53.3第三方数据问题.......................................................................................................54ETL处理..................................................................................................................64.1环境描述...................................................................................................................64.2ET采用方式.............................................................................................................64.3ET操作.....................................................................................................................64.4L采用方式...............................................................................................................74.5L操作.......................................................................................................................75业务处理.................................................................................................................75.1业务处理描述...........................................................................................................75.2业务处理操作...........................................................................................................86脚本调度.................................................................................................................86.1自动启动任务...........................................................................................................86.2手动启动任务...........................................................................................................87遗留问题.................................................................................................................88报送服务器登录操作.............................................................................................8PFI-201508-系统说明书.doc页码：4/101概况1.1编写目的本文档描述了监管报送系统的应用架构、第三方数据接口、ETL处理、业务处理等环节的逻辑；描述各个环节中提供的脚本和操作。便于日常操作人员维护系统（操作人员根据情况手动启动任务）以及后续系统升级提供参考。1.2参考资料《九恒星提供的开放视图资料.xls》《项目报表状态统计.xlsx》2应用框架2.1框架示意图根据松下电器财务有限公司的系统情况，采用如下应用框架：多维系统数据库监管报送数据库落地数据抽取传输加载ETL指：抽取、传输、加载以科目维度统计数据以账户维度统计数据以客户维度统计数据……1104报送应用大集中报送应用新利率报备报送应用新资本充足率报送应用区域特色报送应用自贸区报送应用2.2应用框架说明多维系统数据库：指有九恒星公司负责开发和维护，提供松下电器日常业务处理的原始基础业务数据库。ETL处理：从多维系统数据库中，抽取、传输、加载相关的业务数据的处理环节，PFI-201508-系统说明书.doc页码：5/10完成从第三方系统数据到监管报送数据库的整合。监管报送数据库：满足监管单位要求报送报表的数据源。业务处理：根据报送要求进行数据的统计分析。监管报送应用：满足对系统管理、权限管理、任务管理、数据报送等系统相关功能。3第三方数据接口3.1接口方式经过多次和第三方多维系统九恒星服务商交流，最终以开放视图方式，提供现有的相关数据。对暂时不能满足需要的数据，九恒星将在新版本中提供视图数据，具体细节期待新系统。3.2提供现有数据状况多维系统数据库：MSSQLSERVER2005数据库机器IP地址：10.192.1.56开放的用户名：hyuser开放的密码：hyuser开放的视图：见《九恒星提供的开放视图资料.xls》，根据此资料完成ET的脚本的相关编写。3.3第三方数据问题主要问题是信息不完整，信息之间的关联问题，问题描述：1、外币存款、贷款业务中的利率信息2、外币存款、贷款业务中的开始日期、终止日期信息3、同业业务的客户信息、交易信息4、贷款业务的交易信息和贷款状态信息5、每日汇率信息6、存款客户信息和交易信息7、外币定期存款的交易信息PFI-201508-系统说明书.doc页码：6/108、节假日信息不完整9、汇兑信息10、自贸区客户的信息和交易信息11、票据业务及交易信息4ETL处理4.1环境描述ETL（E-抽取、T-传输、L-加载）处理过程主要实现如应用框架所示的多维系统数据库和监管报送系统的数据同步。多维系统数据库采用的是MSSQLServer2005数据库，而监管报送系统数据库采用的ORACLE数据库。从既要减少客户成本，又要实现异构数据的同步。采用了原始的命令行方式加以实现。4.2ET采用方式针对数据库源，多维系统数据库MSSQLServer2005数据库，采用MSSQLServer提供的bcp命令，完成数据的抽取和传输功能。1、抽取、传输脚本的执行脚本为：（根据需要执行脚本完成数据抽取、加载功能）D:\upper_system\core_app\exp_data.bat2、抽取、传输的文件存放的目录为：（即加载的数据文件存放）D:\upper_system\bapp_app\init_data目录*.txt相关数据文件4.3ET操作执行D:\upper_system\core_app\exp_data.bat脚本完成抽取、传输操作。PFI-201508-系统说明书.doc页码：7/104.4L采用方式首先创建落地数据表，用于存储加载数据。1、创建落地文件脚本D:\upper_system\bapp_app\init_crtt\orcl_crttable.sql采用Oracle数据库提供的sqlldr命令方式加载，将抽取、传输的数据文件加载到落地数据表中。1、加载的数据文件存放在：D:\upper_system\bapp_app\init_data目录*.txt相关数据文件2、加载文件过程中的处理日志存放在：D:\upper_system\bapp_app\log\init_log目录*.log相关加载日志文件3、加载文件处理脚本存放目录：D:\upper_system\bapp_app\init_data目录4.5L操作1、执行创建落地数据表脚本（环境初始化操作一次）D:\upper_system\bapp_app\init_crtt\i_init_run.bat2、执行加载脚本（根据需要进行加载数据）D:\upper_system\bapp_app\init_data\i_data_run.bat5业务处理5.1业务处理描述根据《项目报表状态统计.xlsx》报送报表数据的需要，对落地数据进行了客户、科目、账户