烟草-行业数据综合分析应用解决方案

烟草专卖管理局数据综合分析应用解决方案xxxx电子科技有限公司2013年7月1目录一、建设背景........................................................3二、建设思路........................................................3三、建设目标........................................................3四、总体设计........................................................44.1、设计原则...................................................44.2、设计思路...................................................54.3、总体架构...................................................6五、系统实现........................................................65.1、整合内容...................................................65.2、采集处理方式...............................................75.2.1、数据采集..............................................75.2.2、数据整合..............................................95.3、数据应用..................................................155.3.1、应用定制.............................................155.3.2、数据展现.............................................215.3.3、应用主题数据.........................................215.4、主要功能..................................................225.4.1、数据来源管理.........................................225.4.2、主题和指标管理.......................................225.4.3、报表定制.............................................235.4.4、图表定制.............................................235.4.5、热点定制.............................................235.4.6、连接资源管理.........................................235.4.7、页面定制.............................................235.4.8、用户及角色管理.......................................24六、系统价值.......................................................245.1、企业报表..................................................245.2、主题分析..................................................2525.3、运营监控..................................................25七、成功案例........................................错误!未定义书签。7.1、河北省省级卫生数据整合共享和综合信息管理平台错误!未定义书签。7.2、国药乐仁堂信息采集整合展现管理平台.........错误!未定义书签。八、公司及产品优势..................................错误!未定义书签。8.1、公司优势...................................错误!未定义书签。8.2、产品特色...................................错误!未定义书签。3一、建设背景近几年，中国烟草行业信息化飞速发展，各个企业目前己经基本完成了基础设施建设和业务系统建设，如营销系统、专卖系统、物流系统、财务系统、0A系统等。这些信息系统之间相对独立，缺乏有机联系，形成了信息孤岛，无法做到信息资源的共享，进而影响了许多正常业务的效率。由于各单位前期在实施信息系统过程中分别采用了各自的系统标准，因而导致了现有各信息系统之间很难做到“无缝连接”，并且在各系统间存在大量的“手工连接”，进而造成大量的信息失真和信息延时，这种情况还对信息管理部门增加了很多工作量，每天为数据而忙碌。同时各业务系统侧重于业务处理，不能进行充分的价值挖掘，缺乏为企业领导或业务处室的综合分析、宏观决策提供有力支持。因此，在烟草企业数据综合分析应用系统的建设与完善就显得尤为重要。二、建设思路三、建设目标通过建立烟草数据综合分析应用系统，实现收集目前的营销系统、专卖系统、物流系统、财务系统、0A系统等以及其他业务系统的相关数据，并对数据进行整合，加工形成涵盖管理、采购、客服、物流、质管、运营、财务七大领域的信息域，并对信息进行多维度的综合展现，提供各业务所需的综合报表，从而充分挖掘利用现有信息资源，为领导提供决策支持，并更好的为各业务科室和一线业4务人员服务。四、总体设计4.1、设计原则本项目在系统设计、软硬件采购、应用开发、系统集成和服务过程中应采用已有的国家标准、行业标准和主流国际标准，遵循但不仅限于下列标准体系和要求：《烟草行业信息化标准体系》及其有关标准《烟草行业信息化建设统一技术平台要求》《烟草行业数字证书应用接口规范》《烟草行业信息系统安全等级保护定级指南》国家《SOA标准体系》除了遵循上述标准，在整个项目设计开发过程中，需要遵守下面的5项原则。1.技术的先进性系统应采用先进成熟的技术，以保证投资的有效性和延续性。支持常用的操作系统平台、常用的数据库系统、常用的应用服务器平台和常用的开发工具，与XX烟草现有系统互联互通，以保证系统的兼容性。2.系统的稳定性保证系统能够正常运作,系统应能够7×24小时连续稳定工作。软件版本升级或改进应在不影响业务的情况下进行，保证系统可以稳定、平滑过渡。3.系统可维护性系统应能使系统管理员集中方便地配置、监视、控制、诊断整个系统，并且能够监视和控制用户情况、提高效率、消除隐患。对于系统各功能模块的配置、控制、监视、诊断等工作能够通过专用的系统管理工具方便的进行，无须进行专门的编码工作。数据中心系统将按照集中的模式进行部署，因此对系统处理并发任务的5能力提出了很高的要求，投标方需要提供大规模并发流量的处理机制以及发生性能问题时的解决方案；并提供实时交易量(并发交易量及其硬件配置)和并发用户量(并发用户数及硬件配置)的相关测试报告和案例说明；4.系统安全性系统应保证信息的安全性，即保证此系统中的信息能够安全存储，并有良好的数据备份和快速恢复方案；采用分级的安全体系，保证数据在处理和传输全过程的安全性。系统支持对关键的信息（如：用户密码）进行加密保存，同时支持对一些比较重要的业务数据在传送和存储过程中进行加密保护；保证系统中的信息不被非授权用户访问，按组织结构划分操作人员的操作权限，使用烟草办公自动化系统的用户身份认证系统，且各种使用权限所能调用的应用软件模块可按要求灵活配置；系统在身份认证方面支持多种的认证手段，如：口令认证、数字证书认证等；系统支持基于角色和基于资源的授权方式，支持用户到角色的映射，并采用角色的身份来控制对特定操作的访问权，支持层次化，结构化和区域化的角色设定；系统需要有对系统数据的关键操作（如授权操作、流程环节变更）进行追踪和回溯的能力；4.2、设计思路1、模块化的系统结构系统结构采用三层（3-tier）或多层（N-tier）设计模型；设计模式为B/S模式。由合理分划、边界清晰的子系统和模块组成，形成组装式、插件式的体系结构，以利于系统的升级、扩充和发展。支持业务流程的可调整性；支持业务信息的可调整性和延续性。2、面向服务的整体架构（SOA）系统模块都是向系统内部和外部提供服务的逻辑单元；采用标准的协议提供6服务。采用松耦合的机制与外部系统进行信息交换和系统之间的互操作。3、无缝集成的应用提供与其他相关信息系统的数据接口、支持开放的XML标准接口规范。不同的异构系统之间可以无缝地实现数据集成，也可以无缝地实现业务流程的集成。4.3、总体架构系统基于SOA设计理念，架构信息采集、整合、展现信息系统，为增值服务管理奠定总体架构基础，并以“服务”方式，扩展将来主题业务数据分析、服务系统。五、系统实现5.1、整合内容数据来源主要为营销系统、专卖系统、物流系统、财务系统、0A系统以及其他业务系统。75.2、采集处理方式5.2.1、数据采集5.2.1.1、功能设计通过整合完善数据采集系统，更加高效的接收和处理来自各系统的数据，实现数据采集工作的灵活设置和快速部署，使数据采集工作更专业化和规范化，减轻数据提供单位的负担，提高数据采集效率和质量。支持基于事件发生时接收数据消息、支持数据库改变时数据同步、支持定时提取数据、支持外部文件导入、支持异地全局数据库。并且支持基于消息的数据传输，在前置机感知数据改变后，通过WebService机制项服务器传递消息；支持通过各类数据传输中间件进行消息的传递。数据采集方式包括：自动采集、定时采集。自动采集是指通过系统接口，自动实时从数据源采集数据，适用于实时性要求较高的数据信息。定时采集是指在设定好的时间点对数据源数据进行采集，适用于数据源有规范的数据传输技术架构。数据审核：在数据加载到数据库前对采集的数据的格式及数据内容进行校验和审核，保证数据采集平台采集的数据质量。自动采集：支持自动采集和定时采集方式，实现采集系统自动获取数据源数据的功能。数据加工处理：包括数据信息清洗、信息转换、信息加载等功能，将从数据源获取过来的数据进行规范化处理，实现多源数据组合、冲突数据处理、数据格式检查等功能。并将其转换成数据仓库需要的格式。数据加载功能是将经过规范化处理后的数据存放到数据仓库中。需要定义数据的加载频率和加载方式。数据的加载频率根据数据的产生频率和数据仓库对数据的分析粒度决定，可以根据需要来定义加载的间隔。采集平台系统功能结构如下图：85.2.1.2、技术实现1、技术架构通过各种采集方式把现有各部门、企业的诸多系统通过数据交换平台抓取进入数据中心，并可以通过业务报表填报的功能补充信息，支持暴扣文档、多媒体、XML、文件以及数据库等多种方式的数据采集。92、数据接口本系统采集通过建立数据口的方式与现有的营销系统、专卖系统、物流系统、财务系统、0A系统以及其他业务系统进行数据采集，并将采集数据进行审核与加工处理。与此同时考虑到与新系统的整合，系统将预留数据交互模块并建立数据交换机制，为新业务系统的接入提供准备。5.2.2、数据整合利用完善的ETL工具，通过节点控制库、信息共享与管理库把采集来的数据按照业务内在关联形成能够表述完整业务链信息的整合信息，并为下一步的数据应用打定基础。5.2.2.1、技术架构1、ETL工具介绍ETL负责将