亚信移动决策支持系统BI交流文件(经营分析)

邦讯科技有限公司经营分析系统技术交流2002年4月邦讯科技有限公司中国移动集团公司邦讯科技有限公司Agenda系统背景系统总体框架业务功能技术方案实施与发展建议邦讯科技有限公司电信行业背景及挑战•新一轮电信业的竞争将全面展开–WTO,国外电信运营商及资本逐步进入国内–电信重组•中国移动面临挑战–ARPU逐步下降,用户数的高速增长如何转化为利润的增长–业务受两面夹击,高端:CUCDMA,低端:CUGSM,“小灵通”•经营理念的转变–保障网络基础设施建设，重视业务经营与运行–突出“以客户为中心，以市场为导向”•中国移动业务发展战略–实施业务领先，努力拓展市场•积极扩张市场,保持话音业务的市场份额和移动数据业务领先–实施服务领先，保持高端品牌优势•抢夺高端细分市场，减缓ARPU下降，保持中国移动收入持续增长邦讯科技有限公司•各省–BOSS集中化改造在年内完成–少数省已经开始建设经营分析系统试点•集团公司一级业务支撑中心–全国结算中心，国际清算门户...–全国客服枢纽，全国帐务枢纽–全国数据中心/经营分析系统业务支撑系统现状邦讯科技有限公司经营分析系统的必要性全面了解中国移动集团运营支撑系统状况了解宏观的，长期，全局的业务状况及发展规律对一些全国性业务的多角度分析分析用户、业务发展趋势,分析企业的KPI与BOSS相结合,是业务运营支撑系统发展的趋势支持市场营销与服务的工具，为运营决策提供支持有利对市场竞争快速反应，体现以客户为中心的经营理念提升内部信息化及管理水平邦讯科技有限公司Agenda系统背景系统总体框架业务功能技术方案实施与发展建议集团公司经营分析系统外部关系全国客服枢纽全国帐务枢纽全国清算中心国际清算门户集团公司经营分析系统省公司经营分析系统省公司经营分析系统省公司BOSS系统省公司BOSS系统集团一级BOSS中心集团公司数据中心集团接口元数据、系统管理、系统监控元数据集团公司经营分析系统体系结构清算中心客服枢纽账务枢纽省公司BOSS系统抽取清洗转换传输加载经营分析系统数据仓库规划设计ThePost外部数据应用系统建模多维分析数据挖掘预定义报表即席查询数据源ETL数据存储数据展现应用模型省公司经营分析系统元数据、系统管理、系统监控元数据计费系统结算系统营帐客服财务/OA抽取清洗转换传输加载经营分析系统数据仓库规划设计ThePost外部数据应用系统建模多维分析数据挖掘预定义报表即席查询数据源ETL数据存储数据展现应用模型网管系统省公司经营分析系统体系结构邦讯科技有限公司集团与省经营分析系统的区别集团公司经营分析系统分析宏观的，全局的，长期的业务状况及趋势体现集中管理，发挥全局优势一些全国性的业务分析，如国际结算分析，漫游分析，集团大客户分析等。有利于促进全国性业务的发展对各省业务发展的评估及比较,监控各省的业务运营状况省经营分析系统侧重本辖区内的业务经营分析分析角度及层面相对较细与BOSS系统形成紧密的闭环,直接影响客户邦讯科技有限公司经营分析系统OmniVisionOmniVision是我公司针对移动的完善的电信级经营分析及决策支持系统平台。OmniVision采用数据仓库、ETL、OLAP、即席查询及数据挖掘等技术，结合移动业务的深厚经验，针对用户分析、业务分析、收益分析、大客户分析、营销分析、竞争分析、服务质量分析、合作方分析、新业务分析主题建立分析模型及专题分析邦讯科技有限公司Agenda系统背景系统总体框架业务功能技术方案实施与发展建议应用服务器/WebServer集团经营分析系统业务功能模块漫游和高额数据结算数据BOSS系统数据省经营分析数据智能网数据外部系统数据网管MISOA数据数据转换ETL模块业务主题分析前端用户/浏览器市场服务质量模块全国用户分析模块全国业务分析模块全国收益分析模块营销分析模块市场竞争分析模块SP和结算分析模块漫游和欺诈分析模块增值和智能网业务分析模块全国大客户分析模块专题分析全国业务(含新业务)专题市场竞争、高额风险专题全国大客户发展、异动专题集团公司综合决策分析模块数据仓库OLAPServer邦讯科技有限公司集团公司分析主题（一）•各省经营情况分析•客户发展情况分析•业务发展情况分析•收益情况分析•市场竞争情况分析•服务质量分析•营销管理分析•分析重点•时间•地域•特征•……分析了解各省运营状况，制定宏观政策分析竞争对手动态，量身定制市场战略分析夹缝市场，及时推广新业务找出地区经济差异性、时间序列的趋势变化、群体特征分布、消费的季节变化邦讯科技有限公司集团公司分析主题（二）•总部业务分析•智能网业务分析•SP、虚拟运营商分析•全国结算分析•国际结算分析•运营商竞争分析•漫游、高额分析•IP、VOIP业务分析•VPMN业务分析•新业务分析•分析重点•业务量•发展趋势•地域差异•通话行为•群体特征•………..总部业务、资源合理控制发展调整结算结构，提高收益发展合作伙伴，战略联盟及时预防欺诈风险分析总部业务发展趋势、结算收益变化、地域通话特征、风险的地域时间分布邦讯科技有限公司•全国大客户分析–大客户构成分析–大客户发展分析–大客户异动分析–大客户欠费分析•分析重点•地域差异•通话行为•群体特征•流失特征•………..制定全国性集团大客户优惠政策刺激不同层次大客户，推荐大客户加盟提高大客户服务质量，预防流失推出大客户专项服务，提高收益集团公司分析主题（三）分析整体大客户发展趋势、地域通话特征、群体特征分布、邦讯科技有限公司集团公司专题分析•全国业务(含新业务)专题•漫游、欺诈、高额风险专题•市场竞争专题•全国大客户发展、异动专题•关注重点•客户发展趋势的潜在规律•业务发展趋势的潜在规律•收益发展和风险预测的潜在规律…挖掘、刺激潜在集团大客户发布欺诈、流失告警通知营销策略(新产品、新业务)的评估…应用服务器/WebServer省经营分析系统业务功能模块结算数据BOSS系统数据外部系统数据MIS和OA数据数据转换ETL模块业务主题分析服务质量模块用户分析模块业务分析模块收益分析模块市场营销分析模块市场竞争分析模块SP和结算分析模块增值和智能网业务分析模块大客户分析模块专题分析业务(含新业务)专题市场、竞争专题大客户发展、异动专题省综合决策分析模块网管系统数据客户专题分析一级经营分析数据数据仓库OLAPServer前端用户/浏览器邦讯科技有限公司省经营分析系统功能•主题分析–客户情况分析–业务发展分析–收益情况分析–市场竞争分析–服务质量分析–营销管理分析–大客户分析–新业务分析–SP、虚拟运营商、结算分析•专题分析–客户分析–大客户分析–市场竞争分析–营销策略评估–结算分析•省综合决策分析邦讯科技有限公司Agenda系统背景系统总体框架业务功能技术方案实施与发展建议邦讯科技有限公司集团公司经营分析系统建议拓扑结构省级经营分析系统建议拓扑结构邦讯科技有限公司数据仓库及工具软件主要使用支持数据（仓）库SybaseIQOLAPServerETL工具软件AscentialDataStagePowerMartCognos前端展现工具数据挖掘工具SASEMBOOracleWarehouseBuilderNCRTeradataIBMDB2WarehouseManagerIBMIntelligentMinerBrioIBMDB2OLAPServerIBMDB2UDB/InformixXPSOracleHyperionEssbaseOLAPCognos邦讯科技有限公司数据仓库逻辑结构DataWarehouseODS(StagingArea)StarSchema(Aggr)MiningDataModelReportDataModelInterface&ETLProcessOLAPCUBEDataMiningReport/Ad-hoc展示输出邦讯科技有限公司数据仓库设计9要素—RalphKimball1.业务需求分析以确定相应的Facttable(规范，设计）2.Facttable的粒度3.每个Facttable中的维4.度量,包括预计算的度量5.维的属性：完整的描述，确切的术语6.如何跟踪并处理缓慢变化的维7.聚集表，MiniDimension,物理存储策略等8.数据仓库的历史时间及相应处理策略(如CDR的保留时间等)9.哪些数据最迫切需要采集并装载到数据仓库中邦讯科技有限公司OmniVision数据仓库设计•数据仓库分层设计,保证模型的稳定性及灵活性–原始数据–初步清洗，转换后的数据(OperationalDataStore)–事实表及维表(SnowflakeSchema),以及历史数据–DataMiningmodel,StarSchema,AggregateTable汇总聚集表OLAPCube•粒度的多重级别–如：保存6个月内的CDR明细/6个月以上的CDR汇总保存•动态维(DynamicDimension)–灵活处理业务需求的变化–动态增加组合条件的维度邦讯科技有限公司数据仓库设计—高性能的TB级电信级数据仓库•参数化管理•OLAP–稀疏维，紧密维–一般一个CUBE维数=11–DrillThroughdetaildatainDW•数据分割，VLDB技术–分表，分区设计,提高大数据量的处理效率–Hash表分割，表达式表分割…–按时间、地理、业务等分割…•MiniDimension–例如:客户维表可能达几百万条，join效率较低•设置客户属性MiniDim，将客户属性拆分到多个较小的维表中，能极大地提高查询性能邦讯科技有限公司动态维技术维度1维度2…维度n动态维度量值维表1用户定义的加工、处理维表n动态维的含义在应用时定义,适应需求的灵活变化如选取连续3个月费用下降5%的客户分类，作为一个维动态维的内容是经加工、处理后的聚合的增加动态维后，数据库结构不发生变化，前端展现程序不用修改…动态维表邦讯科技有限公司ETL子系统–数据源•集团公司经营分析系统–省BOSS系统：•用户基本信息•网间结算信息•帐务信息•…–省经营分析数据•业务主题数据(汇总)•用户信息–全国中心•漫游清算信息,国际结算信息•集团用户信息•全国IP认证计费业务信息等•…•省经营分析系统–计费/结算系统：•计费详单•结算数据…–营帐系统•用户基本信息•帐务信息•资源信息…–客服系统•投诉，查询等信息–其他系统（逐步）•MIS,OA•网管等邦讯科技有限公司ETL子系统省公司经营分析数据ETL数据抽取引擎省公司BOSS数据集团公司BOSS系统数据●负责与源数据系统的接口●负责抽取规则的制定（源数据、目标数据、映射规则、清洗与转换规则、加载规则等）●负责抽取任务的调度、执行元数据管理、系统管理、系统监控P1P2P3FILE经营分析数据仓库ODS邦讯科技有限公司ETL-接口方式业务系统数据库FILE经营分析数据仓库ODS1、经营分析系统发出数据请求.3、业务系统返回经营分析系统所需数据.2、业务系统执行数据提取任务:存储过程、触发器、SQL应用等缺点:对业务系统造成安全、性能等方面的问题、实现较麻烦。数据库接口方式1、业务系统定时将经营分析系统所需数据Export为数据文件.2、经营分析系统对数据文件进行ETL等后续操作.优点:不会对业务系统造成安全、性能等方面的问题、易于实现。数据文件接口方式邦讯科技有限公司ETL-抽取规则省公司经营分析系统数据ETL数据抽取引擎元数据管理、系统管理、系统监控省公司BOSS系统数据集团公司BOSS系统数据●抽取策略：支持增量抽取方式●抽取规则：用户可根据实际需要自定义抽取规则P1P2P3FILE定义好的抽取程序脚本，包括源数据项、目标数据项、映射规则、转换规则、加载规则等内容，可根据实际需要调整。经营分析数据仓库ODS邦讯科技有限公司ETL-执行方式ETL数据抽取引擎●执行方式：定义好执行脚本，由系统调度、自动执行●采集周期：采集的周期可以是日、周、月或其他设定日期P1P2P3P1P2P323：3000：3001：