郑保卫_通信大数据架构下的数据治理

Contents1.DataisLife2.通信大数据全景图3.大数据架构及治理5.数据建模及模型管控6.数据仓库构建4.数据标准化起床WEBEE连接所有家电的智能HOMERUNNINGSYSTEM起床WEBEE连接所有家电的智能HOMERUNNINGSYSTEM商店Analysis基于商家交易数据及信⽤用卡刷卡数据的⼤大数据分析⻋车站iBeacon基于RFID-QR-NFC及Beacon的信息推送上班开会分析WatsonAnalytics利⽤用⽀支持⾃自然语⾔言数据分析的WATSONANALYTICS对销售情况进⾏行分析起床WEBEE连接所有家电的智能HOMERUNNINGSYSTEM商店Analysis基于商家交易数据及信⽤用卡刷卡数据的⼤大数据分析⻋车站iBeacon基于RFID-QR-NFC及Beacon的信息推送上班开会分析WatsonAnalytics利⽤用⽀支持⾃自然语⾔言数据分析的WATSONANALYTICS对销售情况进⾏行分析起床WEBEE连接所有家电的智能HOMERUNNINGSYSTEM商店Analysis基于商家交易数据及信⽤用卡刷卡数据的⼤大数据分析⻋车站iBeacon基于RFID-QR-NFC及Beacon的信息推送销售策略制定下班晚间回家便民公交通过对晚间通信分布的分析，规划夜间便民公交流动人口密集度分析
  优化公交路线公交车调度设计???????数据价值生产链各省公司及基地软件开发供应商数据架构及设计专业厂商业支数据网管数据基地数据金融数据基础软件厂商硬件厂商大数据平台大数据库专业数据服务厂商业务需求部门应用开发及运维供应商应用场景1…应用场景n…应用场景n+m金融数据分析及挖掘内部数据分析及挖掘分析模型、查询、统计、挖掘分析模型、查询、统计、挖掘分析模型、查询、统计、挖掘专业数据治理供应商应用展示平台（数据可视化）分析服务供应商决策分析报告专业数据整合厂商社会数据服务面向社会数据服务厂商大数据产业全景图共同数据……企业架构图
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  迁移计划
  数据架构应用架构技术架构业务架构新型架构架构组应用开发系统运维业务架构现有架构数据架构数据标准
  数据模型
  数据库
  数据质量量
  数据架构师主席
  
  
  数据架构师
  数据建模⼈人员
  数据库管理理员
  ⽤用户
  数据标准管理理流流程
  数据模型管理理流流程
  数据库管理理流流程
  数据质量量管理理流流程
  元数据管理理系统
  数据建模管控⼯工具
  变更更影响评估系统
  配置管理理系统
  数据质量量管理理系统
  数据架构管理数据架构管理理对象数据架构管理理流流程
  数据架构管理理组织
  管理理系统
  企业信息系统制度和指南数据标准及模型管理体系宣讲及应用检查数据用户建模人员系统开发员系统分析员数据架构主席数据架构师DBA数据标准管理员请求及使用审批及管理数据政策管理企业数据管理原则数据标准管理指南数据架构方法论数据标准管理数据值管理数据结构管理请求制定标准请求结构变更查询元数据标准应用审核标准检查结构检查培训宣讲企业数据管理方案数据治理系统企业数据治理知识库数据分类体系数据标准数据模型数据库对象应用程序影响度分析数据质量数据架构管理体系数据标准管理理
  需求事项管理理
  数据流流管理理
  数据结构管理理
  数据运⽤用管理理
  数据库管理理
  数据治理理策略略
  数据治理理质量量改善
  数据架构主席
  (Chief
  Data
  Architect)
  数据架构师
  (Data
  Architect)
  数据建模⼈人员
  (Data
  Modeler)
  数据库管理理员
  (Database
  Administrator)
  ⽤用户
  数据管理数据管理组织数据架构组织及角色数据管理组织角色 数据模型设计/审计数据架构师模型审计数据标准登录/申请数据标准审计/审批需求登录数据模型申请变更影响评估数据架构师模型审批DDL⾃自动⽣生成DBA审计DBA脚本执⾏行基于数据模型登录BR基于业务规则登录BR错误数据分析错误数据清洗相关程序分析影响评估数据标准登录/申请数据标准审计/审批信息项登录/申请数据模型⽣生成/评审信息项审计/审批信息项管理需求管理系统数据模型管控系统数据治理系统数据质量管理系统变更影响评估系统! 从信息形成的时间点开始治理! 通过流程进⾏行管控! 减少⼈人⼯工参与，提⾼高⾃自动化程度DataGovernanceProcess数据治理平台Inventory解析抽取审批退回申请业务规则结构信息数据质量检验信息质量验证基准质量验证结果应用代码数据质量数据库应用程序影响度分析数据治理平台反映建模人员企业架构分类体系标准概念模型主体领域数据标准数据标准/数据模型e.g.DATAe.g.DATAe.g.DataDefinitione.g.DataDefinitionEntEnt=Field=FieldRelnReln=Address=Addresse.g.PhysicalDataModele.g.PhysicalDataModelEntEnt=Segment/Table/etc.=Segment/Table/etc.RelnReln=Pointer/Key/etc.=Pointer/Key/etc.e.g.LogicalDataModele.g.LogicalDataModelEntEnt=DataEntity=DataEntityRelnReln=DataRelationship=DataRelationshipe.g.SemanticModele.g.SemanticModelEntEnt=BusinessEntity=BusinessEntityRelnReln=BusinessRelationship=BusinessRelationshipListofThingsImportantListofThingsImportanttotheBusinesstotheBusinessENTITY=ClassofENTITY=ClassofBusinessThingBusinessThingBuilderBuilderENTERPRISEENTERPRISEMODELMODELDesignerDesignerSYSTEMSYSTEMMODELMODELTECHNOLOGYTECHNOLOGYMODELMODELDETAILEDDETAILEDREPRESENTATIONSREPRESENTATIONSSubSub--ContractorContractorFUNCTIONINGFUNCTIONINGPlannerPlannerOwnerOwnerSCOPESCOPE