企业级数据中台产品和解决方案介绍数据中台帮助数字化转型从流程优先走向数据优先数据中台需求的出现,是企业数字化转型的一个标志性的转折,数据中台成为热点,标志着,“在企业信息化或者数字化的历史上,数据从来没有距离业务这么近,数字化转型正从流程优先走向数据优先”。信息化和数字化的本质区别是:信息化是用软件工程技术局部支撑和改良业务,数字化是用数字化技术重塑和转型业务本身”,而数据则是构成数字化业务世界的原子材料。数据从应用诞生的那一天开始就存在,但是,数据并不是第一天就被存储和利用的,应用和数据的发展是不同步的,数据的地位是不断演进,越来越重要的,经历了五个阶段我们可以广义上来给数据中台一个企业级的定义:“聚合和治理跨域数据,将数据抽象封装成服务,提供给前台以业务价值的逻辑概念”。数据中台建设是数字化转型的关键支撑后台支撑职能的共享化、服务化建设(如财务、人资等)后台前台中台数据中台——企业核心数据资产的整合与共享业务中台——企业核心竞争能力的固化与赋能采购生产销售……稳定后台以共享中心建设为核心,为前中台提供专业的内部服务支撑业务中台:能力固化与赋能固化通用能力,赋能前线部队提升配置效率,加快前线响应产品化业务化,开辟全新生态数据中台:资产整合与共享整合多维数据,统一资产管理连通数据孤岛,共享数据资源深入挖掘数据,盘活资产价值敏捷前台一线作战单元,强调敏捷交互及稳定交付的组织能力建设ab企业4.数据治理数据中台需要建立完整的数据管理分析平台和体系2.数据平台搭建1.数据资产管理3.分析体系建立5.数据应用及可视化数据资产管理:盘点数据资源、规划数据资源、获取数据资源,并将所有数据资源进行完整呈现;企业可根据数据资源规划报告指导后续数据治理和数据资产管理平台的建设,最终服务于企业数据应用场景。数据管理分析平台搭建:按照数据资产梳理结果,落地搭建企业级的大数据级数据仓库,获取相关的数据,并搭建相应的平台数据指标体系建立对用户、产品、客商、营销等各主题域进行标签提取,将其特征数字化,为后续进行精准营销和用户画像提供必要条件。构建企业标签体系,着重分析当前需要但是无法获取到的指标,描述使用不便的指标,分析问题原因,绘制数据供应链条;数据治理:从基础数据、业务数据、大数据视角综合分析当前的数据质量问题;建立相应的组织,设定相应的流程对数据资产进行管理数据应用及可视化:基于当前外部数据、IOT数据、非结构和半结构化数据进行大数据应用的规划,并论证实现过程和进行成本评估。一旦评估通过可以帮助企业进行大数据应用的完整开发和落地数据可视化应用,讲述数据背后的价值。在最短的时间内用最具冲击力的视觉语言,将企业最重要的数据/信息传递给最重要的人。数据中台:数字化转型中枢,一站式全局视图云平台/IaaS层数据采集层技术平台层数据存储层服务引擎层数据智能数据中台企业经营分析数据门户数据大屏用户洞察政府管理决策经济运行大屏应急指挥大屏安全态势感知大数据营销CDP个性化推荐人群放大城市大脑城市时间感知社区与安全交通治堵数据API标签引擎分析引擎报表引擎大屏引擎全域数据实时数据全域打通实时计算智能挖掘持续运营分布式计算存储平台离线任务实时任务任务运维可视化实验Notebook数据地图数据模型数据质量数据开发平台数据科学平台数据资产平台业务数据库传统数仓搜索引擎文本文件IoT爬虫埋点API私有云/资源池业务数据化数据基础建设数据资产化数据能力共享资产价值化数据驱动业务产品具备的技术能力嵌入式•具备成体系的行业预置大数据分析模型,可快速转化为客户项目实施能力多功能•主流产品敏捷且能够适应复杂分析场景的BI、大屏、移动端、Excel良好集成、客户IT易用•便捷额工作流和开发、建模管理、数据采集管理、权限管理等前后台工具(改变面向开发人员的底层开发方式,变为可配置开发,降低企业用户开发运维难度和成本,提升产品的稳定性,提升工具的竞争力)•实时、非实时、结构化、非结构化、物联网及网络日志采集、文件采集及解析等采集、存储、分析计算一体的数据平台多部署架构•统一平台,差异大(如结构化、非结构化分)的功能微服务化以方便无缝融合,公有、私有、混合云均可满足的部署架构混合分析场景•各种混合应用的分析场景化、体系化(如结构化、非结构化分析),建立融合、综合分析领域的专业性和领先性我们的产品具备如下技术能力:融合了大数据及传统数据仓库软件的优势传统数据仓库软件特点大数据特点一体化的平台解决方案基于开源技术发展,缺乏整体性的规划和统一设计平台管理工具功能强大各组件之间耦合度不够高,中间部分缺乏高度商业整合和应用对开发使用人员门槛高,需掌握的技术众多,难度大功能封装且可视化(数据管理、关系型数据、分层结构、数据采集处理可视化且易用,权限管理完善细颗粒度且灵活)功能封装程度不够,限制了规范的应用对企业级的权限管理、分业务域应用、数据治理等应用缺乏考虑平台相对稳定可靠基于若干年前的传统架构,升级改造伤筋动骨,先天基因不足多种开源技术,对新出现的技术和需求响应快,快速应用对大数据量的支持不好,分布式计算能力和线性扩展能力弱基于Hadoop等大数据技术,处理数据量大且线性扩展较难适应越来越多新出现的数据源类型和数据结构类型对数据挖掘、机器学习等整合困难与数据挖掘等结合成本低数据中台产品及解决方案数据采集OracleSqlseverMysqlPostgresqlHanaSAPECC/BWHiveHbaseFile/csvKafkaMongoRedisXMLHttpHDFSElasticSearchFTPPDF/Doc……数据源从结构化到非结构化产品标准功能支持的数据源数据存储中台分布式文件系统HDFS分布式数据库HiveHbase分布式图数据库JanusGraph分布式消息队列Kafka分布式文档ElasticSearch数据计算中台离线处理实时处理交互式分析MapreduceImpalaHive机器学习DataSicenceStudioLiveInsightSpark多维建模Dimmetrics数据挖掘区Greenplum数据应用中台传统数据分析业务模型指标库数据科学自动建模交互式建模特征处理数据APIAPI生成API审核及发布API共享数据治理数据目录数据血缘数据质量数据中台产品集数据共享数据集成数据科学数据计算集中服务数据治理数据科学处理计算总体技术架构多租户管理微服务管理开发管理项目管理容器化应用API管理平台监控数据采集传输结构化数据采集非结构数据采集数据库日志采集舆情数据采集外部数据采集手工数据采集展示层数据挖掘移动应用敏捷分析报表分析数据存储文本数据管理MPP数据存储分布式消息队列分布式NoSql数据库分布式文件系统管理分布式关系型数据库数据处理及分析计算内存计算多维分析OCR识别离线计算机器学习NLP分析流式计算转换开发调试数据挖掘作业管理数据采集作业分析作业转换作业作业监控安全管理身份认证数据权限展示权限安全管理集成管理门户集成流程集成接口集成数据共享资源管理及调度任务资源分配分布式协调服务授权License管理日志管理多租户管理服务监控数据治理元数据管理数据血缘数据质量应用层专题分析数据挖掘实时分析战略分析经营监测全面预算知识图谱专家系统文本检索图像识别应用门户SSO用户管理菜单管理移动门户门户层应用层展示层处理层采集层云平台基础管理解决方案-从行业和组织层二维搭建业务架构管理层审计与监察项目管理生产运行管理采购管理市场管理人力资源管理安全环保信息管理经营管理财务管理战略层战略管理与决策战略规划决策支持经营监控业务层石油石化制药汽车交通运输金融工程服务建筑业装备制造电力勘探生产炼油化工天然气管道销售产品研发原料采购生产运营质量环保市场销售研发设计整车制造零部件制造销售客运物流车辆租赁设备维护银行保险信托证券专业技术研究市场管理生产作业项目实施投资融资规划设计工程建造制造研发产品设计生产加工输变配售电发电电力设计建设电力设备销售和服务管理运营生产制造科研业务管理服务合作租赁场站运营物流快运快递零担物流大宗物流汽车服务解决方案-企业业务管控内容供应链包括各类生产服务的供应链的规划、运营、调度、执行、结算、报告、分析及优化等业务流程.生产渠道源包括生产来源、资源依靠、采购或者社会发展需求等前端业务管理生产运行包括产品和服务创新、集成货源与采购、生产运营、能源和排放管理等市场销售包括客户服务和终端管理,潜在客户挖掘、价格和利润管理、订单到现金管理等设备管理项目管理企业战略决策业务生产企业管控物资管理人力资源管理投资管理科研管理企业风险管理生产管理财务与资产管理综合管理市场管理解决方案-基于企业管控需求建立全维度的指标库指标库中的单个指标卡片应用场景:综合信息共享平台-管理驾驶舱实现各主要管理部门的管理驾驶舱视图,包括财经办、生产部、采购部、销售部、人力资源部、安全环保部等9个主题,三层综合视图设计KPI206个。应用场景:经营指标案例应用场景:物资管理大屏展示示例