SAP 让大数据飞翔

SAP让大数据飞翔朱旻[e-mail]中国业务拓展总监2013年4月19日北京DTCC2013©2013SAPAG.Allrightsreserved.2SAPSCM供应链管理SAPPLM产品生命周期管理SAPSRM供应商关系管理SAPCRM客户关系管理SAPERP企业资源计划SAPBusinessSuite商务套件应用层面技术层面SAP40年创新历程SAPR/3(~4.6C)SAPR/3Enterprise(4.7.1/2)SAPERP20056.0C/SSOA5.0SAPERP2004云时代SAPSCMSAPPLMSAPSRMSAPCRMSAPERPSAPR/1SAPR/2Main-frameSQLMDXBICSSAPHANASAP商务套件SAPBW第三方应用实时复制ETLHANA建模BI客户端第三方查询工具1999/20001972197919922011+企业适应科技软件适应流程软件以“人”为中心2004/2005DTCC2013©2013SAPAG.Allrightsreserved.3一个加速变化的世界...50亿新兴中产阶级人口手机数量超过人口总数10亿人在社交网络上2013年联网设备达500亿DTCC2013©2013SAPAG.Allrightsreserved.44决策和预测是永恒的主题BigDataDTCC2013©2013SAPAG.Allrightsreserved.5大数据在5个方面创造价值先见之明——通过已经发生的、正在发生的事件或实验结果发现或预测需求，洞察变化倾向英明决策——自动算法代替/支持人类的决策一目了然——发现数据之间的关系有的放矢——细分人群，定制行动推陈出新——创新的商业模式、产品和服务——摘自麦肯锡《大数据：创新、竞争和提高生产率的下一个新领域》DTCC2013©2013SAPAG.Allrightsreserved.6现状:难以驾驭的大数据客户数据获利分析数据GPS需求计划速度速率交易数据销售机会服务电话客户销售订单库存电子邮件Tweets计划Things移动即时消息数据不再昂贵，从大数据中获取价值变得非常昂贵VELOCITYVOLUMEVARIETY高效管理实时获取答案正确而完整的信息DTCC2013©2013SAPAG.Allrightsreserved.7Gartner2010报告：一体机(Appliance)应用已经进入“增长上升期”Gartner把一项新产品走向成熟的生命周期分为“技术触发、期望膨胀、理性回归、增长上升、高原稳定”五个阶段。Gartner2010年7月的分析报告认为：“一体机”已经进入“增长上升期”，两年内将被各行业大规模应用。DTCC2013©2013SAPAG.Allrightsreserved.8Gartner2011报告：大数据技术正处于技术触发器Gartner2011年7月的分析报告认为：”大数据和极限信息处理技术正处于技术触发器，并在2～5年内将大规模应用“。DTCC2013©2013SAPAG.Allrightsreserved.9Gartner2012报告：围绕处理大数据的技术如雨后春笋Gartner2012年7月的分析报告认为：”列式存储数据库(Column-StoreDBMS)、云计算和内存数据库(In-MemoryDBMS)在未来的5年内将是3个最重要的技术“。DTCC2013©2013SAPAG.Allrightsreserved.10大数据–数据管理方式的变革存储和处理数据的技术手段的多样性9in10在使用关系型数据库的用户中有93%在考虑其它更多的技术手段63%在考虑内存数据库技术50%在考虑列式数据库50%在考虑HadoopTheChallengeofBigDataBenchmarkingLarge-ScaleDataManagement,VentanaResearch,January2012DTCC2013©2013SAPAG.Allrightsreserved.11梦想成为现实立足于创新并以客户为中心，实现业务转型使用列式和行式混合存储的内存计算技术，实现OLTP和OLAP的通用数据库平台~哈索▪普拉特纳(HassoPlattner)VSOLTP分析延迟加速cache延迟过去这段时间发生了什么？现在正在发生什么?将要发生什么？OLTP+OLAP实时计算的一体融合SAP内存计算DTCC2013©2013SAPAG.Allrightsreserved.12磁盘SAPHANA最简单的理解内存（数据）闪存-Flash（日志）数据写入同步写入来自任何DB来自任何系统异步您的应用所有的I/O，计算都在内存重启之后DTCC2013©2013SAPAG.Allrightsreserved.13SAPHANA实时数据计算平台-软件上的变化SAPHANA建模工具内存数据库数据服务计算引擎列存储行存储准实时ETL或准实时HANA建模SAPBI/PASQLMDXBICS其他BI新应用SAP商务套件ERP/CRM等等…其他信息系统基于（DB2SybaseOracleSQL-Server）DW数据仓库实时业务无延迟，实时计算海量数据，瞬间得到结果迅捷多处理器，海量内存实时的计算引擎支持OLTP+OLAP混合负载开放式硬件架构x86架构的一体机内置BAE(业务分析引擎),BFL、PAL库，集成R。开放式软件架构SQL/ODBC/JDBC/ODBO..Python/OData/Web服务业务功能库预测分析库应用服务App引擎HTML5R/Hadoop更多…ESP集成DTCC2013©2013SAPAG.Allrightsreserved.14SAPHANA实时数据计算平台-硬件和性能认证的硬件系统内存容量：128GB~500TB计算能力：16核~10,000核从单节点到125个节点的集群单机从128GB~4TB内存更多的硬件供应商，超过60种规格的认证硬件服务器基于AWS的云部署(3分钟|$.99每小时|cloud.saphana.com)认证的同步，异步的集群容灾备份恢复方案BI，ETL，备份工具的认证围绕HANA平台的初创企业(150+新创公司|startups.saphana.com)可小，可大的平台DTCC2013©2013SAPAG.Allrightsreserved.15增量数据处理++++离散SAPHANA-技术的协同创新，“让刀片飞”硬件多核处理器架构(X7560,E7-2870,E7-4870,E7-8870)64bit地址空间–单台扩展到4TB100GB/s数据传输行+列存储压缩5-20倍分区：大量数据，复杂计算多台服务器并行运行每台服务器的价格低廉动态聚集软件今天未来价格迅速下降，性能迅速提升CacheDisk+MemoryIn-MemoryDisk集成DTCC2013©2013SAPAG.Allrightsreserved.16SAPHANA技术特性InsertonlyonchangeColumnandrowstore+NoaggregatesMinimalprojectionsPartitioningAnalyticsonhistoricaldataSingleandmulti-tenancySQLinterfaceoncolumns&rowsReductionoftiers/layersxIn-memoryCompressionMulti-core/parallelizationDynamicExtensibility+++Active/passive&dataagingPABulkload++++TTextRetrieval&ExplorationMulti-threadingwithinnodesMapreduceGroupKeytSQLIn-memoryAppsDTCC2013©2013SAPAG.Allrightsreserved.17自2010年发布以来，HANA的卓越性能无与伦比SAP的HANA架构，结合了云计算和内存计算技术，显示了先进的、具备潜在颠覆性的愿景－高德纳咨询公司《SAP用HANA引领下一代架构竞争》，2011年10月在1.3TB的数据上，每小时运行1万个查询，并在几秒种之内返回结果。－由WinterCorp公司独立审计和验证，2011年3月•提高1,000倍：许多分析流程（催款、账龄）•提高10,000倍：农夫山泉、Essar、SAPIT、康奈尔大学•提高100,000倍：Yodobashi或者•从24小时以上减少到3.8秒:食品饮料/分销–物流•从15小时以上减少到4.8秒:项目管理/服务–利润,绩效•从3天减少到2秒:零售/保险–奖金•从30天减少到28秒:制造业–订单到付款原有系统SAPHANAfasterSAP客户实证：DTCC2013©2013SAPAG.Allrightsreserved.18SAPHANA–前所未有的性能和可扩展性,“让大数据飞翔”前所未有的交易处理(OLTP)性能插入:77万条记录/秒,批量插入:1GB/分,DataServices2.5TB/小时EML基准测试:65,990次每小时任意数据的随机查询分析Structured+Unstructured前所未有的分析处理(OLAP)性能10年的销售数据，～6250亿行记录，随机查询时间介于600毫秒～1秒无需数据库优化、不建索引、不做缓存、无需物化视图100个节点，100TB主内存，4000X86内核DTCC2013©2013SAPAG.Allrightsreserved.19SAPHANA的应用开发与数据库管理应用开发安装&升级数据的持久化备份与恢复高可用性容灾监控和管理安全&审计DTCC2013©2013SAPAG.Allrightsreserved.20实时执行实时报表和分析实时交互实时计划实时的平台基于SAPHANA的SAP商务套件更敏捷、更快速、更简单最先进的业务平台，实现无间断创新更敏捷的业务创新先于竞争对手捕捉到新的发展机会更快速的企业流程使业务的速度同步于市场的速度更简单的业务交互我们在业务需要的时候立刻能做出正确的决定，并立刻行动DTCC2013©2013SAPAG.Allrightsreserved.21SAPHANA:实时业务的新平台高速HighSpeed快速响应时间深度Deep复杂和可交互的问题宽广Broad大数据简单Simple无需准备实时Real-time最新数据DTCC2013©2013SAPAG.Allrightsreserved.22SAPHANA助T-Mobile运营智能电信–衡量营销活动的效果业务场景：敏捷的数据集市（AgileDatamart）业务挑战缺乏快速的洞察而导致效率低下和收入流失快速报价/细微报价的增加导致报价绩效管理越来越具有战略性饱和市场中的高收购成本以及激烈竞争技术挑战无法准确有效、快速地分析大数据收益实时实现有目标的微型提议实时业务决策，按渠道最大化收益改善销售提议从而提升采用率及在客户身上的利润率SAPHANA是企业级解决方案，借助诸如零售商店、客户服务中心以及SMS等渠道，可处理T-Mobile的多个数据源、2100万多个客户。由于营销活动频繁，精确针对细分市场，因此需要SAPHANA可靠的性能和分析速度，即时报价，提升客户采用率、利润率以及留客率。JeffWiggin，T-MobileUSA,Inc企业信息技术副总裁根据SAPHANA执行的快速分析，我们现在能迅速精准调整当前和将来的活动，从而提升客户采用率、减少客户流失并提高利润率。AlisonBessho，T-MobileUSA企业系统业务解决方案主管执行客户流失分析时获得关键信息的速度提升56倍每个赢回的用户可节省$10-25—每年的潜在收益可达数十亿“”3小时之内即可分析2100万个客户的20亿条记录（过去需要一周时间）DTCC2013©2013SAPAG.Allr