SAP大数据方案介绍

引领大数据潮流之SAP平台战略©2013SAPAG.Allrightsreserved.2Agenda大数据实时分析挑战SAP让大数据成为现实SAP大数据解决方案SAP内存计算平台SAP解决方案场景及价值©2013SAPAG.Allrightsreserved.3我们正处在一个信息爆炸的时代客户数据汽车机器数据智能电网8.6Zettabytes!销售数据移动数据结构化数据浏览信息社交网络基于位置数据文本数据IMHO,it’sgreat!RFID201520111.8Zettabytes全世界数据量（1ZB=1,000,000,000,000GB）64%的企业正考虑大数据项目-Gartner，201359%全球数据量的复合增长率-Gartner，2013238亿美元的市场（2016年）-IDC，2013202040ZB传统IT架构不堪重负…迫使不断寻求新的技术例如Hadoop2012年全球数据总量2.8ZB85%来自于新数据类型2020年将有15倍增长2020年全球数据量达到40ZB未来新的数据源(Sentiment,Clickstream,Geo,Sensor)Ref:Hortonworks419902013200020052010商务分析(CIRCA1980)预测分析(CIRCA1980)语义分析(CIRCA1980)顺应大数据发展趋势云端实时性个人电脑和客户服务器数据库（CIRCA1980）WWW手机社交B2B/B2C大数据实时1,000,000+销量超过1,000,000台3,000,000全球网民突破3,000,000大关手机用户超过用电人口或安全饮用水人口Facebook：10亿用户、6亿移动用户、逾4,200万页面和900万应用程序Youtube：每日视频浏览量达40亿次Google+：4亿注册用户Skype：2.5亿月活跃用户©2013SAPAG.Allrightsreserved.6什么是大数据？——4V特征Volume海量数据：TB、PBVariety结构化数据非结构化数据Velocity实时查询即席分析BIGDATAValue预测分析发现价值©2013SAPAG.Allrightsreserved.7特性–数据量VolumeIDC估计全球2012年数据量2.7ZBZB=Zettabyte=1018bytes2020年:35.000ZB全球预计电信行业：基于信令的客户行为分析，网络质量分析；基于传统及移动互联网的数据分析。淘宝每日处理数据量1.5PB挑战数据压缩，不是数据膨胀与HADOOP平台的融合计算©2013SAPAG.Allrightsreserved.8特性–品种Variety关系型数据传统数据仓库半结构化数据例如XML非结构化数据JSON,audio,video流/事件数据非时点数据，点击流数据股市报价数据电信信令数据非结构化数据约占全部数据的70%传统数据处理技术基本不对流/事件进行处理！要求基于数据库的非结构化数据处理不是数据库+非结构化数据处理事件数据和流数据的处理©2013SAPAG.Allrightsreserved.9特性–速度Velocity假设：这将是总是有规则能够清理数据例如传统的ETL作业数据从生产系统加载到数据仓库中但并不总是足够的时间来做到这一点由于处理的时间窗口过于狭窄数据准确性，含糊不清，延误，近似，失败…要求数据分析不仅是T+1的批处理实现实时数据分析！基于数据流的快速复杂规则响应/毫秒级别©2013SAPAG.Allrightsreserved.10SAP的大数据应用关注点ValueSAP大数据价值viaSAP场景及应用实时可行的商务洞察分析能力批量-深度的用户行为和习惯分析挖掘能力为用户提供前所未有的数据洞察能力为新系统提供前所未有的灵活性（或最优成本效益）©2013SAPAG.Allrightsreserved.11Agenda大数据实时分析挑战SAP让大数据成为现实SAP大数据解决方案SAP内存计算平台SAP解决方案场景及价值WhySAPforbigdata?H2–SAPHANA和Hadoop的威力BigDataPlatformBigDataScienceRealTimeRealValueRealResultsBigDataAnalytics&AppsSAP:实时,客观的结果13SAPmakesBigDataRealBigDataPlatformBigDataScienceBigDataAnalytics&Apps14RealTimeRealResultsRealValueSAP为业务和IT带来的变革降低政府基金的浪费和管理风险2分钟从9千万行数据中查找到100,000姓名I甄别出带有癌症DNA需要治疗的病人216x倍:3天20分钟通过模型分析提升医疗诊断的效率300M数据;2-10秒内完成分析预测客户购买意愿5秒内完成季度分析延长轮胎寿命，降低开销每年分析超过400亿案例洞察客户情况eBay利用自身存储超过100PB的数据的数据仓库洞察客户的负面信号分析客户行为发现优质客户通过发掘合适的目标客户提升投资回报率提升市场分析的效率报表速度56倍提升：细分市场客户分析资产联系22,000传感器每年产生3.15B行数据更好的开辟新市场和新产品活动占用率从3%到5%降到支持远程现场的实时分析秒级分析15年的数据预测潜在的设备质量状况基于设备传感器的数据分析体育赛事分析SportsAnalytics高度实时,根据客户需求高度自由的数据互动电子商务E-Business通过分析模型预测进行推送，使网页访问量提升30%，跳转访问推送产品访问量提升500%15SAPHANADataPlatformforBigData释放实时数据为企业带来价值利用存储&处理获取16BigData应用通过SAP针对行业,专注于业务的应用f和SAP的创新合作伙伴，是实时发挥大数据洞察力成为可能17客户价值发现(CEI):-)客户发掘(CEI)财务智能(CEI)诈骗预测管理需求信号分析管理社交网络智能化(CEI)情感分析(RDS)生产制造（智能化生产）生产制造(定制化生产)SAPDataScientists全球专家团队，由大批博士级的科学家组成，在Scottsdale,Walldorf和Bucharest工作.他们已经成功帮助了100个客户，并且通过针对一些非常复杂的使用场景的深入研究，在需求分析等领域创造了行业领先的研究成果，在以下这些方面总结出了大量可复用的原理或分析模型数据洞察和风险评估数学模型，预测模型，模拟技术，优化算法使用到大量SAP相关的技术:HANA,SAPBusinessObjects,SAPPredictiveAnalysis,VisualizationFlexibledeliveryPALandRintegrationSAPHANAPlatformandbeyondDataScienceSAPBusinessObjectsDashboardsSAPPredictiveAnalysis++2)2/()(2)(2xexf18SAPBigDATA架构示例19THIoTAppsESPIQHANASAPIoTServicesCloudIoTAdapterSDKWebAppThingsHANA/ESPStudioAppDevelopmentStudioMobileAppsMobileDeveloperHANACloudPlatformSQL设计AgentDeveloperMobileAppGatewayDeviceIndustrySpecificAlgorithmsSQLA运行SAPBusinessSuiteThirdPartyApplications©2013SAPAG.Allrightsreserved.20Agenda大数据实时分析挑战SAP让大数据成为现实SAP大数据解决方案SAP内存计算平台SAP解决方案场景及价值SAPBigData套装SAPHANAplatformSAPIQ基于Intel或Hortonworks的Hadoop利用DataServices做数据整合和SAPEventStreamProcessor(ESP)做流数据处理高级分析&可视化工具(BO/Lumira)DataScience服务大数据行业解决方案整合套装,灵活搭配组合,基于客户的需求和大数据情况度身定制，按需求购买产品或整体的方案包21SAPHANA:BigDataRealTime各种移动应用各种APP服务器SAPBusinessSuiteandBWABAPAppServerJSONROpenConnectivityMDXSQLSAPHANAPlatformSAPHANA平台覆盖了数据库，数据处理，应用平台，预测功能，计划功能，文本分析和商务智能分析等功能，所以能为企业运营提供全面实时的支持。AdministrationExtendedApplicationServicesIntegrationServicesDeployment:DatabaseServicesDevelopmentOLTP|OLAP|Search|TextAnalysis|Predictive|Events|Spatial|Rules|Planning|CalculatorsProcessingEngineApplicationFunctionLibraries&DataModelsPredictiveAnalysisLibraries|BusinessFunctionLibraries|DataModels&StoredProceduresDataVirtualization|Replication|ETL/ELT|MobileSynch|StreamingAppServer|UIIntegrationServices|WebServerOn-Premise|Hybrid|On-Demand支持各种设备22SAPHANA:预测&主动发现SAPHANA平台覆盖了数据库，数据处理，应用平台，预测功能，计划功能，文本分析和商务智能分析等功能，所以能为企业运营提供全面实时的支持。提供强大的商务智能分析能力。我们有大量的对各业务深入理解搭建的模型，但是其中涉及大量复杂的算法和复杂计算，HANA强大的运算能力为这些复杂业务分析提供了良好的支持基于业务数据进行量化分析，敏捷的发现各种业务场景中可能出现的极值。搭建基于各业务场景的模型，为我们预测未来的收入整合，处理，挖掘业务数据价值。通过各种可视化的分析工具帮助业务人员清晰数据背后反映的真实故事23SAPHANA:大数据的文本分析FileFiltering文本数据不在受限于二进制的文档实现在各种类型文档(txt,html,xml,pdf,doc,ppt,xls,rtf,msg)中解析处理非结构化文本数据支持加载二进制，特殊格式的非二进制文件（如XML）和其他文档到HANA中直接进行检索分析原生文本分析为原始非结构化文本提供读取结构提供专业的基于语言学的语意分析分类功能(人,公司,物品,等)定位情况类型(情感,主题,诉求等.)支持31种语言的语意分析和基于数据字典的分词功能，和针对11种语言提供预定义的分词功能SAPHANAText&SentimentAnalysis搜索分析预测24SAPIQ:企业级数据仓库的领导产品高性能的分析服务器列式数据管理系统(列式存储数据—可以作为HANA的近线存储)优化算法，善于处理海量分析数据加速分析和报表速度比传统交易型数据库超出1000倍的分析速度处理结构化和非结构化数据高压缩比和低TCO良好的可扩展性和架构全球超过2200用户使用，安装超过4500系统两倍于第二位领导产品的使用企业量强大的数据动态压缩功能降低企业存储的需求，降低TCO唯一的列式数据库解决方案支持全文检索，库内运算和联邦分析25热度比较高的大数据;满足准实时的加载查询;开放架构多种硬件支