03大数据解决方案

微软大数据&自助式分析解决方案议程•大数据解决方案•大数据的一些疑问•大数据分析•大数据处理•自助式分析方案GartnerMagicQuadrantforBusinessIntelligencePlatforms,2011全球权威评估机构GARTNER连续几年把微软评为BI方案实施能力第一厂商GartnerMagicQuadrantforBusinessIntelligencePlatforms,2013GartnerMagicQuadrantforBusinessIntelligencePlatforms,2010大数据解决方案-大数据的一些疑问怎么从大数据得到价值？你想从大数据里得到什么？多大的数据才是大数据？大数据企业品牌腾飞的“肾上腺素”价格低廉的存储价格低廉的计算设备爆炸社交网络无处不在的连接传感器网络数据复杂度：多元性和速度TerabytesGigabytesMegabytesPetabytesBigDataWeb2.0Web2.0ERP/CRM付款薪资货存联系人订单跟踪销售管道Web日志数字市场搜索市场网上推荐广告移动协作电子商务网页点击流Wikis/博客传感器/RFID/设备社交网络音频/视频日志文件空间&GPS坐标数据数据集市电子政务气候文本/图像Web日志数字市场搜索市场网上推荐协作电子商务数据的获取主要趋势,你想从大数据里得到什么？一系列新问题社交网络和互联网分析我的品牌或产品情绪实时数据源如何优化我的车队运行(基于天气和交通趋势）高级分析功能如何更好预测未来结果？端到端的大数据生命周期增强可视化10101HQLColdStreamHDFSHotStreamE=MC2HQLLearnedLimitsSQL战略/趋势分析存储&管理洞察价值操作/实时分析微软大数据平台总体架构FastLoadSourceSystemsHistoricalData(BeyondActiveWindow)Summarize&LoadBigDataSources(Raw,Unstructured)Alerts,NotificationsData&ComputeIntensiveAppERPCRMLOBAPPSIntegrate/EnrichSQLServerStreamInsightETLwithSSIS,DQS,MDSHDInsightonWindowsAzureHDInsightonWindowsServerSQLServerFTDWDataMartsSQLServerReportingServicesSQLServerAnalysisServerBusinessInsightsInteractiveReportsPerformanceScorecardsCrawlersBotsDevicesSensorsSQLServerParallelDataWarehouseAzureMarketPlaceSummarize&LoadviaPDWHadoopConnectorHortonworksorClouderaHadoop微软大数据产品洞察力INSIGHTS数据管理DATAMANAGEMENT丰富数据DATAENRICHMENTPowerPivotPowerViewHadooponWindowsHadoop=BigData?HADOOP集成企业级安全，高可靠性，管理与微软商业智能工具无缝集成SQLServer数据平台的一部分在WindowsAzure上几分钟内完成部署SQLSERVER2012PARALLELDATAWAREHOUSE软硬件整合优化的并行数据仓库•从TB到PB的高可扩展性平台•使用MPP架构实现卓越的可扩展性•硬件厂商的选择•通过使用遵循行业标准的硬件降低成本•与Microsoft商业智能工具的深度集成•充分利用最新软件技术WindowsServer2012StorageSpacesWindowsServer2012Hyper-VSQLServer2012xVelocity列存储SQLSERVER2012PARALLELDATAWAREHOUSE开放和灵活与ApacheHadoop100%兼容工具由丰富的合作伙伴生态系统提供与社区的紧密合作AcceleratingthedeliveryofHadoopforWindowsHadoopforWindowsJavaScriptlibrariesHiveODBCdriversTheApacheSoftwareFoundation当前大数据分析的挑战：大量新技术需要学习掌握、周期长、见效缓慢数据仓库学习MapReduce需要IT人员提前手动将数据从HDFS导入数据仓库或集市，才可进行分析HDFS(Hadoop)HDFS(Hadoop)DatabaseHDFS(Hadoop)SQLServer2012PDWPoweredbyPolyBasePOLYBASE：数据处理的突破性技术SQL统一查询，结构化和非结构化数据•查询关联Hadoop表和关系型数据库表•采用标准SQL语言•Select,FromWhere沿用现有SQL技能无需IT人员介入节省时间和成本分析多样的数据类型企业数据及商业智能平台的进化-当前结构化数据源结构化数据源结构化数据源ODS数据集市多维度存储分析应用其他存储使用DW企业数据及商业智能平台的进化-未来大数据存储结构化数据源非结构化数据源数据流数据仓库数据集市多维度存储数据服务分析应用其他存储服务使用高度可视化----数据民主化的基础敏捷、精准的业务决策面向中高层领导------管理驾驶舱面向一线经营分析----大数据自助平台提供面向不同层面用户的解决方案分析的基础是数据可视化数据可视化是一门艺术1.面向中高层领导------管理驾驶舱领导驾驶舱是一个为高层管理层提供的“一站式”（One-Stop）决策支持的管理信息中心系统。它以驾驶舱的形式，通过各种常见的图表（速度表、音量柱、预警雷达、雷达球）形象标示企业运行的关键指标（KPI），直观的监测企业运营情况，并可以对异常关键指标预警，和挖掘分析。它能将企业管理决策提升到一个新的高度。最大化地发挥高层经理了解、领导和控制公司业务的管理室（即驾驶舱）2.面向普通员工------大数据自助式分析平台DEMO1-EXCELBI分析增强能力透视表、透视图、切片器、跨维度钻取DEMO2-EXCEL新增能力POWERVIEW自助分析联动、动态展现、0代码GIS、业务人员与IT人员新沟通方式DEMO3-EXCEL新增能力POWERMAP3DGIS自助分析DEMO4-微软POWERBI现实应用案例（微博与电影票房）DEMO5-微软POWERBI现实应用案例（星巴克机场选址开店）自助式BI案例---XX移动、XX联通成功案例背景：客户原有BI系统基于Cognos，后台数据库Oracle，但是业务人员学习困难，使用不易，推广工作困难重重。领导使用界面不够友好，导致决策迟缓。当有新需求时，重新部署需要很长周期。现在：经过启动新一轮BI前端工具选型，通过对各个BI厂商的POC成果对比，微软成功赢标。新平台改造：Oracle+Sqlserver2012SP1+Excel2013+SharePoint2013BI实施周期从原来3-10天反应时间，提升到现在2-3小时，分析决策效率大大提高高峰同时在线100多个用户。总结•微软大数据解决方案：•业务能力：•访问任意数据源（关系型数据库、Hadoop、非结构化数据)的数据整合平台•低成本的数据价值洞察平台•技术能力：•结构化、半结构化、非结构化数据的处理能力