云计算与大数据32

©版权所有2010EMCCorporation。保留所有权利。1大数据,大机遇陶波博士EMC中国研发中心首席技术官EMC中国研究院院长2©版权所有2011EMCCorporation。保留所有权利。SteveJobs，1995年2©版权所有2011EMCCorporation。保留所有权利。要实现阶段性变革、革命性变革，需要时机、技术、人才„的独特融合，以及对我们行业进行重大变革的运气。这种事情不会常常发生。3©版权所有2011EMCCorporation。保留所有权利。Source:2011IDCDigitalUniverseStudyGROW50XINTHENEXT10YEARSINFORMATIONINTHEENTERPRISEWILL快速膨胀中的各种数据来源4©版权所有2011EMCCorporation。保留所有权利。BigDataApplicationsFilesInTheDigitalUniverse500Quadrillion5+TBSource:2011IDCDigitalUniverseStudy,EMCCustomers5©版权所有2011EMCCorporation。保留所有权利。!!!!!!!!!!!!!!!“大数据无关乎大小，而关乎自由度”—Techcrunch!!!!!!!!!“发现：‘大数据’比卷更卓绝”—Gartner“大数据！它真实存在，实时提供，并且正在改变您的世界”—IDB“总数据：比大数据更‘大’”—451Group这是大数据时代...00.511.522.5Sep232007Oct282007Dec22007Jan62008Feb102008Mar162008Apr202008May252008Jun292008Aug32008Sep72008Oct122008Nov162008Dec212008Jan252009Mar12009Apr52009May102009Jun142009Jul192009Aug232009Sep272009Nov12009Dec62009Jan102010Feb142010Mar212010Apr252010May302010Jul42010Aug82010Sep122010Oct172010Nov212010Dec262010Jan302011Mar62011Apr102011May152011Jun192011谷歌趋势bigdata6©版权所有2011EMCCorporation。保留所有权利。执行DocumentumxCPEMC大数据“堆栈”分析GPDB+Hadoop+Chorus存储Isilon+Atmos？PB规模1实时/结构和非结构/协同2执行37©版权所有2011EMCCorporation。保留所有权利。大数据正在改变企业存储2009201020112012201320140102030405060708090来源：IDC基于文件：年复合增长率60.7%基于数据块：年复合增长率21.8%至2012年，销售的总存储容量的80%将用于基于文件的数据大数据源8©版权所有2011EMCCorporation。保留所有权利。大数据要求：容量和性能具有极大的可扩展性。9©版权所有2011EMCCorporation。保留所有权利。StorageIslandsMoreCapacity,MoreAdminsPerformanceOptimization“Whack-A-Mole”OneStoragePoolTo10+PBMoreCapacity,SameAdminsLinearPerformanceScalabilityScaleUp,ManualScaleOut,Automated大数据系统需要适用巨量资料的存储架构10©版权所有2011EMCCorporation。保留所有权利。11©版权所有2011EMCCorporation。保留所有权利。Isilon的OneFS横向扩展操作系统12©版权所有2011EMCCorporation。保留所有权利。FileStriping:WritingaFile13©版权所有2011EMCCorporation。保留所有权利。••••••••••••••Isilon解决方案适用于...14©版权所有2011EMCCorporation。保留所有权利。010002000300040005000600070008000900020062007200820092010”WithIsilon,We’veBeenAbleToGrowASingleFileSystemToNearlyNinePetabytesInLessThanFourYears,WhileStillMaintainingTheDataThroughputNecessaryToPowerOurWorkflowAndAdvanceOurResearch”MatthewTrunnellManager,ResearchComputingBroadInstituteStorageGrowth(TB)900PetabytesIncrementalStorageIncrementalHeadcountPerformanceConstraintsEMCIsilonNetAppIsilon成功案例15©版权所有2011EMCCorporation。保留所有权利。技术的聚合使大树据分析成为现实创新时间X86存储虚拟化网络Web聚合（亦即“云”）16©版权所有2011EMCCorporation。保留所有权利。我们还需要什么？17©版权所有2011EMCCorporation。保留所有权利。我们需要...完整的大数据分析堆栈和数据科学家创新社区18©版权所有2011EMCCorporation。保留所有权利。19©版权所有2011EMCCorporation。保留所有权利。EMCHADOOP非结构化。实时。企业就绪。20©版权所有2011EMCCorporation。保留所有权利。GreenplumHD产品系列•GreenplumHD社区版：–经认证的满堆栈，100%开源–虚拟机装置–所有核心功能开发反过来又有助于ApacheHadoop•GreenplumHD企业版：–与众不同、混合分布、具有高级功能–集成、经测试、加固型–与Hadoop、HBase、HDFSAPI百分百兼容•GreenplumHDDataComputingAppliance：–优化装置配置–消除复杂性，简化部署和管理–与GreenplumDatabase无缝集成21©版权所有2011EMCCorporation。保留所有权利。GreenplumHD技术创新可插拔I/O•IsilonOneFS•Atmos•Cassandra•MapR•提高效率和性能实时处理•低延迟读/写操作•实时数据交互和分析处理•与Cassandra和MapR集成容错•消除名称节点的单点故障•作业跟踪器及其他关键组件22©版权所有2011EMCCorporation。保留所有权利。GREENPLUMHDDATACOMPUTINGAPPLIANCEGreenplumDatabase与ApacheHadoop强强联合23©版权所有2011EMCCorporation。保留所有权利。GreenplumChorus:首创企业数据云平台•主要功能–自我服务式生成数据库–数据服务–合作分析•Chorus部署在VMware云计算平台和Greenplum数据库上•Chorus极大地加速从数据中提取信息的过程24©版权所有2011EMCCorporation。保留所有权利。25©版权所有2011EMCCorporation。保留所有权利。自我服务可以快速开始一个新的项目o生成数据库服务器,单节点或多节点o生成沙盒用于分析.o方便地导入数据.26©版权所有2011EMCCorporation。保留所有权利。创建合作环境对大数据做深度分析o创立项目工作空间共享文档，数据和工作流程.o在沙盒中实施工作流程和管理相关变更.o控制数据的权限.o从in-databaseanalyticsfunctions中导入函数27©版权所有2011EMCCorporation。保留所有权利。EDC成功实例：T-MobileCustomerChallenges–100TBTeradataEDWfocusedonoperationalreportingandfinancialconsolidation–EDWissinglesourceoftruth,underheavygovernanceandcontrol–Unabletosupportallofthecriticalinitiativesarounddatasurroundingthebusiness–Customerloyaltyandchurnthe#1businessinitiativefromtheCEOondownEDC:GreenplumDatabase+Chorus–ExtracteddatafromEDWandotherssourcesystemstoquicklyassemblenewanalyticmart–Generatedasocialgraphfromcalldetailrecordsandsubscriberdata–Within2weeksuncoveredbehaviorwhere“connected”subscriberswhere7Xmorelikelytochurnthanaverageuser–Deployed1PBproductionEDCwithGPtopowertheiranalyticinitiatives100TBEDW1PetabyteEDCEnterpriseDataCloud28©版权所有2011EMCCorporation。保留所有权利。构建完整的大数据分析堆栈分析工具集（业务分析、BI、统计等）GreenplumChorus针对数据的企业协作平台GreenplumDataComputingAppliance专用于大数据分析GreenplumDatabase企业版与社区版世界上可扩展性最强的MPP数据库平台GreenplumHDHadoop企业版与社区版针对非结构化数据的企业分析平台29©版权所有2011EMCCorporation。保留所有权利。表彰大数据创新者www.DataHeroAwards.com30©版权所有2011EMCCorporation。保留所有权利。“数据英雄奖”得主SilverSpringNetworks—能源类31©版权所有2011EMCCorporation。保留所有权利。“数据英雄奖”得主VivekKundra，美国首席信息官—远见奖32©版权所有2011EMCCorporation。保留所有权利。大数据=大机遇