大数据应用的机会与挑战Source:IDC2013C-SuitBarometer,N=1003(LoBs507,CIO/CTOs496)企业最重要的业务关注点和面临的ICT挑战21、提高生产力2、管理成本3、开拓新市场1、保证IT预算2、处理增长的复杂性/新的用户需求3、IT治理与合规©IDC2013第三平台是ICT技术的未来3Source:IDC,2013主机、终端PC、LAN、互联网、客户/服务器云计算、大数据、移动、社交以计算为中心以业务为中心以用户为中心©IDC2013©IDC2013更多设备更多内容更多应用更多数据数据世界的快速演变4数字宇宙时代来临–全球5全球数字宇宙到2010-2020年将有50倍的增长2011年数据存储在32GB的iPad中2,8731,992Total:2,873EBSource:IDC数字宇宙研究报告,2012.12©IDC2013中国在数字宇宙中的位置日趋重要6在2012年至2020年间,预计将从364EB增长到8,600EB,每年增长近50%到2020年,如果把数字宇宙的数据量印制成书,其厚度将是地球到冥王星间距离的30倍(1,500亿公里)3648,600Source:IDC数字宇宙研究报告,2012.12全球的13%全球的21%©IDC2013中国大数据的机会02000400060008000100002012202036485691192997有价值数据全部数据EB33%的有价值数据,只有0.5%的进行了分析有价值数据增长了25倍©IDC20137议程IDC的大数据市场规模及生态系统大数据的用户需求以及典型应用大数据应用面临的挑战给厂商的建议©IDC20138IDC关于大数据的定义©IDC2013决策支持自动化流程分析挖掘数据组织和管理基础架构为了更为经济的从高频率获取的、大容量的、不同结构和类型的数据中获取价值,而设计的新一代架构和技术。9亚太及中国大数据市场规模10来源:IDC亚太区大数据市场分析和预测,2013年9月1605403514643164201220132014201520162017中国大数据技术和服务市场规模及预测(US$M)基础设施软件服务复合年增长率2012-201740%42%38%39%4531,5132438433521,050201220132014201520162017亚太区大数据技术和服务市场规模及预测(US$M)基础设施软件服务复合年增长率2012-201731%36%37%35%1,0483,405238850©IDC201311无共享扩展存储+SSDMPP+内存计算Hadoop高速/弹性网络融合基础架构云NoSQLDB最终用户业务流程分析师/科学家信息处理架构师/工程师数据采集数据生产者数据创建系统集成容量速度种类价值目标流处理事件管理实时事件数据探索相关数据建模/应用场景预测获得洞察交付模式随时随地分析服务情境感知业务应用随时选择基于位置的服务警报和响应推送工作流程和交互自动化智能设备和系统嵌入电子邮件和消息移动应用数据事务处理和使用日志机器和传感器地理定位人际关系和社会影响IDC版权所有(2013)大数据生态系统:从数据到决策©IDC201312无共享扩展存储+SSDMPP+内存计算Hadoop高速/弹性网络融合基础架构云NoSQLDB最终用户业务流程分析师/科学家信息处理架构师/工程师数据采集数据生产者数据创建系统集成容量速度种类价值目标流处理事件管理实时事件数据探索相关数据建模/应用场景预测获得洞察交付模式随时随地分析服务情境感知业务应用随时选择基于位置的服务警报和响应推送工作流程和交互自动化智能设备和系统嵌入电子邮件和消息移动应用数据事务处理和使用日志机器和传感器地理定位人际关系和社会影响IDC版权所有(2013)大数据生态系统:从数据到决策系统集成体积速度种类价值用户产生的文本68%(采集的数据)交易数据67%(采集的数据)机器或设备数据41%(采集的数据)管理中5TB数据36%已部署/部署中Hadoop21%保留/删除数据35%(最大的挑战)已部署/部署中文本分析26%管理数据质量(最大的IT挑战)已部署/部署中事件处理22%客户参与[细分客户、净推荐、个性化](2013业务热点)地理信息服务[零售报价、资产跟踪](GPS创新)智慧城市(水、电、交通、安全)(M2M创新)©IDC2013议程IDC的大数据市场规模及生态系统大数据的用户需求以及典型应用大数据应用面临的挑战给厂商的建议©IDC201313大数据应用的需求方向0%10%20%30%40%50%运营数据分析服务创新销售交易数据分析在线客户行为分析非分析类负载不想用大数据技术机器/设备数据分析应用大数据在哪些主要领域?(%Intended)©IDC201314来源:IDC软件市场最终用户调研2013(n=750,中国n=100)用户收集与分析的大数据种类15来源:IDC软件市场最终用户调研2013(n=750,中国n=100)0%10%20%30%40%50%60%70%80%社交网络数据传感器/机器数据Web日志(点击流)移动设备产生的GPS数据音频视频交易数据日志文件文本信息,如E-mail/表格/即时消…被收集的数据被分析的数据中国大数据分析应用路线图传统世界新世界信息收集和管理商业智能和报表部门级分析型应用企业级分析应用大数据分析互联网公司电信银行政府零售©IDC201316金融政府电信•深度分析型CRM•防欺诈和金融风险管理•根据客户建议优化业务•风险可控的产品组合管理•舆情监测及分析系统•大情报系统•平安城市•快速险情或疾病应急系统•日志查询与分析•更多增值服务•社交媒体分析降低用户转网率•基于LBS的精准产品营销大数据行业机会©IDC201317零售交通医疗•客户购买行为分析•交叉销售•品牌定价策略分析•促销效果分析•智能交通和道路监控管理•客票和客户管理•货运和物流管理•航空/铁路智能线路调度•电子健康档案管理•疾病预防和控制•自动化诊断和处理系统大数据行业机会©IDC201318议程IDC的大数据市场规模及生态系统大数据的用户需求以及典型应用大数据应用面临的挑战给厂商的建议©IDC201319用户在大数据应用中面临的挑战缺乏相关的分析人员决定哪些数据相关技术基础架构的成本缺乏足够的IT技能管理大数据项目难以获得回报/执行很复杂0%5%10%15%20%25%面对大数据的最大挑战有那些?(%)业务层面技术差距20©IDC2013来源:IDC软件市场最终用户调研2013(n=750,中国n=100)消除对大数据认识的误区大数据就是Hadoop应用。大数据是关于大量数据的应用大数据主要是关于社交媒体数据的应用大数据都是和技术相关的。大数据都是和分析相关的。一种解决方案能够满足所有大数据的应用需求。©IDC201321议程IDC的大数据市场规模及生态系统大数据的用户需求以及典型应用大数据应用面临的挑战给用户的建议©IDC201322给用户的三点建议©IDC201323可测量的结果有可测量的业务结果非常重要(例如,将呼叫中心销售成功率提升3%,或提高每日的服务台效率)选择切入点注重客户参与的相关数据(客户能对报价、服务或事件做出响应就是好的开始)从现有数据着手(你可能拥有未经分析的交易数据、点击流、表格、呼叫日志、电子邮件和设备等数据)现有数据