大数据与云计算产业内容•大数据–大数据介绍–大数据产业–行业存在的问题–发展趋势•云计算–云计算介绍–云计算产业–应用现状–发展趋势如今,我们处在大数据时代大数据的成因大数据的4V特性体量Volume多样性Variety价值密度Value速度Velocity非结构化数据的超大规模和增长总数据量的80~90%比结构化数据增长快10倍到50倍是传统数据仓库的10倍到50倍大数据的异构和多样性很多不同形式(文本、图像、视频、机器数据)无模式或者模式不明显不连贯的语法或句义大量的不相关信息对未来趋势与模式的可预测分析深度复杂分析(机器学习、人工智能Vs传统商务智能(咨询、报告等)实时分析而非批量式分析数据输入、处理与丢弃立竿见影而非事后见效SomeExamplesofBIgData大数据产业链大数据-数据资产领域“数据正在成为一种(战略)资产”已经是行业的共识。不同的公司把握着各个数据入口,而把握数据资产的企业也必然成为大数据的首批和直接受益者。从公司业务模式上,数据资产公司可以区分为纯数据资产公司和兼数据资产公司;从数据类型上,数据可以区分为交易数据(含询价等)和交互数据。典型的纯数据资产公司有友盟和个信互动等,两者都具有占据基础性控制节点、后端整合了整类兼数据资产公司等特征,分别针对移动应用统计分析(已为超过18万应用开发者服务)和移动应用的信息推送(已接入超过6.8亿用户)。而兼数据资产公司数量更多,按交易数据与交互数据分类:交易数据类包含万得(金融)、阿里巴巴(电商)、美团(O2O)、拉卡拉(第三方支付)、顺丰(物流)、中国移动和沃尔玛(其他)等;交互数据类包含新浪微博(SNS)、远望谷(物联网)、百度(搜索引擎)、盛大游戏和优酷视屏(其他)等。大数据–数据处理与应用数据处理相关领域:在数据处理相关的领域,主要包含两个方面的问题:一是数据标准化与有效性整理;二是面向过程(具体目的)的数据处理与粗提取。类似的较成熟机构包括彭博、万得、同花顺等,可以预见在未来会形成不同细分领域下的数据处理公司。在大数据处理相关领域,两个绕不开的点为基础软件(数据库软件)和云计算。数据应用相关领域:掌握数据资产的企业群是大数据的首批和直接受益者,因为他们会自然、方便的对大数据进行把玩、加工、消化、利用。而随着应用价值的逐步体现及大数据产业的发展,应用将必然扩张到生产生活的方方面面,广泛影响各行各业。大数据的应用将使得金融保险、信息技术、公共管理、贸易物流等领域获得极大的价值提升。大数据产业结构行业存在的主要问题•数据的归属权不清晰,各家数据资产型企业私密占有平台数据,制约着大数据的融合及发展;•数据有效性将直接影响到大数据的应用水平;•适宜海量数据处理的软硬件成熟度不够,成本太高,普及率低下;•数据尚未获得真正意义上的定价和产业化。行业发展趋势•数据源的更新和增加–新的入口、新的模式•数据处理难度降低–海量数据处理的数据库、云计算•数据应用深化–首先受益的是零售、物流、金融、电信、政府几个板块。同时,在BI应用先行行业(特别是零售和物流),每个细分领域都将出现专门的领先型行业解决方案提供商典型公司–拓尔思云计算简介通俗的理解是,云计算的“云“就是存在于互联网上的服务器集群上的资源,它包括硬件资源(服务器、存储器、CPU等)和软件资源(如应用软件、集成开发环境等),所有的处理都在云计算提供商所提供的计算机群来完成。SomeExamplesofCloud云计算产业链全景图相关公司•云平台提供商:云计算的实现依赖于能够实现虚拟化、自动负载平衡、随需应变的软硬件平台,在这一领域的提供商主要是传统上领先的软硬件生产商,如EMC下的VMware,以及RedHat、Oracle、Sun、IBM、Cisco等等。这部分公司的产品主要特点是灵活和稳定兼备的集群方案,以及标准化、廉价的硬件产品。国内的对应公司包括浪潮、华为、中兴、联想、方正等;•云系统集成商:帮助用户搭建云计算的软硬件平台,尤其是企业私有云。代表厂商包括IBM、HP以及亚马逊、Google以及AT&T、Verizon等。这部分公司普遍具有强大的研发能力和足够的技术团队,以及灵活可复制性的产品。国内公司包括华胜天成、浪潮软件、东软集团、神州数码等;•云应用开发商:即SaaS应用服务提供商,包括传统软件厂商如微软的.Live服务,互联网巨头Google的gmail、map,以及新兴的在线CRM解决方案提供商Salesforce等。国内主要商用类软件厂商如用友、金蝶、八百客等;•云服务运营商:这一部分涵盖了为企业和个人用户提供计算和存储资源的IaaS公司,如提供新型数据中心服务的亚马逊、Rackspace、GoGrid,以及为应用开发者提供开发平台的PaaS公司如微软Azure、GoogleApp以及Force.com等。这部分是云计算的核心领域之一,今后绝大多数的计算处理以及应用开发都将在这些服务中展开。国内服务商包括通信运营商、网宿科技、神州泰岳等。云计算在中国的总体应用现状201.IT人员更关注云计算技术应用和发展,占七成2.云计算在IT、制造、教育等行业受到普遍关注3.云计算概念普及的广度与深度在拓展4.中国市场对云计算品牌认知与全球相比存在较大差异5.减少成本投入被认为是采用云计算的最大优势6.云安全、数据存储与管理是企业关注云计算的焦点7.云应用在中国市场目前还处于低层次、初级应用阶段,已使用云计算者不足10%8.混合云是最被看好的云计算模式9.七成企业构建私有云更加看重开源解决方案10.缺乏成熟的云计算供应商和成功案例成当前最大障碍云计算应用普及的主要障碍21缺乏成熟的云计算供应商和成功案例,被认为是阻碍中国云计算发展的重要因素。云计算供应商的乐观与用户的理性将有一段长时间的博弈过程。58.4%53.6%46.4%45.4%41.5%38.2%33.1%24.3%3.4%0%10%20%30%40%50%60%70%国内缺少成熟的云服务商及成功案例国内用户对云计算理解有限网络带宽与费用限制受传统IT应用模式和观念所限制云计算缺乏统一标准对安全性和风险的顾虑虚拟化技术应用尚未普及相关政策法规有待完善不清楚发展趋势国内云计算的萌芽在2009年就已经出现,是云计算的起步阶段。目前超级计算应用于各行业的创新研究,在工业设计、节能环保、新药研制、气象分析、地质灾害预测、物联网应用、软件开发及仿真模拟等方面有广泛应用。云计算的发展需要有大量的基础设施和目标客户群。对于企业用户来讲,缺乏太多可以参照的用户案例,不利于企业做有针对性的参考和部署。云计算平台需要大规模部署才能够逐步走向商用化和成熟化,目前国内对于云计算平台的使用还相对较少,虽然已经有了云计算的意识但是企业在系统迁移上仍旧滞后。根据前瞻产业研究院发布的《2014-2018年中国云计算产业发展前景与投资战略规划分析报告》显示:云计算在我国尚处于市场导入阶段,但其发展的速度及影响力惊人。2010年我国云计算市场规模达167.3亿元,较上年增长81.4%。预计今年,我国云计算市场规模将达606.8亿元;2014年我国云计算市场规模将达1174.12亿元。“十二五”期间,我国云计算产业链规模可达7500亿至1万亿元人民币。随着国内移动互联网的发展以及国内创业环境的逐步完善,创业者对于云服务的应用会更加普遍,同时能够节省大量的系统维护成本,云服务的需求将会迎来一个增长时期。