2大数据时代来临大数据应用创新大数据市场机遇分析2全球骨干网IP流量增长10年超过1000倍全球新产生的数据年增40%,全球信息总量每两年就可以翻番!而对新增数据的处理能力以及其利用率的增长则不足5%。将有90%的数字内容属于非结构化内容。参考:TheZettabyteEra,CiscoVNI,20123全球互联网流量的变化现在一个病人的CT影像往往多达两千幅,数据量已经到了几十个GB。如今中国大城市的医院每天门诊上万人,全国每年门诊人数更是以数十亿计,住院人次已经达到两亿人次。按照医疗行业的相关规定,一个患者的数据通常需要保留50年以上。医疗大数据1.2万亿——2012年谷歌的搜索数量22亿——全球电子邮件用户的数量2.46亿——通过所有顶级域名的域名注册数量24亿——全球互联网用户的数量10亿——Facebook月活跃用户在去年10月超过了10亿7PB——每月Facebook增加7PB的图片内容59%——全球移动数据流量59%的份额来自于视频500MB——智能手机平均每月消耗的数据流量为500MB504kbps——全球所有手机平均移动网络的连接速度为504kbps1820kbps——全球智能手机平均移动网络的连接速度为1820kbps互联网大数据2009年中国环境一号A、B卫星在轨交付,可监测大型水体蓝藻水华监测、沙尘暴监测、区域生态环境动态变化监测、地震环境风险排查等。目前已建国家地表水质自动监测站100个,环境空气自动监测站661个。智慧环保大数据在2010上海世博会期间,上万个安全监视摄像头安装在公共汽车、卡车和应急车辆上。一个8Mbps摄像头产生的数据量是3.6GB/小时。很多城市的摄像头多达几十万个,一个月的数据量达到数十PB。若需保存3个月则存储量高达100PB。安全监控大数据4④关键词①“大数据”的概念②“大数据”的特征狭义大数据:是指海量、多样化的交易数据、交互数据与传感数据集合。广义大数据:是指基于海量、多样化的交易数据、交互数据与传感数据,通过快速获取、处理、分析等一系列手段以从中提取价值的技术、产品及服务。海量化全球数据量爆发式增长,全球可统计的数据存储量2015年将超过8ZB多样化非结构化数据占全部数据的80%~90%,增长速度比结构化数据快10倍以上快速化实时分析、实时洞察、快速响应价值化蕴含巨大价值,成为重要的新型战略资产③“大数据”的价值3000亿美元——美国保健的年度潜在价值,相当于西班牙年度医疗保健开支两倍2500亿欧元——欧洲公共管理的潜在年度价值,比希腊GDP的两倍还多6000亿美元——服务提供者利用全球个人位置可获得潜在的消费者年度剩余60%的增加——零售商利用大数据可得的运营利润50%的减少——制造业设备装备成本5并购:IBM公司自2005年以来并购大数据公司资金总规模超过160亿美元;阿里巴巴并购新浪微博和高德地图大数据产品:IBMPureData系统,SAPHANA,OrcaleExadata等等Hadoop:Hadoop成为大数据处理的主流标准大数据时代来临大数据应用创新大数据市场发展展望6利用GPS数据了解交通状况谷歌搜索与流感预测智能电表应用级家庭能源监测大数据与乔布斯的癌症治疗微博&投资沃尔玛的啤酒与纸尿布塔吉特预测少女怀孕沃尔玛蛋挞与飓风用品的关系“魔毯”病人的监控智慧城市&智能化交通谷歌翻译系统Farecast与飞机票预测系统大数据的应用已在各行各业开始推广7电信,19.9%金融,17.5%交通,9.8%政府,8.8%医疗,6.3%互联网,28.9%others,8.8%17.0034.3073.07144.9682.2%101.8%113.0%98.4%70%80%90%100%110%120%1601401201008060402002012年2013年2014年2015年投资规模(亿元)增长率(YOY)2012-2015年中国大数据IT应用市场规模2012年中国大数据IT应用行业投资结构2012年,大数据大规模应用正处于爆发的前夜8未来几年大数据应用市场年均复合增长率将保持增长2015年大数据应用市场规模预计是今年的4倍。互联网、电信、金融行业是IT应用投资市场主要方向。运用概况大数据在智慧城市中的应用大数据在金融行业中的应用大数据在电信行业中的应用92013年8月,住建部公布第三批智慧城市试点名单,目前国家智慧城市试点总数已达193个。•基本公共服务面临巨大的压力,居住、医疗、生活资料的供给无法用常规方法满足。•拥堵成为常态,出行成本剧烈上升,交通难以管理。人口交通•指数上升的通讯需求,对通讯保障的高要求,需要更强壮的通信网络来支撑。通讯水资源•无法满足生活和经济的用水,水质污染,已经普遍存在的水土流失。•巨大的供给和储备,能源的波动更加剧烈,能源中断带来不可想象的灾难。能源超过2000万的城市人10口规模,每天城市运行消耗:2亿度电2000万方气8万吨煤2.3万顿油1000万方水每天消费:1700吨菜1100吨肉1000吨食用油500吨口粮产生:1.8万吨垃圾360万方污水云平台物联网泛互联网化大数据智慧应用行业垂直整合数据成为资产11中国智慧城市IT投资规模与增长1195137716381916230310.4%15.2%19.0%17.0%20.2%0%10%20%30%05001,0001,5002,0002,500201120122013E规模(亿元)2014E2015E增长率2012年中国智慧城市IT投资结构智慧交通26.9%平安城市20.2%智慧建筑9.2%智慧医疗15.2%智慧教育4.2%智慧政务7.8%智慧家居6.7%Others9.8%中国智慧城市重点领域大数据应用规模1.661.493.003.532.704.796.728.1917.6113.801.070.8512..410410.094.800.010.020.030.040.050.02012Others2013E智慧医疗2014E平安城市2015E智慧交通(亿元)从整体投资规模来看,“十二五”期间智慧城市IT投资规模近1万亿元。重点领域提供智慧应用服务。其中智慧交通、平安城市、智慧医疗占据较大比例。提高城镇化质量、改造并提升社会公共管理职能,促进城市管理和服务智能化发展。智慧城市发展现状12台州有上千台数字交通监控设备,实施7×24小时不间断捕获图像和视频数据,每月数据量达TB级。1.部署ApacheHadoop*软件,存储最近24个月的交通违法图像数据,实时对数据检索,并可随时无缝扩容。198TB存储空间部署统一的数据中心,对数字交通信息实现集中存储。2.部署城道重点车辆动态监管系统,不到10秒的时间即可得到从24亿条过车数据中的机动车号牌查询出的精确结果和行车轨迹。如何有效利用不断增加的交通信息数据持续改进交通管理成为主要挑战。商业价值解决方案提升交通案件侦破能力。机动车违法图像信息在系统的保存周期从3个月延长到24个月。13增强交通警察对机动车辆的监管能力。交警可以从24亿条过车数据中轻松检索被监测机动车的号牌精确查询和行车轨迹。便捷利用关联车辆的分析数据。针对24亿条实际过车数据进行两卡点、多卡点的伴随车辆和碰撞车辆的复杂分析,查询耗时仅为10秒左右。大数据在智慧城市中的应用大数据在金融行业中的应用大数据在电信行业中的应用14银行证券保险机遇•提高营销精准度•增强客户追踪•减少欺诈和违约•降低监管成本•极大提高业绩催生金融大数据时代到来完善大数据技术应用环境挑战15•强大基础设施•诱发金融市场转型•对管理能力要求高•安全问题将更突出•人员配置要更完善大数据提升企业管理决策水平提供移动、即时、生动的综合金融服务数据中心灾备中心网上银行图形化管理信息一致性保障智能安全监控DC服务外包智能分析决策网络银行移动支付资产统一管理手机银行主动客户服务体系云端银行DC节能多功能智能卡大数据催化创新融合应用加快ERP个性化服务扁平式管理SCMCRMBPR信息化网络化智能化绿色银行16风险管理由于大数据应用的大规模推广,互联网金融将得到快速的发展,这对传统金融行业企业造成巨大的冲击。金融领域业务创新加速,传统金融企业也将加快业务转型的速度,与互联网公司合作,共同开展新型金融业务。金融行业发展现状中国金融行业IT投资规模与增长997.11105.81247.31410.71598.39.1%10.9%12.8%13.1%13.3%0%5%10%15%20%05001,0001,5002,00020112012201320142015增长率(YOY)投资规模(亿元)中国金融行业IT投资结构预测12.1%12.3%17.0%13.1%0.0%5.0%10.0%15.0%20.0%0.00500.001000.001500.002000.00银行证券保险总计201320142015CAGR中国金融行业大数据应用结构预测93.8%101.4%98.8%97.7%90.0%95.0%100.0%105.0%0510152025银行证券保险总计201320142015CAGR17阿里巴巴是中国领先的b2b电子商务公司。淘宝是其重要子品牌,截至2009年底,淘宝拥有注册会员1.7亿,交易额为2083亿人民币,2010年交易额达4000亿元人民币。今年双十一1分钟内交易额突破1亿;1小时内突破67亿,成交超2500万单。阿里公司根据在淘宝网上中小企业的交易状况进行数据分析和筛选,实施阿里互联网金融。——小额贷:累计服务25万家企业,贷款总额过800亿,户均6万,不良率1.02%(银行小微企业为5.5%~6%);——余额宝:最低转入为1元,1600万用户,七日年化收益率为4.54%;——众安保险:注册资本10亿元,是一家基于大数据的创新型互联网保险公司。阿里金融核心:量化之路依托自身在网络体系内的巨大客户数据,进行一系列数据分析挖掘和风险评估;内部数据:交易,评价、货运、口碑等;外部数据:海关、税务、电力、水力等;18大数据在智慧城市中的应用大数据在金融行业中的应用大数据在电信行业中的应用1920数据源运营商云计算中心及大数据处理中心数据服务移动应用智慧城市大数据服务运营商用户规模不小于互联网厂商的用户规模。21用户数据是连续喝巨大的,为运营商开展数据分析提供了数据基础。移动互联网和穿戴计算等新技术使得运营商对于用户数据类型的掌握以及用户粘性的提升都有帮助。IIIIII移动互联网快速发展,互联网公司开始与传统电信运营商重新划分产业价值链,推动电信运营商的转型。电信业整体投资增长乏力,软件和服务投资亮点频现。海量的数据和多样化的数据既是挑战又是机遇电信行业发展现状306837733022333136143.401000200030004000200820092010规模(亿元)20112012中国电信业投资规模与增长2012-2015中国电信行业大数据应用市场规模6.513.325.390.8%105.6%90.6%50%70%90%110%0102030201220132014市场规模(亿元)2015YOY10864202013年中国联通2014年中国移动2015年中国电信2.742.481.235.355.122.792013-2015三大运营商大数据投资规模9.749.75225.77单位:亿元•中国联通3G业务在流量方面的投诉达到了投诉的7-10%,并且最近这半年还在成迅猛的上升趋势,个别省份已经达到了20%。争议多集中于联通有关流量计费数据不准确或缺失。•联通客户服务满意度明显提升,今年上半年客户投诉率同比降3.5%。•更重要的是利用这个系统可以做深入的数据挖掘工作,如实现精细营销,成功率由原来的5%,提升至20%。3G流量账单争议多基于Hadoop的大数据应用•采用Hadoop+HBase+MapReduce的大数据应用架构。•存储不少于6个月原始上网记录,中间的统计报表保存不少于5年。在几千