1大数据行业研究报告一、行业整体情况大数据是数据服务中针对海量数据提供服务的部分,其价值在于从海量数据中提取有用信息,以方便企业针对市场及自身用户开展市场营销活动、进行市场预测与生产优化、通过风险控制最终实现经营活动的利润最大化。大数据的应用强调以新的理念应用于辅助决策、发现新的知识,更强调在线闭环的业务流程优化。2010年,全球数字规模首次达到了“ZB”(1ZB=1024TB)级别。大数据经过前期的探索和起步阶段,已经在接受度、技术、应用等各个方面趋于成熟,开始步入产业的快速发展阶段。随着科技发展,数据存储和传输成本的下降助推了数据量的增长。根据IDC的测算,全球信息总量每两年左右就增长一倍。2011年全球被创建和被复制的数据总量有1.8ZB。随着互联网与产业的加速融合,未来数据体量的增速将呈现指数上升态势。我国大数据产业起步于2009年,该阶段大数据率先应用于互联网企业。2012年-2013年为我国大数据的启动阶段,随着大数据概念的普及以及大数据标准活动的推广,一部分具有数据资源的企业开始转型。2014年以后,我国大数据进入快速发展时期,在该阶段,政府陆续出台了一系列扶持大数据发展的政策,同时“互联网+”、智慧城市等理念的兴起,让人们意识到大数据在各行业中的应用价值。根据IDC预计,2020年全球数据使用量将达到40ZB,需要约429亿个1TB的硬盘进行存储,届时中国产生的数据量将占到全球总量的21%。目前国内大数据应用主要集中在金融、电信等少数几个行业,随着政府数据公开,以及其他行业自身的需求,大数据应用领域将不断扩大,从金融、电信渗透至政府运营、医疗、工业等行业。二、市场规模根据Statista的数据显示,全球范围内的大数据服务行业进入了平稳增长的2阶段,2015年全球大数据市场规模将近1,500亿人民币,同比增长24.2%。从竞争格局上看,全球大数据市场结构从垄断竞争向完全竞争格局演化,细分市场以行业解决方案、计算分析服务、存储服务、数据库服务和大数据应用为主。2012年-2018年全球大数据市场规模及增长情况如下:数据来源:Statista中国大数据产业起步晚,发展速度快。物联网、移动互联网的迅速发展,使数据产生速度加快、规模加大,迫切需要运用大数据手段进行分析处理,提炼其中的有效信息。2015年,我国大数据市场规模为160亿元,占全球总市场规模的10.7%,但同比增长率为65.3%,是全球增长率的2.7倍。2012-2018年我国大数据市场规模及增长情况如下图:数据来源:36氪研究院3三、行业壁垒1、技术壁垒在大数据技术体系中,数据的采集是基础,而数据存储、分析、可视化均与数据模式紧密相关,传统的结构化数据将不再是大数据的核心,而大量存在的非结构化数据和半结构化数据带来的技术和应用领域是大数据的蓝海。大数据的市场价值主要体现在对海量结构化和非结构化数据的分析和可视化,多类型的数据分析、复杂的数据组合、多源的数据融合等问题将成为大数据创新的重要聚焦点。这些都对本行业的新进企业形成了较高的技术壁垒。2、行业资源壁垒行业下游客户主要为商业银行、电信行业、政府部门等,对供应商的资质、服务有较高的标准及严格的采购程序,而一旦选定供应商,则意味着对供应商实力的认可。供应商根据客户需求提供定制化服务,会导致客户对该服务具有一定粘性,有助于与客户建立长期的合作关系,同时随着先进入者前期的市场拓展及市场知名度的提高,有利于吸引并巩固一批稳定的客户资源,而这对于市场新进者来说,将会形成一定的行业资源壁垒。3、人才壁垒大数据是一种虚拟化的数字及其运算逻辑,不仅需要高端的计算机知识,更需要综合掌握数学、统计学、信息工程等相关学科知识。目前,我国大数据人才储备远不能满足发展需要,尤其是缺乏既熟悉行业业务需求,又掌握大数据技术与管理的综合型人才。行业先进入者经过多年的发展,已在建立了较为健全和合理的人才培养和管理制度,集聚了一批行业内的专业人才,对市场新进入者形成了较高的人才壁垒。四、行业主管机关及政策法规1、行业管理体制及主管部门(1)行业主管部门4工业和信息化部是本行业的管理和监督部门,组织协调并管理全国软件企业认定工作,负责全国软件产品的管理工作,主要职责为制定并组织实施工业、通信业的行业规划、计划和产业政策,拟订行业技术规范和标准并组织实施,拟订高技术产业中涉及生物医药、新材料、航空航天、信息产业等的规划、政策和标准并组织实施,指导行业技术创新和技术进步,以先进适用技术改造提升传统产业,组织实施有关国家科技重大专项,推进相关科研成果产业化,推动软件业、信息服务业和新兴产业发展。(2)行业协会中国软件行业协会是行业的自律组织,成立于1984年9月6日,由从事软件研究开发、出版、销售、培训,从事信息化系统研究开发,开展信息服务,以及为软件产业提供咨询、市场调研、投融资服务和其他中介服务等的企事业单位与个人自愿结合组成,主要职责为开展“双软认定”的工作;开展中国软件服务业企业信用评价工作;开展中国软件和服务业企业信用评价;承办政府委托的任务,参加软件产业发展规划制定;制定行约行规,推进软件正版化,为产业发展创造公平竞争环境。2、行业法规和政策(1)主要法律法规我国在软件和信息技术服务业建立了较为完善的法律法规体系,主要有:名称颁布单位发布时间与本行业相关内容《中华人民共和国电信条例》国务院2000年经营电信业务,必须依照本条例的规定取得国务院信息产业主管部门或者省、自治区、直辖市电信管理机构颁发的电信业务经营许可证。《互联网信息服务管理办法》国务院2000年国家对经营性互联网信息服务实行许可制度;对非经营性互联网信息服务实行备案制度。未取得许可或者未履行备案手续的,不得从事互联网信息服务。《计算机软件保护条例》国务院2001年中国公民、法人或者其他组织对其所开发的软件,不论是否发表,依照本条例享有著作权。《规范互联网信息服务市场秩序若干规定》工业和信息化部2011年互联网信息服务提供者经用户同意收集用户个人信息的,应当明确告知用户收集和处理用户个人信息的方式、内容和用途,不得收集其提供服5名称颁布单位发布时间与本行业相关内容务所必需以外的信息,不得将用户个人信息用于其提供服务之外的目的。《全国人大常委会关于加强网络信息保护的决定》全国人大常委会2012年网络服务提供者和其他企业事业单位及其工作人员对在业务活动中收集的公民个人电子信息必须严格保密,不得泄露、篡改、毁损,不得出售或者非法向他人提供。《电信和互联网用户个人信息保护规定》工业和信息化部2013年电信业务经营者、互联网信息服务提供者在提供服务的过程中收集、使用用户个人信息,应当遵循合法、正当、必要的原则。(2)主要产业政策近年来,国家出台了多项产业政策、发展规划和规范文件,支持软件和信息技术行业的健康快速发展,主要有:名称发布机构发布时间与本行业相关内容《关于鼓励软件产业和集成电路产业发展的若干政策》国务院2001年在投融资、税收、产业技术、软件出口、收入分配、人才、知识产权保护等方面对软件行业进行扶持。《电子信息产业调整和振兴规划》国务院2009年加快培育信息服务新模式新业态。把握软件服务化趋势,促进信息服务业务和模式创新,综合利用公共信息资源,进一步开发适应我国经济社会发展需求的信息服务业务。积极承接全球离岸服务外包业务,引导公共服务部门和企事业单位外包数据处理、信息技术运行维护等非核心业务,建立基于信息技术和网络的服务外包体系。《国务院关于加快培育和发展战略性新兴产业的决定》国务院2010年加快建设宽带、泛在、融合、安全的信息网络基础设施,推动新一代移动通信、下一代互联网核心设备和智能终端的研发及产业化,加快推进三网融合,促进物联网、云计算的研发和示范应用。《进一步鼓励软件产业和集成电路产业发展若干政策》国务院2011年紧紧围绕培育战略性新兴产业的目标,重点支持基础软件、面向新一代信息网络的高端软件、工业软件、数字内容相关软件、高端芯片、集成电路装备和工艺技术、集成电路关键材料、关键应用系统的研发以及重要技术标准的制订。《促进大数据发展行动纲要》国务院2015年加快政府数据开放共享,推动资源整合,提升治理能力;推动产业创新发展,培育6名称发布机构发布时间与本行业相关内容新兴业态,助力经济转型;强化安全保障,提高管理水平,促进健康发展。《中国制造2025》国务院2015年促进工业互联网、云计算、大数据在企业研发设计、生产制造、经营管理、销售服务等全流程和全产业链的综合集成应用。加强智能制造工业控制系统网络安全保障能力建设,健全综合保障体系。《积极推进“互联网+”行动的指导意见》国务院2015年鼓励“互联网+”企业整合国内外资源,面向全球提供工业云、供应链管理、大数据分析等网络服务,培育具有全球影响力的“互联网+”应用平台。《关于运用大数据加强对市场主体服务和监管的若干意见》国务院2015年以社会信用信息系统先导工程为基础,充分发挥国家人口基础信息库、法人单位信息资源库的基础作用和企业信用信息公示系统的依托作用,建立国家统一的信用信息共享交换平台,整合金融、工商登记、税收缴纳、社保缴费、交通违法、安全生产、质量监管、统计调查等领域信用信息,实现各地区、各部门信用信息共建共享。《大数据标准化白皮书(2016版)》全国信息技术标准化技术委员会、中国电子技术标准化研究院2016年立足于大数据发展所处的工业社会向信息社会转型的历史时期所独具的政策、经济与文化等特点,分析处于初期发展阶段的大数据对于经济、社会、产业的作用和影响;介绍目前国内、国外主要国家在大数据发展战略、技术与应用方面的布局与实践。五、行业发展趋势行业可预测未来有如下几个发展趋势:1、金融行业将接受大数据的变革。大数据技术并不仅仅是掌握庞大的数据信息,更重要的是对这些含有意义的数据进行针对性、专业化处理,以实现数据背后的价值。金融机构在业务开展过程中逐渐积累了包括客户基本信息、资产负债情况、资金交易记录等高价值数据,面对激增的海量数据,大数据技术会打破以前的数据壁垒,将不同类型的数据进行关联性认知和分析,产生了新的业务和价值。因此,与其他行业相比,大数据对金融行业更具潜在价值,如何利用大数7据实现对海量数据的分析洞察,将是行业创新和转型的关键。2、大数据底层的技术越来越成熟,进而使得大规模、多重应用的分析程序成为可能。Hadoop与NoSQL技术的应用,加速了数据处理与存储技术的发展,降低了使用成本,使得通过网络录得的海量数据得以被分析和利用。IDC预计到2020年全球数据总量将超过40ZB,这一数据量将是2011年的22倍。在过去几年中,全球的数据量正以每年58%的速度快速增长,按照目前存储容量以每年40%的增长速度计算,到2017年需要存储的数据量甚至可能大于存储设备的总容量。3、我国大数据发展的宏观政策环境不断完善。2014年以来,国务院、工信部等政府机构通过科技和产业化等专项政策陆续支持了一批大数据相关项目,在推进技术研发方面取得了积极效果。