北京移动大数据研究项目27

InformationChangetheWorld2013年6月北京东方国信科技股份有限公司北京移动大数据研究项目投标方案InformationChangetheWorld目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1总体技术方案5InformationChangetheWorld2东方国信是国内唯一一家以商业智能为题材的上市公司在2013年1月《福布斯》中文版发布其2013年度榜单“中国潜力企业榜”中，我公司再一次被列入“中国最具潜力100家上市公司”榜单第七位，这是我公司连续两年被福布斯中国收录该榜单之中。我公司被列入“中国潜力上市公司100强”，证明了《福布斯》中文版对东方国信的未来发展规划、商业运行模式、核心技术实力、管理理念和人才理念的认可。最适用的商业智能产品及解决方案最优产品，最佳服务构筑民族BI全产业链第一品牌公司致力于夯实国内商业智能与软件服务第一品牌排名证券简称证券代码主营产品总部所在地1掌趣科技300315.SZ移动游戏和互联网页面游戏北京2朗玛信息300288.SZ对对碰和朗玛网广告贵州贵阳3三诺生物300298.SZ配套专用试条和血糖测试仪湖南长沙4远方光电300306.SZ光谱仪及其配套设备浙江杭州5科大智能300222.SZ配电和用电自动化系统上海6国瓷材料300285.SZMLCC系列配方粉山东东营7东方国信300166.SZ企业商业智能系统解决方案北京8云意电气300304.SZ整流器和调节器江苏徐州9邦讯技术300312.SZ通讯配套服务北京10舒泰神300204.SZ苏肽生和苏生北京最专业的商业智能业务专家库最高效的商业智能交付实施团队InformationChangetheWorld东方国信为多行业客户提供专业化的商业智能解决方案3•作为核心合作伙伴供应商，我公司承建了中国联通25个省分公司及联通集团公司集中化经营分析系统的建设工作。这其中东方国信帮助中国联通构建了全国最大的数据仓库系统——集中化数据仓库（总数据量193PB）；•我公司承建了中国电信14个省分公司的数据仓库系统和核心经营分析系统的建设和运营工作；•我公司为中国移动9个省分公司和移动集团公司提供数据仓库系统和经营分析系统的建设及运营工作。同时为中国移动全资子公司中国铁通集团公司及4个省分公司提供核心系统软件及建设服务；•东方国信为国家电网、中国石油、西部机场集团、中航三星人寿及多家地方商业银行等客户，提供数据仓库及商业智能解决方案。InformationChangetheWorld东方国信在商业智能领域的核心竞争力4领先经验团队专注资金大规模研发资金投入，紧跟云计算、“大数据”处理、社交化、数据可视化等业界脉搏汇聚业内800名精通商业智能业务的专家，辅助客户有效地挖掘数据资产超过2600人的专业服务队伍提供专业化商业智能定制方案1997年至今，始终专注于国内数据仓库及商业智能领域的产品研发，专注于做适合国内客户的Bi软件借助资本市场的有利条件，实现充沛的资金保障，确保公司的稳定和可持续发展在群雄逐鹿的商业智能领域，东方国信靠什么一路走来？InformationChangetheWorld多年的BI领域运营经验告诉我们：商业智能系统的价值彰显本质上依靠持续不断的运营5东方国信一直采用“T+B”的运营模式辅助客户用好BI系统，确保客户投入的商业智能系统有效地发挥其价值Think业务咨询Build系统建设将业务咨询的分析与研究成果在平台上进行固化，使系统能够更有效地满足业务部门的支撑需求平台中的技术数据是业务分析与模型构建的基础，咨询的成果来源于系统平台，通过业务咨询能够充分发挥平台建设的价值•主要工作描述•业务梳理•问题诊断•原因定位•监控分析•模型设计•策略建议•效果评估•需求编写•主要工作描述•平台规划•架构设计•需求理解•数据准备•接口建设•系统开发•系统测试•调优InformationChangetheWorld目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1总体技术方案5项目需求本项目主要针对管理支撑域大数据专题研究，其范围主要为MSS域，旨在梳理企业内部管理数据化工作现状，探索管理支撑领域大数据的应用价值，规划管理支撑领域大数据的实施路线。研究内容包括企业内部管理数据化现状调研与梳理、管理支撑大数据应用价值及方案研究、管理支撑大数据实施规划建议几部分。1．企业内部管理数据化现状调研与梳理：伴随企业内部管理的电子化水平不断提升，企业内部管理数据也在逐年增长，包括企业内部人财物信息、内部知识、业务流程数据、企业内部用户的工作行为等。本部分针对MSS域，梳理目前企业内部管理数据化现状，旨在考察目前企业管理的数据化现状。2．管理支撑大数据应用价值及方案研究：在数据化现状调研的基础上，借鉴大数据的宏观思想，结合目前企业内部管理的问题与面临的挑战，以挖掘企业内部管理数据价值为目标，总结出目前北京公司管理支撑大数据的应用价值。基于挖掘出的大数据应用价值分析，结合北京公司目前MSS域建设现状及数据现状，设计出大数据思想落地实施的初始化方案建议，建议可以包括组织及流程、人员能力、设计思想、业务逻辑、技术建议等。该建议可以较全面指导北京公司MSS域大数据工作的落地，较完备的保证前期分析的大数据应用价值能够有效的产生。3．管理支撑大数据实施规划建议：根据北京公司实际情况制定出阶段性的演进路线，给出未来三年大数据实施的目标及工作步骤，以及大数据思想下未来MSS域的发展建议。InformationChangetheWorld目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1大数据咨询过程介绍5大数据现状调研与梳理访谈及现状梳理大数据分类及分布评估业务流程评估问题分析报告大数据现状梳理报告实施规划业务流程改进设计管控规范设计大数据维护业务流程报告大数据方案功能、技术架构设计大数据模型设计大数据管控规范功能及技术架构设计报告大数据模型设计报告工具、流程输入输出阶段一阶段二阶段三大数据战略管理架构调研业务现状调研系统现状调研数据现状调研目标评估方案研究及应用建议大数据架构设计业务流程优化大数据方案大数据应用建议大数据应用研究大数据方案研究演进路线规划实施方案规划大数据特点及难题大数据主要特征：量大（PB级别的数据）、实时性（更短的时间处理数据）、多样性（非结构的文档数据为主）。也正是它的这些独具特点，给我们主要带来了“存”、“管”、“用”这三个方面的难题。“存”—如何解决PB级别大数据的存储问题？“管”—如何解决非结构化数据的管理问题？“用”—如何解决这种大规模复杂结构下的实时应用问题？大数据与云计算云计算有几个很显著的特征：它基于资源共享，这样就可以实现资源的池化共享和管理，为大数据提供最基本的生存基础它基于服务可用性与快速交付，这样可以降低IT管理的复杂度，提高资源利用率，降低大数据管理的复杂性它基于按需服务与交付能力，通过高性能的扩展，为大数据的实时应用环境提供可能性大数据逻辑架构云服务提供：为云服务对象提供统一的界面和访问，包装云服务资源，建立服务等级(SLA)，管理云服务对象状态和请求云服务管理：管理和维护云计算架构，保障云架构的稳定和可靠云平台资源：构建服务器、存储资源池，实现IaaS；建设企业级数据中心，实现PaaS；通过SOA架构整合系统应用，以提供SaaS。大数据涉及的关键技术X86虚拟化技术VMware---vSphereMicrosoft—Hyper-VCitrix–XenServerLinux—Xen/KVM/UMLParallelsServerBareMetalUNIX虚拟化技术IBMAIX–LPar、Micro-partitionHP-UX—vPar/nParSun--Domain大数据处理技术目前，从技术层面大数据处理技术种类繁多，主要包括数据仓库技术、Hadoop、NoSql、流式处理技术等北京移动大数据演进路线第一．试验验证阶段。选择具有典型意义的系统开展试验验证，为大面积现网推广部署提供试验数据，进行云平台的探索和验证，结合云计算标准化工作，逐渐规划出统一云平台的基础框架。第二，试点部署阶段。试点部署应遵循先易后难的原则，优先选取对实时性要求较低，对业务影响较小的系统，开展现网部署。第三，规模推广阶段。在试点部署的基础上，总结经验，优化方案。稳步推进云计算平台在整个管理支撑系统的应用部署。大数据应用价值北京移动大数据成本规划资源池项目投资(万元)比例x86资源池硬件投资软件投资IBM资源池硬件投资SUN/HP资源池硬件投资集成费软件费合计北京移动大数据项目前期成本主要是建立虚拟化资源池的硬件、软件及集成费成本，后期成本会因规划建设的进度有较大的变化。InformationChangetheWorld目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1大数据咨询过程介绍5项目人员安排InformationChangetheWorld北京移动大数据实施步骤关于大数据的几点建议北京移动数据采集和预处理可采用基于Hadoop的分布式ETL技术，引入流计算提高数据转换效率。数据存储和处理采用Hadoop和数据仓库混搭的方式，通过透明访问机制为上层应用提供透明的访问环境采用PaaS的方式向各部门提供资源和应用开发、运行环境，解决平台/数据集中化和各部门应用开发个性化的矛盾。充分利用各种处理平台的特征，实现高效低成本非结构化数据处理在Hadoop平台上存储与处理。结构化、不需要关联分析、Ad-hoc查询较少的数据，建议保存在Nosql数据库或hadoop平台。结构化、需要关联分析或经常ad-hoc查询的数据保存在关系型数据库中，短期高价值数据放在高性能平台，中长期放在低成本产品中。InformationChangetheWorld目录3成功案例介绍2本项目的要求及我们的理解4项目组织安排东方国信公司简介1大数据咨询过程介绍5通信行业大数据项目经验东方国信承建的中国联通数据大集中项目是目前为止国内最大的基于云计算架构的大数据落地项目。项目名称建设内容描述2012年中国联通总部数据服务支撑平台U-Cloud_D2.0应用软件更新改造工程(M域-东方国信）应用软件开发合同整合M域及外部数据，实现财务、业务、资源数据的深度关联，建立基于云架构的企业级集中化数据仓库，成为企业唯一的数据服务提供者。2012年中国联通总部渠道集中管理系统应用软件更新改造工程总部数据分析系统全渠道全数据整合及服务部分委托开发合同整合M域及外部数据，实现财务、业务、资源数据的深度关联，建立基于云架构的企业级集中化数据仓库，成为企业唯一的数据服务提供者。2012年中国联通总部数据服务支撑平台U-Cloud_D2.0应用软件（B域分析应用优化部分）更新改造工程实现经营的日监控和企业绩效的一点展现，保障各级分析服务及营销的全面化支撑，充分发挥大数据在经营中的商机效用，实现集团对业务运营的垂直化管理。11.2.1.42012年中国联通总部数据服务支撑平台U-Cloud_D2.0应用软件（B域数据部分）更新改造工程通过从生产到应用的端到端数据管控和流程保障，构建上下统一的数据管控和评价体系。从而构建基于数据集中化的业务和数据联动。新华社全球一体化多媒体采编和数字生产加工平台技术开发及服务合同新华社全球一体化多媒体采编和数字生产加工平台实现了对文字、网页、图片、视频音频等多种结构化、半结构化和非结构化数据的采集、存储、分析能力，并在此基础上进行多媒体信息的编辑、发布。中航三星人寿TM系统服务框架协议三星人寿电话营销系统，建设内容包括客户信息、客户行为信息、客户访谈音视频信息等大数据采集、存储和分析，为公司产品战略及发展战略提供依据。2424产品监控体系围绕产品发展、产品设计、销售效果、用户质量及违规监控，打造产品全程管控体系向管理层提供清晰准确的决策数据支撑业务部门营销策略执行效果的跟踪