大数据应用工程中心介绍V2.0

整理文档很辛苦,赏杯茶钱您下走!

免费阅读已结束,点击下载阅读编辑剩下 ...

阅读已结束,您可以下载文档离线阅读编辑

资源描述

大数据应用工程中心介绍中国科学院重庆绿色智能技术研究院共建单位:中国科学院、国务院三峡办、重庆市人民政府研究领域:电子信息、先进制造、环境工程重庆院历程重庆市政府常务会批准建设中国科学院重庆绿色智能技术研究院2011年02月14日中国科学院不重庆市科技合作座谈会暨签约仪式在北京丼行,在中国科学院院长白春礼,重庆市市长黄奇帄的见证下,中国科学院副院长施尔畏和重庆市副市长吴刚共同签署共建中国科学院重庆绿色智能技术研究院协议2011年03月13日中国科学院重庆绿色智能技术研究院在重庆北部新区汉国中心揭牌,标志着研究院启劢科学研究工作2011年06月08日中国科学院重庆绿色智能技术研究院在两江新区水土高新园奠基。重庆市市长黄奇帄,中国科学院副院长施尔畏,国务院三峡办副主任雷加富等出帨奠基仪式。中国科学院副院长施尔畏,国务院三峡办副主任雷加富,重庆市副市长吴刚签署三方共建2011年11月28日中编办作出批复,同意设立中国科学院重庆绿色智能技术研究院,这标志着重庆研究院正式进入中国科学院序列,成为重庆市首个中国科学院直属研究机构2012年07月28日重庆市市委书记孙政才规察中国科学院重庆绿色智能技术研究院2013年04月09日中国科学院院长白春礼规察中国科学院重庆绿色智能技术研究院2013年04月19日中国科学院重庆绿色智能技术研究院入驻两江新区水土高新园2013年09月09日重庆院一期园区占地:一期330亩综合科研楼:7万平总建筑面积:一期11万平位置:重庆两江新区科研与产业化结合产业化控股和参股的公司8家重庆德领科技有限公司重庆市惠信资产管理有限公司重庆德科黔龙投资有限公司重庆墨希科技有限公司重庆三一机器人有限公司重庆中德玉材科技有限公司重庆谨诺科技有限公司重庆德谋生产力促进中心有限公司大数据应用工程中心大数据应用工程中心定位2013-12-10新闻联播借助大数据,城市更“智慧”以自主知识产权大数据平台为基础,对智慧城市提供[研究][开发][解决方案]的一体化工程服务。大数据应用工程中心概要全数据链的综合研发+系统集成:成熟开源组件+自主研发验证+客户需求定制大数据平台简介平台基本概念9外部门户内部门户平台管理系统食品溯源舆情监控车辆机械环境监控……智慧城市应用群应用系统虚拟化平台大数据平台应用服务器数据处理应用服务器DB服务器应用服务器DB服务器内存CPUDB服务器数据存储内存CPU硬盘内存CPU硬盘内存CPU硬盘内存CPU硬盘系统状态监控虚拟化管理大数据管理资源管理应用监控数据管理权限管理安全管理平台产品介绍1010应用中间件分布式系统大数据一体机平台管理系统基于LINUX内核的个性化定制操作系统食品车辆机械环境监控舆情服务系统状态监控虚拟化管理大数据管理资源管理应用监控数据管理权限管理安全管理多路CPU大容量内存多级存储RDMA大规模传感器通信模块分布式内存缓存持久化机制IO控制数据结构,…分布式数据库索引算法类SQL支持GIS支持,…分布式文件系统分布式算法,副本控制,协议支持,多级存储,………智慧城市应用群分布式系统管理锁机制节点管理…数据压缩模块数据加密模块集群间联动应用系统共通支持模块互联网数据处理模块物联网数据处理模块平台产品介绍•平台管理系统平台优点•高性价比–使用通用硬件比使用存储设备节省30%以上•便捷–平台管理通过专用图形化管理系统,操作便捷–通过挂载立即使用应用系统与平台间的文件交互而无需修改应用•易扩展–在管理系统上简单操作即可通过增加节点来提升存储容量及性能–平台存储量从10TB扩展到10PB也只需简单增加节点即可完成–平台性能随节点增加线形增长•整体一站式管理–管理作为前端主机的web/DB服务器(可为虚拟机)–管理大数据平台的整体配置/硬件/组件/运行状态等•丰富的管理功能–Wizard向导功能:初期安装,节点追加等–配置管理:平台的初期设定及修改等–运维管理:监控、报警等–数据管理:文件及数据的访问控制,副本管理,内容检索等功能更强价格更低响应更快服务更好传统IBM+Oralce+EMC架构VS大数据平台+虚拟化平台=VS客户例-警务云的大数据平台大数据集群警务云管理系统平台管理网络后台数据网络公安等内网终端用户现有的70个应用系统文档/视频等非结构化数据表警用手持机外部VPN连接内网用户基于大数据的新应用数据收集(Oracle,SQLServer,日志,文档,视频等)数据收集处理结果处理结果用户使用用户使用客户例-警务云的大数据平台HDFS主节点HDFS主节点(备)集群Meta数据数据及计算节点(HDFSor独自DFS,Hbase,MapReduce)数据收集集群-Sqoop(RDB转换)-Flume(日志抓取)-文件迁移数据源应用Hbase主节点ZookeeperHbase主节点(备)Zookeeper(备)数据利用应用Hive集群(非结构化数据的SQL处理)大数据平台整体监控-集群各服务状态-任务进度-数据管理等高级内容处理集群-行为分析-Nutch(海量文档内容检索)其他数据工具-Pig-ETLtool等客户例-北斗导航平台作为移动位置服务的后端平台提供文件及数据的存储和访问客户例-北斗导航平台•初期系统规模:–16台机架式服务器(其中8台用于大数据集群)•初期数据规模:100T–20亿个文件(30KB/个的地图图片及500KB/个的卫星实景照片)–数十万台车的GPS信息(2条/分)–用户上传的照片等文件•系统性能:–地图访问并发:受限于互联网带宽(平台内部支持万兆数据交换)–GPS数据上传并发:每数据库节点1400条/秒客户例-北斗导航平台部分设备客户例-采油设备综合监管平台用分布式数据库平台处理来自物联网传感器的海量数据客户例-采油设备综合监管平台•初期系统规模:–2千口新式油井–(国内油井数7万口)•初期数据规模:–容量:2TB+,数据条数:二十亿条以上–(每口井每分发送2次1K数据包,保存1年以上)•系统效果:–提高生产效率及管理水平•中短期故障(结蜡,卡泵,短路,漏液等)自动分析,•中长期生产经营信息(产量,电力成本控制等)自动分析解决方案物流综合服务平台物流综合服务平台功能示意2014年6月2日中国科学院重庆绿色智能技术研究院22北斗卫星/无线基站定位系统货物入园园内周转集装箱出园散件货品出园集政府统一管理服务中心车辆/货物追迹管理交易/手续服务系统面向货主、收货人、物流者、管理者,基于卫星定位等传感器及大数据技术,提供物流相关综合服务的一体化平台。物流综合服务平台架构示意外部门户内部门户物流车辆追迹管理物流仓储管理货品追迹场内视频监控……物流园大数据平台应用群应用系统中科重庆大数据平台应用服务器应用服务器应用服务器分布式数据库2014年6月2日23中国科学院重庆绿色智能技术研究院分布式文件系统平台管理系统物流园管理部门某中型专业物流公司某连锁超市物流子公司某货运代理机构园区内商贸商家外部发货人外部收货人统一平台,为多个发货人、承运人、收货人提供综合服务。平台优点概述•统一平台,多种服务:基于对货物及运输工具管理的统一平台,面向所有相关业者进行服务。•提高物流服务水平:基于物联网技术进行物流精细化管理。•高性价比:基于重庆中科院的大数据平台提供服务,平台初期建设只需对业务应用进行开发。•快速开始服务:只需开发业务应用无需考虑基础软件、硬件等,平台投入使用周期短。•高扩展性:为同种业者提供服务只需提供新账号(物流业者需追加传感器)。2014年6月2日中国科学院重庆绿色智能技术研究院24物流业者应用概要2014年6月2日中国科学院重庆绿色智能技术研究院25功能1:车辆调度实时管理车辆调度车辆监控车辆诊断车辆升级车辆维护物流车辆使用计划计划管理物流车辆使用状况物流货物调配信息装车,卸车货物信息车辆入场,出场信息中转仓储信息车辆运作状况的远程监控功能2:车辆远程监控安装北斗GPS导航系统及无线定位系统功能3:车辆诊断,维护,升级基于车辆监控信息,对现有车辆使用状况进行分析,评估。及时对需要维护升级的车辆进行处理。位置信息载荷信息工作状态信息驾驶员信息等等建筑工地安全监控平台建筑工地安监平台功能概要•塔吊监控–通过传感器实时监控塔吊的起吊重量,起吊力臂长短,起吊高度等数据。监控平台对传回的数据进行分析,对不符合安全作业的操作提出警告•升降机监控–系统对升降机的载物重量,升降速度等进行监控,对于超出正常范围的监控数据实施报警•噪音监控–实时监控工地设备发出的噪音,可视化噪音分布,为整治噪声污染提供依据。对超出指标的噪声数据实施报警•渣土车监控–通过车载GPS及其他传感器对渣土车进行监控,实时监控渣土车形式路线,载重等信息。对超出指定行动范围及规范的渣土车进行报警•场内视频监控–实时视频监控,记录施工现场的视频信息2014年6月2日中国科学院重庆绿色智能技术研究院27重庆市某中心城区使用中的升降机管理,工地视频监控,噪音监控等分散系统,正在计划进行整合至重庆中科大数据平台。作为整体工地安全监控平台,增加功能,增强性能提升用户体验。建筑工地安监平台优点-1整合建筑工地各种监控(升降机、塔吊、视频、噪音、渣土车等)到统一平台:各种角色使用工地监管统一门户统一数据存储,综合分析,多种展示各区县,局办使用平台时只需增加传感器终端扩展功能时只需追加相应程序模块,不需停服务2014年6月2日28中国科学院重庆绿色智能技术研究院建筑工地安监平台优点-2•客户无需购买额外服务器及数据库软硬件•全B/S架构,任意地点自由访问•整合多个子系统为综合工地监控管理平台–一元化的监控管理及数据存储平台,便于整体管理–监控数据可视化,直观明了•底层平台采用易于横向扩展的分布式大数据平台–长期存储各种数据记录,高性能处理–其他区县简单扩展使用–优秀的系统稳定性,数据安全性,运维管理2014年6月2日29中国科学院重庆绿色智能技术研究院系统构成2014年6月2日30中国科学院重庆绿色智能技术研究院Internet升降机,塔吊,渣土车,工程车,叉车等工程机械传感器与数据接收服务器保持长连接将传感器数据实时传到远程服务器分布式存储集群集群管理防火墙核心交换设备监控应用系统传感器数据接收服务器流媒体数据服务器数据保存在本地分布式大数据平台工程机械设备监控人员最终远程用户访问图形化的监控管理界面重庆IDC重庆IDC保证:ISP双线路冗余电力供应冗余网络交换设备冗余可靠的防火墙设备硬件负载均衡设备扬尘监控现场示意图粉尘浓度监测终端喷水终端通过粉尘浓度监测终端进行实时在线监测,通过喷水设备进行降尘。可扩展到矿物仓库以外的各种城市应用场景。作业状况监控摄像头系统构成图粉尘浓度监测终端喷水设备摄像头监控系统后台通过浏览器使用监控系统通过移动应用使用监控系统监控系统出入管理主要功能及优点主要功能:实时在线监测粉尘浓度;按照设定的粉尘浓度报警;根据粉尘浓度自动控制喷水装置;同视频监视、人员及车辆的进出管理系统联动,设定抑制喷水条件;中长期的粉尘状况监测分析报表及其他监控数据报表。优点:除摄像头外都可采用无线/有线传输方式,布线要求较低;可将系统后台采用云服务模式,用户通过浏览器使用系统;可根据客户需求采用高端粉尘传感器或中端经济型传感器;可将整体工地/道路/城市管理系统进行整合。北斗导航前端采用重庆院北斗导航工程中心终端设备,后端采用大数据应用工程中心平台解决方案•智能终端•高精度板卡及后处理软件•地质及环境监测•三维仿真实时监控平台•北斗导航综合应用解决方案北斗导航工程中心Text终端产品北斗中心SD卡主机四路硬盘主机八路硬盘主机单兵智能公交调度屏红外云台红外大海螺摄像机红外小海螺摄像机红外后视摄像机红外美唇摄像机智能终端产品线SMT生产线组装生产线测试生产线老化生产线负责生产目标计划与管理负责半成品的制造负责成品的组装负责成品的检测负责合格的产品包装与准时出货生产计划贴片插件组装检测包装出货生产管理生产管理及交付能力HZ-VN-2000S工业级标准嵌入式设计,低功耗,金属铝制外壳,

1 / 72
下载文档,编辑使用

©2015-2020 m.777doc.com 三七文档.

备案号:鲁ICP备2024069028号-1 客服联系 QQ:2149211541

×
保存成功