大数据与智慧城市建设

大数据与智慧城市建设——概念、案例与思考提纲2、城市化与城市管理复杂性3、从数字城市到智慧城市4、启示与思考1、大数据时代来临1大数据时代来临“大数据”就在你身边！“大数据”就在你身边！“啤酒”与“纸尿裤”美国塔吉特百货（Target）“大数据”——选出了25种典型商品的消费数据构建了“怀孕预测指数”；Target的“大数据”分析技术从孕妇这个细分顾客群开始向其他各种细分客户群推广，从Target使用“大数据”的2002年到2010年间，Target的销售额从440亿美元增长到了670亿美元。“怀孕预测指数”“大数据”就在你身边！淘宝大数据：——淘宝数据平台显示，购买最多的文胸尺码为B罩杯。B罩杯占比达41.45%，其中又以75B的销量最好。其次是A罩杯，购买占比达25.26%，C罩杯只有8.96%。在文胸颜色中，黑色最为畅销。以省市排名，新疆妹子购买大号最多……。“大数据”就在你身边！朋友圈是个什么圈？——在微信朋友圈中，最多的好友类型是“同学”“家人亲戚”，其次是“普通同事”“普通朋友”和“密友”，最少关注的是“领导”和“客户”；男性较“猎奇大胆”，女性较“封闭谨慎”资料来源：2013年8月零点远景关于“微信使用”的线上调查什么是“大数据”？•大数据的提出？•大数据的基本概念？•大数据的特征？•大数据的产生？•如何准确理解大数据？•……“大数据”的提出•••2008年，Nature推出了BigData专刊，计算社区联盟在发表了报告《Big-DataComputing:Creatingrevolutionarybreakthroughsincommerce,science,andsociety》2011年2月Science推出专刊《DealingwithData》，麦肯锡(McKinsey)咨询公司发布了一份关于大数据的详尽报告《Bigdata:Thenextfrontierforinnovation,competition,andproductivity》进入2012年，大数据的关注度与日俱增：1月达沃斯世界经济论坛，大数据是主题之一；3月美国政府发布了《大数据研究和发展倡议》，正式启动“大数据发展计划”；5月联合国发布报告《BigDataforDevelopment：Challenges&Opportunities》；《纽约时报》文章《TheAgeofBigData》，使普通民众开始意识到大数据的存在，以及其对于日常生活的影响。从百度指数看“大数据”在中国的兴起“大数据”在2012年上半年开始兴起，而“云计算”要早4年左右，在2008年开始发端。“大数据”百度指数“北上广”差异北京“大数据”热度居首，广东次之，上海再次之。在移动端，总体滞后于PC端，广东与北京齐头并进，并有后来居上之势。对“大数据”的理解•2010年《经济学人》“Thedatadeluge”：“海量数据”、“数据洪流”。•麦肯锡公司：大数据指的是大小超出常规的数据库工具获取、存储、管理和分析能力的数据集。•国际数据公司（IDC）从大数据的四个特征来定义，即海量的数据规模（Volume）、快速的数据流转和动态的数据体系（Velocity）、多样的数据类型（Variety）、巨大的数据价值（Value）。•《大数据时代的历史机遇》赵国栋：大数据是“在多样的或者大量数据中，迅速获取信息的能力”；这个定义更关心大数据的功用；大数据的核心能力是“发现规律和预测未来”。1Volume;2Variety;3Velocity；4Veracity大数据往往比小样本数据更有价值，从频繁模式和相关性分析得到的一般统计量通常会克服个体的波动，会发现更多可靠的隐藏的模式和知识。大数据的“4V”特点——引自：李清泉“社交大数据分析”传统数据库与大数据的区别池塘捕鱼大海捕鱼•••••规模类型对象工具模式人类自古以来，在科学研究上，先后历经了实验、理论和计算三种范式，JimGray提出了一种新的“数据探索型研究”。参考：孟小峰等，大数据管理：概念、技术与挑战对比传统数据库与大数据的区别传统数据来源：•统计年鉴、行业统计资料；社会调查、深度访谈；大数据来源移动、联通、电信等通信和互联网运营商互联网网站：SNS（微博、twitter、FaceBook等社交网站）；YouTube等视频网站、淘宝等电子商务网站；政务、企业及公共服务数据：公交IC卡；医疗；保险等传感器、摄像头监测数据；移动终端数据：智能手机、GPS等个人位置数据海量遥感对地观测数据等——引自：甄峰，基于大数据的智慧城市研究与规划ppt（略改）大数据的关键技术：云计算•没有互联网就没有云计算，没有云计算模式就没有大数据处理技术。•将大数据的应用比作一辆辆“汽车”，支撑起这些“汽车”运行的“高速公路”就是云计算。正是云计算技术在数据存储、管理与分析等方面的支撑，才使得大数据有用武之地。•云计算时代会有更多的数据存储于”云端“。数据是资产，云是数据资产保管的场所和访问的渠道。大数据的关键技术：物联网•“TheInternetofthings”，物联网就是物物相连的互联网。•利用互联网等信息技术把传感器、控制器、机器、人员和物等通过新的方式联在一起，形成人与物、物与物相联，实现信息化、远程管理控制和智能化的网络。大数据的关键技术：数据挖掘与分析•AnalyticVisualizations（可视化分析）•DataMiningAlgorithms（数据挖掘算法）•PredictiveAnalyticCapabilities（预测性分析能力）•SemanticEngines（语义引擎）•DataQualityandMasterDataManagement（数据质量和管理）大数据应用的技术体系》大数据采集技术RFID技术传感器技术Web2.0技术移动终端技术》大数据文件系统技术》大数据数据库技术》大数据分析技术》大数据可视化技术分布式文件系统GFSHDFSLustreHaystack分布式数据库并行数据库集成数据库A/B测试聚类分析集成学习神经网络自然语言学习元胞自动机…空间分析宇宙星球图标签云历史流图条形码技术穿戴设备——引自：宋刚，城市管理复杂性与基于大数据的应对策略——《互联网进化论》2城市化与城市管理复杂性——问题与挑战城市的起源“城”——筑城而居，军事；“市”——集市贸易，经济孟菲斯，埃及，公元前3200年二里头城市遗址，公元前2000年左右现代城市四大基本功能居住、工作、交通、游憩中国人口城市化率变化趋势城市化是人类社会发展不可阻挡的趋势联合国人口基金会2007年《世界人口状况报告》报告称，在20世纪，世界城市人口增长飞速，从2.2亿增长到28亿。2008年成为人类历史上的一个重大分水岭，全球67亿人口中，有超过一半生活在城市里。城市化率%城市化的两种模式•人口转移型的城市化，强调的是人口由农村向城市的空间转移；•结构转换型的城市化，强调的是城市区域的经济社会结构由传统社会向现代社会的转型。土地利用存在的问题1、建设用地盲目扩张2、土地粗放式使用3、生态用地忽视4、社会保障类用地不足5、棕色地块简单改造6、城市“弱势空间”产生……中国城市化驱动与土地利用问题新型城市化新型城市化的追求——朱江，新型城市化下的广州市土地利用总体规划桑基鱼塘三来一补专业化市镇产业集群区域创新体系农村城镇化城市化城市区域多中心城市区域全球城市区域城市化水平1990年珠三角建设用地1995年珠三角建设用地2002年珠三角建设用地珠三角城市化空间与组织体系演化——蔡瀛，从乡村城市化到全球城市区域现代城市管理复杂性城市管理与社会管理融合背景下的城市管理三维结构图现代城市及其管理是一类开放的复杂巨系统：①非线性②开放性③关联性④不确定性⑤自组织性⑥涌现性宋刚,张楠,朱慧.城市管理复杂性与基于大数据的应对策略研究[J].城市发展研究，2014，21（8）摆在眼前的问题医疗健康防洪排涝金融服务……人社会子系统科学子系统自然子系统经济子系统知识体制文化序空时构量还原消费调控流通生产生气土能城市复杂系统示意图水——来源：中科院生态环境研究中心城市管理复杂性与基于数据的综合集成现代城市及其管理是一类开放的复杂巨系统，需要一个城市管理综合集成体系。通过城市规划、建设、运行各方面海量数据的集成，运用数据挖掘等多种科学和信息化手段，通过人的参与、知识的汇聚、集大成，方能成智慧，是开展智慧城市管理的必由之路。城市管理综合集成体系图宋刚,唐蔷.现代城市及其管理——一类开放的复杂巨系统[J].城市发展研究，2007，14（2）3从数字城市到智慧城市——基于案例的解读生态城市（ecologicalcity）•生态城市这一概念是在70年代联合国教科文组织发起的“人与生物圈(MAB)”计划研究过程中提出。•生态城市：就是按照生态学原理进行城市设计，建立高效、和谐、健康、可持续发展的人类聚居环境。•生态城市：包含了生态产业、生态环境和生态文化三个方面的内容。生态城市建设不仅仅是单纯的环境保护和生态建设，它涵盖了环境污染防治、生态保护与建设、生态产业的发展、人居环境建设、生态文化等方面。•从生态学的观点，城市是以人为主体的生态系统，是一个由社会、经济和自然三个子系统构成的“复合生态系统”。低碳城市（Low-carbonCity）•指以低碳经济为发展模式及方向、市民以低碳生活为理念和行为特征、政府公务管理层以低碳社会为建设标本和蓝图的城市。低碳经济低碳生活低碳社会生态产业生态环境生态文化低碳、生态城市低碳城市＝强调减“碳”的生态城市低碳生态城市：强调城市建设管理的理想目标与状态，对具体技术支撑、实施步骤欠缺深入的考量。数字城市（digitalcity）••“数字城市”：基于互联网和现代测绘地理信息技术，对城市进行多分辨率、多尺度、多时空和多种类的数字化描述与管理。数字城市是将城市地理、资源、环境、人口、经济、社会社情和各种社会服务等复杂系统进行数字化，整合城市信息资源，构建基础信息平台，建立电子政务、电子商务等信息系统和信息化社区，实现城市管理与公众服务的信息化。“数字城市”：为智慧城市建设奠定物质基础，但更多停留在信息化技术管理层面，对人的需求和城市运行内在规律缺乏深度发掘和应对，数字城市建设的效益被弱化。城市通信网络基础设施建设为数字城市（乃至后来的智慧城市）铺设了“信息高速公路”数字城市建设城市空间信息基础设施建设为数字城市奠定了“地理空间基准框架”数字城市建设•国家测绘地理信息局已经初步建成(验收)了280多个数字城市空间地理信息基础设施项目；•国家地理信息公共服务平台已有300多个城市的高分辨率影像；•城市网络地图已经能够满足市民的基本要求。城市空间信息基础设施基本完善电子政务和各部门业务应用系统建成并逐渐投入使用数字城市建设数字企业、电子商务与现代物流平台开始建设并产生效益数字城市建设数字城市的社会公众服务有了良好开端实现了从二维到三维的跨越数字城市建设城市网格化管理系统建立及应用传感网技术及其在城市中的应用数字城市建设成就截至2013年10月底，中国的数字城市建设已经形成了城市综合管理水平的服务平台，作为牵动国家测绘地理信息局的“牛鼻子工程”，取得了辉煌成果。全国31个省、自治区、直辖市的310余个城市开展了数字城市建设，智慧城市时空信息云平台试点开始启动。数字城市建设成就2Europe5123456普通手机智能手机（拥有互联网和数据订阅服务）智能手机（无互联网和数据订阅服务）平板电脑（拥有互联网和数据订阅服务）平板电脑（无互联网和数据订阅服务）以上皆非134659%57%65%64%54%57%28%34%26%41%38%14%11%15%15%10%6%4%2%7%5%3%35%16%11%2%1%1%0%2%2%3%5%7%8%6%4%2%2%0%13%UnitedStatesBrazilAustraliaChinaIndiaJapan数据来源：InSitesConsulting,SocialMediaaroundtheworld20