大数据技术及数据分析培训52

大数据技术及数据分析培训主讲人：师伟2师伟老师个人简介师老师是实战型的咨询与培训专家，常年以专业咨询顾问和专业培训师身份进入国内众多行业的代表企业，开展企业的管理咨询和员工培训项目，具有广泛的行业基础和培训经验。师老师长期从事质量工作，职业发展经历了从质量专家到资深质量经理人转换，体验了从国有企业到外资企业再到合资企业的文化差异，具有丰富的服务性、制造性企业质量管理及实务经验，尤其在质量整合、流程管理领域的研究受到国内外人士的推崇。上世纪九十年代末进入管理咨询和培训行业，技术专长主要在质量管理、质量改进领等域，同时对利用Office软件提高管理绩效也颇有心得——质量的本质其实是管理的整合，Office软件的实质其实是管理工具。3课程收益学习数理统计的理念熟悉常见的处理套路掌握常用软件的使用解决学员的具体问题4目录数理统计常识量化的重要性统计基础知识数据挖掘简介数理统计技术5案例（武汉晨报3月31日报道）经过三天两夜长途跋涉，5万多瓶武汉救命水昨日运抵干旱重灾区云南省禄劝县，就在大家准备换小货车进山送水时，却遇到了“天价运费”的梗阻，140公里山路，两名当地司机要价6000元。昨日下午，晨报记者与林厚凯押运的5万多瓶武汉救命水一到禄劝县城，就受到了该县团委热情地接待。团委书记夏飞表示，他们接到团省委的通知后，按照武汉送水人的要求，对全县数十家小学进行了摸底，确定了两个最需要水的小学：离县城最远的大松树乡小学和雪山乡小学。据了解，从县城过去要走140多公里盘山路，大车根本无法行驶，必须换乘小货车才行。可禄劝县城小货车稀少，在禄劝县团委的帮助下，林厚凯好不容易找到了2辆小货车，谁知车主一见是外地人，报出天价运费，两台车运水，运费6000元。5万瓶水从武汉运到云南禄劝，武汉的两个司机也只是收了5000元运费。知情者透露，在禄劝像这样的运输，费用最多不超过2000元。有人劝林厚凯不如将水就近发放，可他坚持要把水送到最需要的地方。林厚凯说，这个价格虽然远超出他的预期，但为了尽早把水送到孩子们手上，他不会计较。昨晚，在当地交警部门协调下，两位禄劝货车司机松口，将车费降到5000元。为了尽早完成送水心愿，昨晚，记者和林厚凯连夜进山送水。6案例记者在短时间内发生这么多起跳楼的事件，如果站在理论角度上，发生率算不算高？樊富珉按卫生部统计，目前中国自杀率大概是十万分之十六左右。而富士康40多万人，约十万分之二三左右，大学生我们也做过统计，大概十万分之二到三左右。如果从全国的自杀率来比的话，应该还是低的7案例世界银行发展委员会25日通过了发达国家向发展中国家转移投票权的改革方案，这一改革从一个侧面反映了世界经济版图的变化本次改革中，发达国家向发展中国家共转移了3.13个百分点的投票权。中国在世行的投票权从目前的2.77%提高到4.42%，成为世界银行第三大股东国，仅次于美国和日本世界银行规则：任何重要的决议必须由85%以上的表决权决定2.71%2.64%意大利102.77%2.77%沙特82.77%2.77%俄罗斯82.77%2.91%印度74.17%3.75%英国54.17%3.75%法国54.35%4.00%德国42.77%4.42%中国37.62%6.84%日本215.85%15.85%美国1改革前投票权改革后投票权国家名次8案例在一次海难中，统计数据为头等舱乘客319人，200人幸存二等舱乘客269人，117人幸存三等舱乘客699人，172人幸存从以上数据你可以发现什么？9目录数理统计常识量化的重要性统计基础知识数据挖掘简介数理统计技术10误差（波动）偶然误差可减小但不可消除系统误差可消除11抽样21/2214/1510/117/85/63/42/31/20/11250≥50000121/2214/1510/117/85/63/42/31/20/1800150001~50000021/2214/1510/117/85/63/42/31/20/150035001~15000021/2214/1510/117/85/63/42/31/20/131510001~3500021/2214/1510/117/85/63/42/31/20/12003201~1000021/2214/1510/117/85/63/42/31/20/11251201~320014/1510/117/85/63/42/31/20/180501~120010/117/85/63/42/31/20/150281~5007/85/63/42/31/20/132151~2805/63/42/31/20/12091~1503/42/31/20/11351~902/31/20/1826~501/20/1516~250/139~150/121~8收/退收/退收/退收/退收/退收/退收/退收/退收/退收/退收/退收/退收/退收/退收/退收/退抽样数106.54.02.51.51.00.650.400.250.150.10.0650.0400.0250.0150.010AQL样本大小12连续数据和离散数据连续数据定量信息含量大离散数据定性信息含量小13判断数据属性1.销售订单准确度2.数据输入准确度3.销售地区4.用通规测量得到的孔径5.用卡尺测量得到的孔径6.客户热线对话时间7.空调制冷剂的重量8.一批顾客中不满意的人数9.一批顾客中不满意的比例14数据的居中程度和离散程度主要的居中指标平均值数据集的平均值中位数数据排序后得到的中间数众数数据集中最频繁出现的值主要的离散指标极差数据集中最大值与最小值的差值方差与平均值间距的平方和的平均值标准偏差方差的平方根15正态曲线大多数（但不是所有）数据符合正态分布16目录数理统计常识量化的重要性统计基础知识数据挖掘简介数理统计技术17数据挖掘简介数据挖掘（DataMining）的概念从数据库数据中揭示出隐含的、未知的并有潜在价值的信息决策支持，基于人工智能、机器学习、模式识别、统计学、数据库、可视化技术等，高度自动化地分析企业的数据，做出归纳性的推理，从中挖掘出潜在的模式，帮助做出正确的决策18数据挖掘主要动作分类估值预测关联聚集可视化描述19案例第一次战役1950年10月26日1950年11月02日第二次战役1950年11月25日1950年12月02日第三次战役1950年12月31日1951年01月08日20案例丰田大规模召回事件引起全球强烈反响，引发丰田信誉危机21目录数理统计常识数理统计技术基础动作图表操作典型工具和应用22基础动作搜集整理分析评估展示23目录数理统计常识数理统计技术基础动作图表操作典型工具和应用24图表类型数字型逻辑型25图表的注意事项选取适当的图表类型数量图表应写清单位引用资料应说明出处不要妄图表达过多的信息图例一般控制在五个以下尽量简单明了、利于理解26动态图表27报告制作原则提案型报告说明型报告28文档制作原则逻辑清晰方案多选文字精炼内容可视恰当修饰体积小巧制作迅速29报告的需求管理报告的客户谁在看报告？希望看什么？希望的频率？希望的详略？相关的技巧买点和卖点金字塔原理30报告的素材准则中肯可比准确时效可靠清晰31素材组织的FAB技巧Feature特点Advantage优点Benefit利益BenefitAdvantageFeature客户关注点32目录数理统计常识数理统计技术基础动作图表操作典型工具和应用33规范处理数据和数据有效性数据处理的良好习惯Excel数据有效性34层别法、聚类和表格维度层别法、聚类一维表和二维表35数据透视表36将数据按顺序等距分组，体现各组内频数的柱状图轮廓符合正态分布曲线说明处于稳定状态通过异常轮廓形状分析可定位异常的原因直方图37案例174185189196208190178184190205184185194191205205207207207206210209217214214206209210381020304050607020406080100ABCDE其他0累積比例缺點數缺點項目表现各项目频度降序排列及累积比例二八原则大问题优先柏拉图39ABC分析法A类0~70%，主要影响因素B类70~90%，次要影响因素C类90~100%，一般影响因素ABC的划分不是绝对的330因素超差差超差超度内径外径平面2203320090100缩水毛刺60其它C类帕累托曲线75A类500频数（件）551000B类8550累积百分数（%）9110040练习张女士结婚五年以来与丈夫发生纠纷如下不做家务28次深夜不归5次不良嗜好5次没送礼物1次胡乱花钱3次婆媳关系50次异性交往8次请制作柏拉图并用ABC法分析41散布图、关联规则和预测研究两个特性之的内在关系坐标轴分别表示结果特性和原因特性使得解决问题时找出强相关的原因42常见类型正相关强X的增加导致Y的明显增加正相关弱X的增加导致Y的略微增加因变量自变量强正相关弱正相关因变量自变量43常见类型负相关强X的增加导致Y的明显减少负相关弱X的增加导致Y的略微减少因变量自变量强负相关自变量弱负相关因变量44常见类型无相关Y的变化与X的变化毫无关系曲线关系X与Y之间无线性关系但符合某种曲线变化规律曲线相关因变量自变量不相关自变量因变量45预测Forecast法趋势线法46单变量求解47矩阵数据分析法矩阵数据分析法（MatrixDataAnalysisChart）用于排定优先级、做多目标决策量化表示各元素的关系，更准确地整理和分析结果48案例34.37总分之和24.2%8.33030.3341便于维护11.6%4.000.3300.3330.33软件兼容34.9%12.0033051网络性能3.0%1.030.250.330.200.25易于使用26.2%9.0013140易于控制权重总分便于维护软件兼容网络性能易于使用易于控制　49练习0教育0物业0发展商0户型0地段0面积0单价权重总分教育物业发展商户型地段面积单价50服务客户中兴通讯、中国移动、中国电信、中国联通、海尔、美的、长虹、创维、TCL、美赞臣、富士康、哈工大、长安汽车、交通银行、农业银行、湖北银行、天津滨海新区政府、大亚湾核电站、吉林省质监局、中建三局、德阳电业局、南车集团、电波22所、镇海电厂、马瑞利汽车电子、中兴新、中兴移动、星辰律师事务所、力维电子、宇龙通讯、A8音乐、兴意达电子、吉欧电子、信达澳银、比克电池、浙能集团、安利、思源电气、新国都、东阳光铝业、华凌涟源钢铁、百仕达、云南夜视集团、长安标志雪铁龙、铭利达精密铸造、红玫瑰食品、金域医疗检验、双登电池、啄木鸟医疗器械、嘉信装饰、南方航空等51培训合影：52谢谢观看扫二维码有更多惊喜哟