数据挖掘技术及工程实践数据挖掘技术及工程实践数据挖掘技术及工程实践数据挖掘技术及工程实践数据挖掘技术及工程实践数据挖掘技术及工程实践数据挖掘技术及工程实践数据挖掘技术及工程实践几个问题•数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQ•WhatWhatWhatWhat•HowHowHowHow•WhoWhoWhoWho•WhichWhichWhichWhich•WhichWhichWhichWhich•WhyWhyWhyWhy•数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程•应用案例应用案例应用案例应用案例•总结总结总结总结••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQWhat?What?What?What?Why?Why?Why?Why?How?How?How?How?Which?Which?Which?Which?Who?Who?Who?Who?••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhatWhatWhatWhatWhatWhatWhatWhatWhatWhatWhatWhat????••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhatWhatWhatWhatWhatWhatWhatWhat分析能力的八个等级分析能力的八个等级分析能力的八个等级分析能力的八个等级••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhatWhatWhatWhatWhatWhatWhatWhat••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhatWhatWhatWhatWhatWhatWhatWhat••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhatWhatWhatWhatWhatWhatWhatWhat数据分析能力的演进数据分析能力的演进数据分析能力的演进数据分析能力的演进••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhatWhatWhatWhatWhatWhatWhatWhat数据挖掘是从大量数据数据挖掘是从大量数据数据挖掘是从大量数据数据挖掘是从大量数据((((包括文本包括文本包括文本包括文本))))中挖掘中挖掘中挖掘中挖掘出出出出隐含的隐含的隐含的隐含的、、、、先前未知的先前未知的先前未知的先前未知的、、、、对决策有潜在价值对决策有潜在价值对决策有潜在价值对决策有潜在价值的关系的关系的关系的关系、、、、模式和趋势模式和趋势模式和趋势模式和趋势,,,,并用这些知识和规则并用这些知识和规则并用这些知识和规则并用这些知识和规则建立用于决策支持的模型建立用于决策支持的模型建立用于决策支持的模型建立用于决策支持的模型,,,,提供预测性决策提供预测性决策提供预测性决策提供预测性决策支持的支持的支持的支持的方法方法方法方法、、、、工具和过程工具和过程工具和过程工具和过程。。。。••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhyWhyWhyWhyWhyWhyWhyWhyWhyWhyWhyWhy????••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhyWhyWhyWhyWhyWhyWhyWhy企业内产生了大量业务数据企业内产生了大量业务数据企业内产生了大量业务数据企业内产生了大量业务数据,,,,这些数据和由此产生这些数据和由此产生这些数据和由此产生这些数据和由此产生的信息是企业的财富的信息是企业的财富的信息是企业的财富的信息是企业的财富,,,,它如实记录了企业运作的本它如实记录了企业运作的本它如实记录了企业运作的本它如实记录了企业运作的本质状况质状况质状况质状况。。。。数据挖掘有助于企业发现业务的趋势数据挖掘有助于企业发现业务的趋势数据挖掘有助于企业发现业务的趋势数据挖掘有助于企业发现业务的趋势,,,,揭示已知的揭示已知的揭示已知的揭示已知的数据挖掘有助于企业发现业务的趋势数据挖掘有助于企业发现业务的趋势数据挖掘有助于企业发现业务的趋势数据挖掘有助于企业发现业务的趋势,,,,揭示已知的揭示已知的揭示已知的揭示已知的事实事实事实事实,,,,预测未知的结果预测未知的结果预测未知的结果预测未知的结果。。。。““““数据挖掘数据挖掘数据挖掘数据挖掘””””已成为企业保持竟争力的必要方法已成为企业保持竟争力的必要方法已成为企业保持竟争力的必要方法已成为企业保持竟争力的必要方法。。。。••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhyWhyWhyWhyWhyWhyWhyWhy分析和执行能力远跟不上信息的增长分析和执行能力远跟不上信息的增长分析和执行能力远跟不上信息的增长分析和执行能力远跟不上信息的增长••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhichWhichWhichWhichWhichWhichWhichWhichWhichWhichWhichWhich????数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ————————WhichWhichWhichWhichWhichWhichWhichWhich分类与回归分类预测数值预测聚类分析分类预测关联规则时序预测偏差检测数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ————————WhichWhichWhichWhichWhichWhichWhichWhich分类与回归分类预测数值预测聚类分析数值预测关联规则时序预测偏差检测数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ————————WhichWhichWhichWhichWhichWhichWhichWhich分类与回归分类预测数值预测聚类分析聚类分析关联规则时序预测偏差检测聚类分析数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ————————WhichWhichWhichWhichWhichWhichWhichWhich分类与回归分类预测数值预测聚类分析关联规则时序预测偏差检测关联规则挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ————————WhichWhichWhichWhichWhichWhichWhichWhich分类与回归分类预测数值预测聚类分析关联规则时序预测偏差检测时序预测数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ————————WhichWhichWhichWhichWhichWhichWhichWhich分类与回归分类预测数值预测聚类分析关联规则时序预测偏差检测偏差检测••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhoWhoWhoWhoWhoWhoWhoWhoWhoWhoWhoWho????••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——WhoWhoWhoWhoWhoWhoWhoWho企业业务分析人员企业业务分析人员企业业务分析人员企业业务分析人员系统设计及开发人员系统设计及开发人员系统设计及开发人员系统设计及开发人员••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——HowHowHowHowHowHowHowHowHowHowHowHow????••数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQFAQFAQFAQFAQ——HowHowHowHowHowHowHowHow商业智能及数据挖掘工具商业智能及数据挖掘工具商业智能及数据挖掘工具商业智能及数据挖掘工具BOBIEEPlusCognosMicroStrategySPSSEviewsSAS数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程•数据挖掘数据挖掘数据挖掘数据挖掘FAQFAQFAQFAQ•数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程•数据取样数据取样数据取样数据取样•数据探索数据探索数据探索数据探索•模式发现模式发现模式发现模式发现•模式发现模式发现模式发现模式发现•预测建模预测建模预测建模预测建模•模型评估模型评估模型评估模型评估•应用案例应用案例应用案例应用案例•总结总结总结总结数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程————————数据取样数据取样数据取样数据取样数据取样数据取样数据取样数据取样根据预测任务抽取数据样本根据预测任务抽取数据样本根据预测任务抽取数据样本根据预测任务抽取数据样本,,,,是基于对本次是基于对本次是基于对本次是基于对本次数据挖掘任务深刻理解基础上完成的数据挖掘任务深刻理解基础上完成的数据挖掘任务深刻理解基础上完成的数据挖掘任务深刻理解基础上完成的数据取样时要严把质量关数据取样时要严把质量关数据取样时要严把质量关数据取样时要严把质量关数据取样时要严把质量关数据取样时要严把质量关数据取样时要严把质量关数据取样时要严把质量关抽样数据必须在足够范围内有代表性抽样数据必须在足够范围内有代表性抽样数据必须在足够范围内有代表性抽样数据必须在足够范围内有代表性数据常分为训练数据常分为训练数据常分为训练数据常分为训练、、、、测试和验证数据集测试和验证数据集测试和验证数据集测试和验证数据集数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程————————数据探索数据探索数据探索数据探索数据探索数据探索数据探索数据探索抽样数据中是否存在空值抽样数据中是否存在空值抽样数据中是否存在空值抽样数据中是否存在空值、、、、异常值异常值异常值异常值????有没有什么明显的规律和趋势有没有什么明显的规律和趋势有没有什么明显的规律和趋势有没有什么明显的规律和趋势????有没有出现从未设想过的数据状态有没有出现从未设想过的数据状态有没有出现从未设想过的数据状态有没有出现从未设想过的数据状态????因素之间的相关性如何因素之间的相关性如何因素之间的相关性如何因素之间的相关性如何????因素之间的相关性如何因素之间的相关性如何因素之间的相关性如何因素之间的相关性如何????是否有明显的组差别是否有明显的组差别是否有明显的组差别是否有明显的组差别????数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程数据挖掘过程————————模式发现