数据挖掘商业运用现状和发展新思路

让数据为您增值数据挖掘商业运用现状和发展新思路2005年12月29日李剑（上海）宏能畅然数据应用有限公司2005MagnsoftbiConsulting2内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考2005MagnsoftbiConsulting3内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考2005MagnsoftbiConsulting4关于宏能畅然创立时间1998年创立者张少华博士（SAS中国公司的首任董事总经理）李剑先生（前SAS公司北京代表处经理）姜宏博士（前SAS公司北京代表处技术经理）公司专注•数据仓库设计与开发•企业运营与绩效考核分析系统、商业智能应用系统设计与开发业务•Insightful公司的S-PLUS系列产品的独家代理销售与相关技术支持业务•Unica公司的面向营销促销、客户关系管理的专业数据挖掘平台UnicaAffiniumModel和Campaign的独家代理销售与相关技术支持业务公司宗旨通过宏能畅然的工作与客户的共同努力，让数据为客户增值2005MagnsoftbiConsulting5我们的典型客户零售行业通过宏能畅然持续和专注的努力，为联华超市率先在国内零售行业中完成了企业级数据仓库和商务智能系统，提升了联华超市的核心竞争力。宏能畅然公司的专业服务精神也得到了联华高层领导所组成的专家评审委员会的高度评价和赞扬！保险行业宏能畅然为中国人寿开发的保险决策支持系统增强了保险业务分析的实时性，为中国人寿保险业务的高效有序发展提供了准确科学数据支持，增强了在同行业中的竞争地位！钢铁行业国内最早的企业级数据仓库项目之一。“当我们开始开发这个系统时，我们的目标是将我们大量的数据转换成整个组织机构共享的资产。我们现在部署了决策支持功能，以帮助我们实现成为世界上最大的钢铁供应商的宏伟目标。SAS项目团队在其中发挥了不可替代的作用”——上海宝钢副总经理李海平其它行业“根据为市场部门服务多年的经验，我们设计了该系统”，智买道总裁文亨利说，“我们创造了完全可视化的界面，让用户能够直接在图表上点击，而不用使用复杂的菜单。我们有了这样的想法，然后与宏软公司合作，使这个想法成为现实。宏软的工作非常出色，使我们的产品成为世界先进的数据挖掘工具和直付营销系统！”2005MagnsoftbiConsulting6内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考2005MagnsoftbiConsulting7数据挖掘和商业智能产业“金字塔”数据挖掘预测和优化固定业务报表联机动态查询OLAP分析数据仓库数据集市信息知识数据DatamartDatamartOPSSystemOPSSystemOpsSystemFlatFilesETL2005MagnsoftbiConsulting8数据挖掘与商务智能产业链整体解决方案提供商系统集成商数据挖掘和商务智能用户咨询服务提供商专业化服务和实施维护商交付产品和协助IT规划系统维护和数据分析服务整体解决方案提供商：NCR、IBM、Oracle、Microsoft、SAS特定解决方案提供商：DataStage等ETL工具Cognos、BO、Brio等报表工具Splus、SPSS等挖掘工具Unica等专业解决方案系统集成商：AsiaInfo、联创宝信、中软、菲奈特咨询服务提供商：埃森哲、德勤、华院、吉贝克专业化服务和实施维护提供商：首航财务……2005MagnsoftbiConsulting9数据挖掘商业运用现状市场营销和客户关系管理领域移动、联通、电信经营分析银行信用卡分析零售商业智能和客户分析保险公司客户分析网络游戏分析BtoC电子商务网站等2005MagnsoftbiConsulting10数据挖掘商业运用现状风险管理领域银行信用风险管理个人征信局信用风险管理监管机构（如上交所、银监局、海关等）风险监管模型2005MagnsoftbiConsulting11数据挖掘商业运用案例分析零售商会员分析系统及会员状态监控模型背景：流失会员增长速度超过了新增会员会员卡热办冷用，会员消费占比和客单价低无法及时获取会员当前最新的消费状态无法灵活自由的对会员进行细分和管理无法了解会员消费商品分布和市场占有率无法得知会员促销活动的效果和投资回报无法得知会员来自于哪……2005MagnsoftbiConsulting12会员特征快照和细分组群2005MagnsoftbiConsulting13会员空间分布2005MagnsoftbiConsulting14数据挖掘商业运用案例分析海关风险辅助决策支持系统及欺诈识别模型背景：•进出口贸易迅猛增长使海关有效监管和高效运作之间矛盾变得异常突出一方面海关必须保证税收指标的完成，加大对走私活动打击力度另一方面贸易便利最大化又要求海关必须努力提高通关速度，加快货物验放•结合业务人员多年监管经验，利用统计和数据挖掘技术建立具有动态调整、自学习和自适应能力的实时风险评估模型对每一票报关单进行风险评分和可能风险来源提示。这对于海关提高监管效率和科学决策能力具有重要意义。2005MagnsoftbiConsulting15实时智能的风险评估海关风险管理数据挖掘建模流程在线实时风险评分商品风险预警提示风险管理参数表维护及管理2005MagnsoftbiConsulting16基于风险评估模型形成的监管流程随机控制是否进入风险监控流程风险评估模型验证模型的数据集五星级四星级三星级二星级一星级查验放行跟踪查验率、查获率和近期走私动态关领导和总署查验监控模型绩效更新模型报关单90%10%2005MagnsoftbiConsulting17内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考2005MagnsoftbiConsulting18数据挖掘厂商的视野和新迹象•挖掘和统计分析平台•SASEM•SPSSClementine•S+Miner•StatisticDataMiner•与数据库集成挖掘平台•IBMIM•Oracle•NCRTeradataMiner•SQL2005DM•行业运用及解决方案•Unica•KXEN•HNC2005MagnsoftbiConsulting19SAS的视野和新迹象SAS®ETLStudio,SAS®DataSurveyor,SAS®MetadataServerSAS®OLAPServerSASAnalyticsStorageSAS®Add-inforMSOfficeWEBReportStudioSAS®EnterpriseMinerSASETSSAS®IndustryModelsMetadataSAS®InformationDeliveryPortalDeployreportsandanalysisresultsforauthorizedusersCreatereportsusingbusinessrulesandmetadataSchema;modelBuildOLAPcubeorstorageoptimizedforreportingandanalyticsAccessandextractdatafromsources;transformandloadinwarehouse;associatedatawithmetadataAnalyzedatausingsamebusinessrulesandmetadataSAS®ETLStudio,SAS®DataSurveyor,SAS®MetadataServerSAS®OLAPServerSASAnalyticsStorageSAS®Add-inforMSOfficeWEBReportStudioSAS®EnterpriseMinerSASETSSAS®IndustryModelsMetadataSAS®InformationDeliveryPortalDeployreportsandanalysisresultsforauthorizedusersCreatereportsusingbusinessrulesandmetadataSchema;modelBuildOLAPcubeorstorageoptimizedforreportingandanalyticsAccessandextractdatafromsources;transformandloadinwarehouse;associatedatawithmetadataAnalyzedatausingsamebusinessrulesandmetadataSAS®ETLStudio,SAS®DataSurveyor,SAS®MetadataServerSAS®OLAPServerSASAnalyticsStorageSAS®Add-inforMSOfficeWEBReportStudioSAS®EnterpriseMinerSASETSSAS®IndustryModelsMetadataSAS®InformationDeliveryPortalDeployreportsandanalysisresultsforauthorizedusersCreatereportsusingbusinessrulesandmetadataSchema;modelBuildOLAPcubeorstorageoptimizedforreportingandanalyticsAccessandextractdatafromsources;transformandloadinwarehouse;associatedatawithmetadataAnalyzedatausingsamebusinessrulesandmetadataDeployreportsandanalysisresultsforauthorizedusersCreatereportsusingbusinessrulesandmetadataSchema;modelBuildOLAPcubeorstorageoptimizedforreportingandanalyticsAccessandextractdatafromsources;transformandloadinwarehouse;associatedatawithmetadataAnalyzedatausingsamebusinessrulesandmetadata2005MagnsoftbiConsulting20S-PLUS的视野和新迹象S-PLUS7S-PLUSServerS+EnvironmentalStatsS+NuOptS+FinMetricsS+ArrayAnalyzerS+SeqTrialS+WaveletsS+SpatialStatsInFact®InsightfulMiner7S-PLUS®forArcViewGIS2005MagnsoftbiConsulting21S-PLUS对大数据量的支持TrainingScoring独特管道式架构BigDataLibrary大规模数据可视化大规模数据建模能力2005MagnsoftbiConsulting22S-PLUS全新的开发环境SplusWorkbench•智能Splus代码编辑器•开发项目和任务的管理•原码版本控制2005MagnsoftbiConsulting23SQLServer2005的视野和新迹象SQL2000SQL2005EntertheGame•Createindustrystandard(OLEDBforDM)•Targetdeveloperaudience•V1.0productwith2algorithms-Microsoft_Decision_Trees-Microsoft_ClusteringWinL