决战大数据:驾驭未来商业的利器继续大数据•大数据的落地点都是小数据•大数据就是把数据变小•巳知的都不是大数据•不活的都是大数据•大数据就是找出系统ITDT大数据创新Vs企业现实信息爆炸驱动大数据革命•互联网催生大量数据:信息爆炸早期的网页底部常常有如下字样:,‘Copyright1997.Donotredistribute.’而2014年,信息分享与流动无处不在2014年一键分享数据应用催生新产品•1995年做数据挖掘(MB),MS发布公司的新产品数据应用催生新公司•2004年做数据挖掘(GB),Google宣布公司上市数据应用催生新政治家•2013年做数据挖掘(TB),President讨论政治科技热点SocialDataToEverywhereData今天的大数据,明天的小数据大数据的思考•当数据多到覆盖了几乎整个样本空间时,基于样本的inference不强烈依赖于模型了,即“大”数据Volume,Velocity,Variety,Veracity•互联网/SNS催生大数据•数据存储/计算能力〉数据应用•非结构化数据暴涨,用户行为数据更丰富•网络广告从群发到精准,RTB大数据的思考•大数据改变MachineLearning•量变到质变•传统:新样本;特征;模型;结果•大数据时代:新样本;海量数据;结果•模型无用吗?•数据总是不够的,模型提供泛化的能力新样本特征模型结果训练样本新样本结果已知样本大数据演员组合导演出品人内容达人驱动的商品发现机制爆款1定义达人2侦测达人行为人但是,达人选品都靠谱吗?达人模式是否可以规模化复制?货搜索3发现特色长尾商品发现小而美卖家双边模型(数据科学专利)买家买家买家买家商品商品商品循环Sink节点:它们的传播与吸收不均衡使得传播收敛。•借助人判断商品,借助商品判断人•在循环中收敛,发现人和商品中的核心节点卖家卖家卖家循环达人驱动的商品发现机制爆款1定义达人2侦测达人行为人重复1-5,形成闭环:依托达人,学习达人,超越达人4揣摩达人决策货搜索5发现达人3发现特色长尾商品发现小而美卖家DiscoverEngine—至高点达人:1.消费档次高的淘宝活跃用户2.微博粉丝数高的用户3.特定导购网站和优站站长中间层:1.通用中间层2.商品、品牌、卖家、关键字背后受众的平均消费档次(即与微群受众的匹配度)机器学习:通用加强学习:微群受众的反馈双边模型:符合微群定义的达人反馈大数据的思考•传统方法:小数据+复杂模型——效果很难再提高•大数据:很多的数据+简单的模型——更好的结果•海量数据+复杂的模型——??•东方文明:归纳法,bottom-up(夜观天象)•西方文明:Axioms,Theorem,推理逻辑•大数据时代,归纳法再度占优数据化运营运营数据新/改善的数据解决了问题收集数据使用数据判断创新如今的数据不再是一加一的根据,而是具有预测和开创新机的能力。过去我们有问题找数据?今天我们用数据找问题?数据化运营解决了问题使用数据判断以前我们用数据来证明或企图说服工作上的盲点。现实中。。。业务的人不知道如何用数据?运营数据新/改善的数据收集数据创新从无限数据中寻找数据,假设什么数据都可以获取。现实中。。。做数据的不知道别人怎样用?数据化运营运营数据新/改善的数据解决了问题收集数据使用数据判断创新如今的数据不再是一加一的根据,而是具有预测和开创新机的能力。现实中。。。数据的闭环没有转起来面向未来29BI30BI31数据十诫①好的问题、答案就在里面。②在实践中提炼数据③让数据变成Technology,Enable更多人④让数据跟着“人”走⑤木有数据质量,神马数据都是浮云⑥以假设数据都能获取去思考问题⑦大数据安全,不是监管⑧利用数据拿到更有用的数据⑨建立数据的数据,才有进步⑩让人做人擅长做事、让机器做机器擅长做的事End企业要的是实效的数据ThankYou