腾讯研究院人机交互中心陈波新一代移动平台下的模式识别应用主要内容移动互联网发展现状1改变输入体验2PR改变生活3基于PR的娱乐应用4增强现实5手机产生移动互联网大脑变大眼变长手变长移动无线互联网带来信息沟通的革命手机俨然成为了我们生活的亲密伙伴移动互联网的演变4•移动互联网终端手机、上网本、平板电脑等•移动互联网:包括2G/3G-4G•用户规模中国已经拥有6亿以上手机用户应用层的创新百花齐放移动互联网发展特点和PR的机会•日益增大的网络带宽—可以用云服务方式提供•不断增强的终端能力—让复杂的PR运算成为可能•不断增加的移动应用—PR可以改善移动应用体验低成本无中心给应用层提供了无限的创新和发展空间主要内容改变输入体验2移动互联网发展现状1PR改变生活3基于PR的娱乐应用4增强现实5移动互联网下的模式识别应用点•如何改善输入体验?如何用PR技术改善移动终端体验?•手写识别•手势应用•语音输入输入法——联机手写单字识别平板电脑上的手写输入可连续手写的输入法连续手写多个汉字,一气呵成手写中局部调整*手写中功能按键全部消隐,确保输入空间足够大*自动切分手写轨迹,点击轨迹可调整单字辨识结果平板电脑上的手写输入可连续手写的输入法连续手写英文单词,提高纯英文手写的效率叠加手写改善手机屏幕小的缺陷英文单词手写中文叠加手写英文全键盘上通过滑动轨迹,输入英文单词QQ输入法创新应用:滑动英文输入QQ输入法创新应用:滑动英文输入视频滑动输入识别流程手势识别——方便快捷操控手机全新的手机手势识别引擎,可灵活扩展增加修改,支持多出点触摸手写识别应用——手势搜索手势快速查找手机联系人和应用程序,并对结果进行手势过滤视频手写识别应用——手势搜索视频改变输入体验——QQ手机输入法改变输入体验——语音搜索语音输入结合用户词库,优化用户声学模型,越用越准确,语音输入法截图定制用户的语言模型学习用户的声学特征识别不同的应用情景更准确更聪明主要内容PR改变生活3移动互联网发展现状1改变输入体验2娱乐应用4增强现实5PR改变生活•让你的手机摄像头成为一台成熟的扫描仪•让你的声音和脸蛋可以替代密码QQ慧眼——带你世界视频QQ慧眼——让你的手机变成成熟的图像扫描仪QQ慧眼1.0——文字识别即时拍照翻译人脸认证——密码锁、开机锁Shazam——听到的好歌曲不容错过用人脸识别做眼镜试镜基于PR的其他生活应用•语音导航、语音操作•听歌搜歌、哼唱搜歌•语音登陆、认证•商务助手•名片识别•拍照处理软件主要内容基于PR的娱乐应用移动互联网发展现状1改变输入体验2PR改变生活4增强现实53PR的娱乐应用PR的娱乐应用基于PR的其他娱乐应用•手势打地鼠(基于二维cameral的应用)•人脸Avator•趣味视频聊天•音乐类游戏•基于图像跟踪和识别的其他游戏主要内容增强现实5移动互联网发展现状1改变输入体验2基于PR的娱乐应用4PR改变生活3什么是增强现实(AR)增强现实(AugemntedReality)是将现实世界和计算机生成的信息融合在一起的技术,这些信息可以是图像、文字或者三维模型等增强现实系统框架增强现实的三个特性•虚实结合•实时交互•显示设备位姿确定移动增强现实系统应实时跟踪手机在真实场景中的位置及姿态,并根据这些信息计算出虚拟物体在摄像机中的坐标,实现虚拟物体画面与真实场景画面精准匹配增强现实应用场景•博物馆导游•地图•购物指南•工业设计•炫彩游戏新一代的广告模式移动增强现实研究现状移动增强现实(MAR)研究主要是两类方法:•基于硬件传感器的方法常见的有磁场、声学、光学、惯性等四类传感器跟踪技术。•基于视觉的方法1)基于marker的方法2)基于自然特征的方法移动增强现实——基于传感器的应用Layer、Wiketude采用这种方式的增强现实应用,手机是最为合适的实现平台。因为实现简单,目前智能手机上GPS、摄像头和指南针的搭配已经可以初步实现增强现实——将镜头对准餐馆,关于这个餐馆的评价会浮现在画面之上移动增强现实——基于传感器的应用必备设备:摄像头、显示屏、GPS、电子指南针原理:•通过GPS取得纬度、经度和高度信息,通过电子指南针取得面向的方向,确定搜索的范围;•指定搜索内容,发送搜索范围的数据;•通过无线互联,将从网络获取的信息叠加在显示屏上。基于视觉的增强现实通过在视频图像对检测到的特征进行分析,得到空间点和图像点的对应关系,计算相机的位置和姿态两类:•基于标记的增强现实•基于自然特征的增强现实(难点)基于人工标记的AR基于自然特征的AR•自然特征而不是人工marker例如sift、harris•传统AR是在平面物体上叠加虚拟信息•未来AR的研究方向应为三维场景下虚拟信息的叠加。移动AR应用举例aurasma.48移动终端增强现实钱景乐趣移动装置+增强现实(AR)=乐趣与钱景创意无限的行销方式在真实空间的虚拟游戏试穿试戴的新定义玩弄艺术的新媒材传达讯息的新介面视频新一代移动平台下的PR应用还有很多我们一起去探索Q&A谢谢!