搜索
前言继智能手机、平板电脑之后，虚拟现实（VR）与增强现实（AR）有潜力成为下一个重大通用计算平台。从当前来看，更多的公司选择从VR领域进行切入，各大研究公司、投行针对VR领域的研究报告也层出不穷，相比之下，AR领域却稍显平淡。腾讯科技旗下VR次元发布全球首份AR行业报告，在这份报告中，我们将对AR的发展趋势、未来的挑战、潜在应用领域、可能创造和颠覆的市场进行分析和预测。最后，感谢亮风台研发总监吴仑博士对本报告的支持，吴仑博士撰写了AR工作原理、关键技术相关章节。特别提示：微信上搜索“qqtechvr”，关注“VR次元”微信公众号，回复“AR”，即可获得AR报告PDF版。第一章AR与VRVR和AR有着不同的应用领域、技术和市场机会，因此区分两者之间的不同至关重要。从技术角度来看，AR是将计算机生成的虚拟世界套在现实世界上，即把数字想象世界加在真实世界之上。最典型的AR设备就是谷歌眼镜。这种智能眼镜将触控板、摄像头以及LED显示器结合起来，通过显示器，用户可以联网，并在视野内使用地图、电子邮件等服务。其他知名的AR产品还有微软的HoloLens，创业公司则以MagicLeap为典型代表。AR具备三个主要特征：1、融合虚拟和现实：与VR技术不同的是，增强现实技术不会把使用者与真实世界隔开，而是将计算机生成的虚拟物体和信息叠加到真实世界的场景中来，以实现对现实场景更直观深入的了解和解读，在有限的时间和有限的场景中实现与现实相关知识领域的理解。增强的信息可以是与真实物体相关的非几何信息，如视频、文字，也可以是几何信息，如虚拟的三维物体和场景。2、实时交互：通过增强现实系统中的交互接口设备，人们以自然方式与增强现实环境进行交互操作，这种交互要满足实时性。3、三维注册：“注册”（这里也可以解释为跟踪和定位）指的是将计算机产生的虚拟物体与真实环境进行一一对应，且用户在真实环境中运动时，也将继续维持正确的对准关系。VR是让用户置身于一个想象出来或者重新复制的世界，或是模拟真实的世界。VR领域主要的产品包括Oculus、索尼PlayStationVR、HTCVive和三星GearVR。（有关VR更多的情况，可关注VR次元微信公众号，回复“高盛”和“德银”，分别获得高盛VR中文版报告和德银VR中文版报告）区分VR和AR的一个简单的方法是：VR需要用一个不透明的头戴设备完成虚拟世界里的沉浸体验，而AR需要清晰的头戴设备看清真实世界和重叠在上面的信息和图像。从目前来看，AR比较适合服务企业级用户，而VR同时适用于消费者和企业用户。有些情况下，两者还会出现重叠市场。例如，目前大多数游戏基于VR研发，但微软也用HoloLens重新创作了《我的世界》这样的游戏。AR发展简史AR技术的起源可追溯到“VR之父”MortonHeilig在上个世纪五、六十年代所发明的SensoramaStimulator。Heilig是一名哲学家、电影制作人和发明家。他利用他在电影拍摄上经验设计出了SensoramaStimulator，并在1962年获得了专利。SensoramaStimulator使用图像、声音、风扇、香味和震动，让用户感受在纽约布鲁克林街道上骑着摩托车风驰电掣的场景。尽管这台机器大且笨重，但在当时却非常超前。令人遗憾的是，Heilig没有能够获得所需的资金支持让这个发明商业化。AR历史上的下一个重大里程碑是第一台头戴式AR设备的发明。1968年，哈佛副教授IvanSutherland跟他的学生BobSproull合作发明了Sutherland称之为“终极显示器”的AR设备。使用这个设备的用户可以通过一个双目镜看到一个简单三维房间模型，用户还可以使用视觉和头部运动跟踪改变视角。尽管用户交互界面是头戴的，然而系统主体部分却又大又重，不能戴在用户头上，只能悬挂在用户头顶的天花板上。这套系统也因此被命名为“达摩克利斯之剑”。尽管这些早期的发明属于AR的范畴，但实际上，直到1990年，波音公司研究员TomCaudell才创造了“AR”这个术语。Caudell和他的同事设计了一个辅助飞机布线系统，用于代替笨重的示例图版。这个头戴设备将布线图或者装配指南投射到特殊的可再用方板上。这些AR投影可以通过计算机快速轻松地更改，机械师再也不需要手工重新改造或者制作示例图版。大约在1998年，AR第一次出现在大众平台上。当时有电视台在橄榄球赛电视转播上使用AR技术将得分线叠加到屏幕中的球场上。此后，AR技术开始被用于天气预报——天气预报制作者将计算机图像叠加到现实图像和地图上面。从那时起，AR真正地开始了其爆炸式的发展。2000年，BruceH.Thomas在澳大利亚南澳大学可穿戴计算机实验室开发了第一款手机室外AR游戏——ARQuake。2008年左右，AR开始被用于地图等手机应用上。2013年，谷歌发布了谷歌眼镜，2015年，微软发布HoloLens，这是一款能将计算机生成图像（全息图）叠加到用户周围世界中的头戴式AR设备，也正是随着这两款产品的出现，更多的人开始了解AR。AR硬件概览AR硬件发展的驱动力源于计算机处理器、显示技术、传感器、移动网络速率、电池续航等多个领域的技术进步。目前能够确定的AR硬件类型有以下几种：•手持设备（HandheldDevices）•固定式AR系统（StationaryARSystems）•空间增强现实（SAR）系统（SpatialAugmentedRealitySystems）•头戴式显示器（Head-mountedDisplays，即HMD）•智能眼镜（SmartGlasses）•智能透镜（SmartLenses）手持设备智能手机正是手持设备的代表。我们正经历着智能手机、平板电脑等手持设备的大爆炸时代，这将会促进AR的普及。这些设备正在变得越来越好——显示器分辨率越来越高，处理器越来越强，相机成像质量越来越好，传感器越来越多，提供着加速计、GPS、罗盘等等功能……这些成为了天然的AR平台。尽管手持设备是消费者接触AR应用最为方便的形式，但由于大部分手持设备不具备可穿戴功能，因此用户无法获得双手解放的AR体验。固定式AR系统俄罗斯一家Topshop内的固定式AR衣橱固定式AR系统适用于固定场所中需要更大显示屏或更高分辨率的场景。与移动AR设备不同的是，这些极少移动的系统可以搭载更加先进的相机系统，因此能够更加精确地识别人物和场景。此外，显示单元往往能呈现出更加真实的画面，而且受阳光或照明等环境因素影响较小。空间增强现实（SAR）系统大众公司的SAR系统与其它所有系统不同的是，空间增强现实（SAR）系统的虚拟内容直接投影在现实世界中。SAR系统往往固定在自然中。任何物理表面，如墙、桌、泡沫、木块甚至是人体都可以成为可交互的显示屏。随着投影设备尺寸、成本、功耗的降低以及3D投影的不断进步，各种全新的交互及显示形式正在不断涌现。SAR系统最大的优点在于，现实世界的反射在这里更加精确，即虚拟信息能够以实际的比例和大小呈现在眼前。此外在观看人数较多时，内容也能看清，这个案例可以用来实现同步办公。头戴式显示器（HMD）佳能的混合现实头戴设备HMD代表着另一种快速发展的AR硬件类型。HMD由一个头戴装置（如头盔），以及与之搭配的一块或多块（微型）显示屏组成。HMD将现实世界和虚拟物体的画面重叠显示在用户视野中。换而言之，用户不会直接看到现实，看到的是现实的增强视频画面。如果显示屏只覆盖用户的一只眼睛，这样的HMD称为单眼HMD，另一种是两只眼睛都看显示屏的双眼HMD。先进的HMD通常能够搭载具有很高自由度的传感器，用户可以在前后、上下、左右、俯仰、偏转和滚动六个方向自由移动头部。该系统因此能够实现虚拟信息与现实世界的贴合，并根据用户头部移动作做相应的画面调整。智能眼镜VuzixM100智能眼镜消费电子行业的许多公司认为，智能眼镜将会成为智能手机后下一大全球热卖消费产品。这些AR设备实际上是带有屏幕、相机和话筒的眼镜。根据这一概念，用户的现实世界视角被AR设备截取，增强后的画面重新显示在用户视野中。AR画面透过眼镜镜片，或者通过眼镜镜片反射，从而进入眼球。智能眼镜技术最为突出的例子是谷歌眼镜和VuzixM100。不过，目前开发中的最令人激动的智能眼镜要数AtheerOne——该智能眼镜配有3D景深传感器，用户可以实际控制眼前显示的虚拟内容。智能透镜华盛顿大学开发的透镜中含有金属电路结构智能眼镜绝不是故事的结局。越来越多的研究投入到能显示AR画面的智能透镜上；微软、谷歌等公司也正忙于宣布自己的智能透镜项目。智能透镜的理念是在传统透镜中集成控制电路、通信电路、微型天线、LED及其它光电组件，从而形成一套功能系统。未来或许可以用成千上万颗LED直接在眼前形成画面，从而让透镜变成显示屏。然而，还必须克服一系列难题，比如说如何给透镜供电，如何保证人眼不受伤害等等。在这一章的最后，我们简单看下AR技术会应用到哪些领域：考古：在古代遗迹上显示遗迹原本的样子。艺术：跟踪眼球移动并将这些移动显示在屏幕上，帮助残疾人进行艺术创作。商业：显示产品的多种定制选项或者补充信息。教育：将文本、图像、视频和音频叠加到学生周围的实时环境中。时尚：显示不同的妆容和发型用在一个人身上的效果。游戏：运用真实世界环境让用户在游戏中进行互动，获得不同的体验。医药：通过虚拟X光将病人的内脏器官投射到他们的皮肤上。军事：使用AR眼镜向士兵展示战场中出现的人和物体，并附上相关信息，以帮助士兵避开潜在的危险。导航：将道路和街道的名字跟其他相关信息一起标记到现实地图中，或者在挡风玻璃上显示目的地方向、天气、地形、路况、交通信息，提示潜在危险。体育：显示橄榄球场的得分线、高尔夫球的飞行路线和冰球移动的轨迹。电视：在天气预报中显示天气视觉效果和图像。第二章AR的工作原理AR介于VR和真实世界之间，VR创造逼真的虚拟世界，AR则将图形、声音、触感和气味添加到真实的世界中。在介绍AR的工作原理之前，我们先通过一个例子，让大家有一个简单的认识。在2009年2月的TED大会上，帕蒂•梅斯（PattieMaes）和普拉纳夫•米斯特莱（PranavMistry）展示了他们研发的AR系统。该系统属于麻省理工学院媒体实验室流体界面小组的研究成果之，他们称之为SixthSense（第六感）。它依靠众多AR系统中常见的一些基本元件来工作：摄像头、小型投影仪、智能手机和镜子。这些元件通过一根类似绳索的仪器串连起来，然后戴在佩戴者的脖子上。用户还会在手指上戴上四个不同颜色的特殊指套，这些指套可以用来操纵投影仪投射的图像。SixthSense设备利用简单的、现成的元件来组成AR系统，它的投影仪可以将任何平面变成一个互动的显示屏。SixthSense设备利用摄像头和镜子来捕捉周围的环境，然后将这种图片传给手机（手机处理这种图片，获得GPS坐标以及从互联网上搜索相关信息），然后将这些信息从投影仪投射到用户面前的任何平面上，不管这种平面是一个手腕，一面墙，还是一个人。由于用户将摄像头佩戴在胸前，因此SixthSense设备能够增强他所看到的一切。例如，如果他在一个杂货店里挑选了一罐汤，SixthSense设备将能够搜索这罐汤的相关信息，例如成分、价格和营养价值甚或用户评论，然后将它们投射到平面上。利用手指上的指套，用户可以在投射的信息上执行各种操作，这些操作将会被摄像头捕捉到，然后通过手机来处理。如果他希望了解这罐汤的更多信息，例如与之竞争的同类产品，那么他可以用手指与投射画面进行互动，从而获取更多的信息。SixthSense设备还能够识别一些复杂的手势，例如你在手腕上画一个圆圈，SixthSense设备就能够投射一款手表来显示当前的时间。AR的系统结构一个典型的AR系统结构一个典型的AR系统结构由虚拟场景生成单元、透射式头盔显示器、头部跟踪设备和交互设备构成。其中虚拟场景生成单元负责虚拟场景的建模、管理、绘制和其它外设的管理；透射式头盔显示器负责显示虚拟和现实融合后的信号；头部跟踪设备跟踪用户视线变化；交互设备用于实现感官信号及