基于图像的绘制技术(ImageBasedRendering,IBR)用户输入计算结果图像建模(几何+材质)计算、显示传统图形学难以达到真实感效果建模复杂计算和显示开销大基于图像的绘制直接从拍摄的图像合成新视点的视图建模简单显示速度快真实感强相关领域基于图像的光照(ImageBasedLighting)–从图像中获取场景物体的光照属性计算机视觉–从图像中获取场景物体的几何信息基于图象的绘制与计算机图形学和视觉的关系计算机图形学计算机视觉图象几何图象IBMR基于图像的绘制过程参考图像合成视图视图插值和变换(ViewInterpolation/viewmorphing)全视函数(PlenopticModeling)几何和图像混合建模图像拼接和分层基于图像的绘制中的重要方法几何和图像混合建模(HybridGeometry-andImage-basedApproach[DTM96])视图插值和变形(ViewInterpolation[CW93]/ViewMorphing[SD96])全视函数(PlenopticFunction-based)图象拼接(mosaic)立体视觉(StereoVision)几何和图像混合建模过程(图示)几何和图像混合建模过程拍摄照片,交互指定建筑物边缘生成建筑物粗模型利用基于模型的立体视觉算法精化模型利用基于视点的纹理映射合成新视图几何和图像混合建模特点可以通过拍摄的几张照片合成逼真的新视图,简单快捷只能适用于普通建筑物等外形规整的景物视图插值方法(ViewInterpolation)样本1样本2立体匹配可见度计算投影插值运算图像重建优化处理结束要求新视点位于两参考图象视点所决定的直线(基线,baseline)上。由参考图线性插值产生新视图。一般情况下不能产生正确的透视投影结果,而只生成近似的中间视图。视图变换方法(ViewMorphing)00001)1(),(PwFPwPwWarp11110)1(),(wPPFwPwWarp利用参考图像上像素点重投影生成新视图利用投影知识决定的变形位置视图插值/变换方法特点简单方便,只要求几幅参考图像漫游范围受限,只能在几幅参考图像的视点连线之间作有限运动常用于加速图形学中的绘制速度基于全视函数的IBR全视函数原型[AB91]),,,,,,(tVVVPlenopticzyx基于光场的显示LightFieldRendering[LH96]andLumigraph[GGSC96]基于光场的显示:特点基于“自由空间中沿一条光线传递的辐射能不变”的假设,把全视函数简化为描述离开或进入一封闭自由空间(如空立方体)的完全光流分布由于只考虑视流信息,因此不必对反射属性作假设,不需要立体对应关系数据量大,采样困难全景图(Panorama)在一个视点拍摄的几幅图像,通过整合(registration)拼接成一个视点周围的场景视图,投影在圆柱面或者球面上成为全景图。SynthesisViewPanorama全景图方法特点只需在一个视点拍摄的几张照片,数据量小,采样方便。视点不能移动,但是可以转动观察方向,通过放大缩小(zoomin/zoomout)进行近似的前后运动同心拼接(ConcentricMosaics)通过沿一系列同心圆切线方向拍摄的狭缝图像(slitimages)拼合成同心拼接利用同心拼接合成视图原理使用普通照相机获取狭缝图像同心拼接方法特点只需在一个圆上拍摄的一系列图像,采样方便。视点可以在采样圆内做平面移动,生成场景真实感强数据量较光场等全视函数方法为小移动范围受限,基于狭缝图象的绘制:有场景畸变现象同心拼接的畸变基于狭缝图象段的绘制将同心拼接中使用的狭缝图象进一步分为狭缝图象段测定不同距离上对应狭缝图象段的伸缩比例利用狭缝图象段的伸缩进行正确的绘制基于狭缝图象段的绘制:采样在两个同心圆上采集场景图象,分别称为参考图象和数据图象分割成狭缝图象段建立参考图象和数据图象之间的狭缝图象对应关系基于狭缝图象段的绘制:绘制基于全视函数的方法比较数据维数视点移动范围名称提出年份7自由plenopticfunction19915自由plenopticmodeling19954一个长方体内Lightfield/Lumigraph1996(3)一个二维圆内concentricmosaics19992固定视点上panorama1994演示程序Demo