多媒体技术教程目录第1章绪论第2章媒体及媒体技术第3章多媒体数据压缩第4章多媒体硬件环境第5章多媒体软件基础第6章多媒体的时间表示与同步第7章多媒体操作系统第8章超媒体与Web系统第9章多媒体数据库第10章多媒体信息分析与处理第11章多媒体通信与网络第12章分布式多媒体应用系统第一章绪论1.1多媒体的基本概念1.1.1媒体与多媒体媒体的概念–媒体承载信息之载体–媒介–媒质ITU-T(国际电信联盟远程通信标准化组)对媒体的分类感觉、表示、显示、存储、传输1.1.1媒体与多媒体感觉媒体——能直接作用于人的感觉器官,使人产生直接感觉的媒体表示媒体——为传送感觉媒体而人为研究出来的媒体。借助于此类媒体,可有效地存储感觉媒体或将感觉媒体由A地传送到B地显示媒体——用于通信中将电信号和感觉媒体之间产生转换用的媒体存储媒体——用于存储媒体的媒体传输媒体——用于传输媒体的媒体1.1.1媒体与多媒体表示媒体•声:语音、声响、音乐等•图:图像、图形等•像:动画、视频等•文:文字、符号、数值等•其他:动作媒体、触觉媒体等1.1.1媒体与多媒体–媒体分类•视觉抽象化抽象化视觉(静止)图像图形文字符号语言文字(动态)图像图形动态影像视频真实感三维动画二维动画三维动画其它表示为视觉的媒体1.1.1媒体与多媒体–媒体分类•听觉•触觉•其他感觉其它(嗅觉、味觉等)触觉振动运动传感/发生器抽象化听觉声音声响(自然界)语音(人类语言)音乐1.1.1媒体与多媒体多媒体的概念–内涵•表示媒体的多样化•一个技术领域•一个技术时代1.1.1媒体与多媒体多媒体的概念–深层的涵义由于多媒体的内涵宽,应用领域广,至今无人能下一个非常准确清楚的定义。一般说来,“多”—多种媒体表现,多种感官作用,多种设备,多学科交汇,多领域应用;“媒”—人与客观事物之中介;“体”—其综合、集成一体化目前,多媒体大多只利用了人的视觉、听觉。“虚拟现实”中也只用到了触觉,而味觉、嗅觉尚未集成进来,对于视觉也主要在可见光部分,随着技术的进步,多媒体的涵义和范围必将进一步扩展1.1.1媒体与多媒体多媒体的概念–定义以数字化为基础,能够对多种媒体信息进行采集、编码、存储、传输、处理和表现,综合处理多种媒体信息并使之建立起有机的逻辑联系,集成为一个系统并能具有良好交互性的技术。1.1.2多媒体的特性多样性—适应了信息载体的多样性–信息载体的多样性是相对于计算机而言的,指的就是信息媒体的多样化,有人称之为信息多维化。65%20%10%2%3%视觉味觉嗅觉触觉听觉1.1.2多媒体的特性交互性—易于人和计算机的交互–交互可以增加对信息的注意力和理解力,延长信息保留的时间–当交互性引入时,“活动”本身作为一种媒体便介入到了数据转变为信息、信息转变为知识的过程之中–当我们完全地进入到一个与信息环境一体化的虚拟信息空间自由遨游时,这才是交互式应用的高级阶段,即虚拟现实1.1.2多媒体的特性集成性:实现了信息处理的集成性–多媒体信息媒体的集成–处理这些媒体的设备与设施的集成1+1>21.1.2多媒体的特性智能性提供易于操作、十分友好的界面。使系统操作更直观,更方便,更亲切,更人性化易扩展性可方便地与各种外部设备挂接,实现数据交换,监视控制等多种功能此外,采用数字化信息有效地解决了数据在处理传输过程中的失真问题1.2多媒体技术的产生与发展1.2.1多媒体是技术与应用发展的必然多媒体热潮的兴起–多媒体热潮的兴起•1984年苹果公司—位图的处理技术;1986年Philips和Sony—CD-I(交互式紧凑光盘系统);1987年美国无线电公司—DVI(交互式数字视频系统);1989年IBM–20世纪90年代初一批产品出现•MPEG(VCD),MPC,VOD–20世纪90年代连续召开了多媒体国际学术研讨会概念教育阶段存在问题:未形成产业群1.2.1多媒体是技术与应用发展的必然多媒体的高潮–一批设备普及——CD-ROM……–一批产品出现——VCD,VR,会议系统–一批标准的制定–一批产业群出现•美国旧金山-硅谷•向新加坡、台湾等地辐射–产业化前景极好–应用范围极为广泛一个新的技术时代的到来!1.2.1多媒体是技术与应用发展的必然多媒体技术的产生计算机计算机大众传播大众传播通信文字文字······0.1.0.1······网络客户客户客户服务器通信计算机大众传播通信多媒体信息系统1.2.2多媒体改善了人类信息的交流人的思维模式点型、线性、面型、梯型、网型、球形及混合形象、联想、多样、模糊、并行计算机的工作方式精确、清楚、串行、……人机交互形式人—人(通过计算机)人—计算机计算机—人计算机—计算机1.3多媒体技术研究的主要内容1.3.1什么是多媒体技术三大信息技术的联合–计算机、通信、TV综合各个方面–通信、广播、印刷、出版、计算、……1.3.1什么是多媒体技术多媒体技术–以网络为支持,为人类生活提供多种服务,创造新型人与人交往新环境的技术。–多媒体技术就是把多种媒体通过计算机集成在一起的技术。即通过计算机对文本、图形、图像、声音、动画和视频等多种媒体进行采样、量化、编码、压缩、编辑、修改、存储、传输和重建显示等处理,在相互之间建立起逻辑连接,使其综合起来1.3.2多媒体技术研究的主要内容多媒体技术的基础——研究媒体的性质与相应的处理方法,以及数据的压缩技术。多媒体软硬件平台技术——软硬件平台是实现多媒体系统的物质基础。涉及输入、输出、处理、存储、管理、传输等的技术和设备。多媒体操作系统技术——多媒体的基本操作环境。多媒体系统最关键的环节是基于时间媒体的处理。1.3.2多媒体技术研究的主要内容多媒体信息管理技术——多媒体信息管理中最基本的是基于内容的检索技术,其中对图像和视频的基于内容的检索方法是主要的内容。多媒体通信与分布应用技术——多媒体系统一般多为基于网络的分布应用系统。多媒体要解决的关键技术视频、音频等媒体数据的压缩/解压缩技术☆编码方法的软/硬件实现☆符合国际标准多媒体专用芯片技术——运算处理速度多媒体输入/输出技术☆媒体变换技术:改变媒体的表现形式☆媒体识别技术:对信息进行一对一的映像☆媒体理解技术:对信息的分析处理☆媒体综合技术:把低维的信息映像为高维的多媒体要解决的关键技术☆输入/输出的人工智能技术☆外围设备的控制技术☆多媒体素材的网络传输技术多媒体存储设备技术多媒体系统软件技术☆多媒体操作系统☆多媒体编辑系统☆多媒体数据库技术☆多媒体信息的混合与重叠技术多媒体设计中的关键技术多媒体素材的采集和制作技术多媒体应用技术开发技术☆面向对象的设计方法和编程技术☆对象的连接与嵌入技术☆超文本/超媒体链接与导航技术多媒体设计中的关键技术多媒体创作工具及开发环境多媒体界面设计与人机交互技术多媒体通信技术虚拟现实技术特征:☆多感知性☆临场感☆交互性☆自主性