多媒体技术基础1.ppt

1合肥工业大学计算机与信息学院杨兴明第9章多媒体技术基础HefeiUniversityofTechnology2第9章多媒体技术基础HefeiUniversityofTechnology3基本要求（1）理解多媒体信息的计算机表示方法（2）理解多媒体计算机系统的基本组成（3）理解多媒体信息（声音、图像）的采集与数字化的基本过程（4）了解多媒体信息（声音合成、声音片段截取、图像合成、图像放大缩小）的基本处理方法（5）了解动画制作的基本过程（6）了解多媒体系统的典型应用第9章多媒体技术基础HefeiUniversityofTechnology4主要内容9.1多媒体技术的基本概念9.2多媒体计算机系统9.3多媒体信息的数字化和压缩技术9.4多媒体素材制作第9章多媒体技术基础HefeiUniversityofTechnology59.1多媒体技术的基本概念9.1.1多媒体9.1.2多媒体技术的特性9.1.3多媒体信息的类型9.1.4多媒体信息处理的关键技术9.1.5多媒体技术的应用领域第9章多媒体技术基础HefeiUniversityofTechnology69.1.1多媒体媒体♫存储信息的物理实体，如磁盘、光盘等。♫信息的表现形式或载体。多媒体♫是“多媒体技术”的同义语，不仅仅是指多种媒体本身，而主要是指处理和应用它的一整套技术。多媒体技术♫是一种基于计算机的综合技术，包括数字化信息的处理技术、音频和视频技术、计算机硬件和软件技术、人工智能和模式识别技术、通信和图像技术等，是一门跨学科的综合技术。第9章多媒体技术基础HefeiUniversityofTechnology79.1.2多媒体技术的特性多样性媒体、处理方式集成性媒体、设备与软件的集成交互性用户与多媒体信息数字化媒体信息以数字的形式存储和处理实时性声音媒体和视频媒体第9章多媒体技术基础HefeiUniversityofTechnology89.1.3多媒体信息的类型1．文本2．图形由直线、圆、圆弧、任意曲线等组成的画面，以矢量形式存储。3．图像通过扫描仪、数字照相机、摄像机等设备捕捉的真实场景的画面，数字化后以位图格式存储。4．动画利用了人眼的视觉特性所得到的画面印象。5.视频来自视频信号源的影像。6．音频话语、音乐以及各种动物和自然界发出的各种声音。第9章多媒体技术基础HefeiUniversityofTechnology99.1.4多媒体信息处理的关键技术1.多媒体数据压缩技术♫节省存储空间，提高通信介质的传输效率，使计算机实时处理和播放视频、音频信息成为可能。2.多媒体数据存储技术♫数字化数据存储的介质有：硬盘、光盘和磁带等。3.集成电路制作技术♫为多媒体技术的进一步发展创造了有力的条件。4.多媒体数据库技术♫研究多媒体信息的特征、建立多媒体数据模型；♫有效地组织和管理多媒体信息；♫多媒体信息的检索和统计。第9章多媒体技术基础HefeiUniversityofTechnology105.虚拟现实技术♫利用计算机生成一种模拟环境，通过多种传感设备，使人能够沉浸在计算机生成的虚拟境界中，并能够通过语言、手势等自然的方式与之进行实时交互，创建了一种适人化的多维信息空间。6.多媒体网络与通信技术♫多媒体通信技术支持是保证多媒体通信实施的条件。第9章多媒体技术基础HefeiUniversityofTechnology119.1.5多媒体技术的应用领域1.多媒体教育2.电子出版物3.多媒体网络应用♫互联网直播♫视频点播♫远程教育♫视频会议系统第9章多媒体技术基础HefeiUniversityofTechnology129.2多媒体计算机系统9.2.1多媒体计算机系统组成9.2.2多媒体计算机硬件系统9.2.3多媒体计算机软件系统9.2.4多媒体创作工具第9章多媒体技术基础HefeiUniversityofTechnology139.2.1多媒体计算机系统组成多媒体系统层次结构多媒体应用系统运行平台多媒体编辑与创作系统多媒体应用程序接口API操作系统、多媒体设备驱动程序多媒体计算机主机、外围设备第9章多媒体技术基础HefeiUniversityofTechnology14多媒体计算机标准：MPC联盟规定多面体计算机系统由5个基本部件组成：PC机、CD-ROM、声卡、音箱和Windows操作系统MPC4.0，它为将PC机升级成MPC提供了一个指导原则，要求在普通微机的基础上增加以下4类软、硬件设备：①声/像输入设备光驱、话筒、扫描仪、录音机、摄像机等。②声/像输出设备音效卡、刻录光驱、投影仪等。③功能卡电视卡、视频采集卡、视频输出卡、网卡、VCD压缩卡等。④软件支持音响、视频和通讯信息以及实时、多任务处理软件。第9章多媒体技术基础HefeiUniversityofTechnology159.2.2多媒体计算机硬件系统光盘机扫描仪电视机扬声器显示器网络通信主机声音卡话筒音响设备MIDI视频卡影碟机录像机摄像机打印机网卡多媒体计算机硬件系统示意图第9章多媒体技术基础HefeiUniversityofTechnology161.多媒体计算机硬件系统1.主机♫多媒体计算机主机可以是中、大型机，也可以是工作站，更普遍的是使用多媒体个人计算机。♫具备多媒体信息处理功能的芯片:♫通用和专用的数字信号处理芯片DSP（DigitalSignalProcesor）♫现有的CPU芯片增加多媒体数据处理指令和数据类型，Pentium4微处理器包括了144条多媒体及图形处理指令♫媒体处理器（MediaProcessor），有可编程性，通过软件可增加新的功能。是现有通用处理器的强有力的支持芯片。第9章多媒体技术基础HefeiUniversityofTechnology172.多媒体接口卡(1)声卡又称音频卡，是处理音频信号的硬件，第9章多媒体技术基础HefeiUniversityofTechnology18(2)图形加速卡♫图形加速卡拥有图形函数加速器和显存，专门用来执行图形加速任务，可以减少CPU处理图形的负担。工作在CPU和显示器之间，控制计算机的图形输出。♫现在的显示卡上都集成有图形处理芯片组，成为图形加速卡。第9章多媒体技术基础HefeiUniversityofTechnology19(3)视频采集♫视频采集卡可以获取数字化视频信息，提供硬件压缩功能第9章多媒体技术基础HefeiUniversityofTechnology20(4)IEEE1394卡♫标准的IEEE1394接口可以同时传送数字视频信号以及数字音频信号，相对于模拟视频接口，IEEE1394技术在采集和回录过程中没有任何信号的损失。♫现在的IEEE1394卡多为PCI接口，只要插入到计算机主板相应的PCI插槽上就可以提供视频采集功能第9章多媒体技术基础HefeiUniversityofTechnology213.信息获取设备数码照像机（DC）♫数码照像机所拍摄到的照片是以文件形式存储在相机内的存储卡中，将数码照像机中的照片存储到计算机中，先用连接线将数码照像机与计算机连结起来。数码照像机的驱动程序就会将相机的存储卡视为计算机的一个可移动磁盘，存储卡中的图像会以略图方式显示数码设备第9章多媒体技术基础HefeiUniversityofTechnology22数码摄像机（DV）♫数码摄像机的优点是动态拍摄效果好，数码摄像机使用的小尺寸电荷耦合器件CCD与其镜头的不匹配，在拍摄静止图像时的效果不如数码照像机。第9章多媒体技术基础HefeiUniversityofTechnology239.2.3多媒体计算机软件系统多媒体计算机软件系统多媒体应用系统多媒体计算机主机、外围设备多媒体编辑与创作工具多媒体库函数、素材制作工具多媒体操作系统设备驱动软件、接口程序系统软件第9章多媒体技术基础HefeiUniversityofTechnology249.2.4多媒体创作工具多媒体创作工具的功能提供编程环境及对各种媒体数据流的控制能力处理各种媒体数据生成应用系统和提供应用程序链接能力用户界面处理和提供人机交互功能预演与播放能力第9章多媒体技术基础HefeiUniversityofTechnology25多媒体创作工具的类型:基于时间序列的创作工具：Director基于流程图的创作工具：Authorware基于描述语言（符号）的创作工具：MultimediaToolBook可视化编程环境：VisualBasic和VisualC++第9章多媒体技术基础HefeiUniversityofTechnology269.3多媒体信息的数字化和压缩技术9.3.1音频信息9.3.2图形和图像9.3.3视频9.3.4数据压缩技术第9章多媒体技术基础HefeiUniversityofTechnology279.3.1音频信息复杂的声波由许许多具有不同振幅和频率的正弦波组成。波形相对基线的最大位移称为振幅A，反映音量；波形中两个相邻的波峰（或波谷）之间的距离称为振动周期T，周期的倒数1/T即为频率f，以赫兹（Hz）为单位。正常人所能听到的声音频率范围为20Hz～20kHz。振幅频率第9章多媒体技术基础HefeiUniversityofTechnology281.模拟音频的数字化用计算机对音频信息处理，就要将模拟信号（如语音、音乐等）转换成维数字信号。采样--每隔一定时间间隔对模拟波形上取一个幅度值。量化--将每个采样点得到的幅度值以数字存储。编码--将采样和量化后的数字数据以一定的格式记录下来。模拟信号采样量化编码数字信号振幅频率1/T采样点T振幅1/TT第9章多媒体技术基础HefeiUniversityofTechnology292.数字音频的技术指标采样频率、量化位数和声道数采样频率：每秒钟的采样次数量化位数(采样精度)：存放采样点振幅值的二进制位数。通常量化位数有8位、16位，分别表示有28、216个等级。声道数：声音通道的个数，立体声为双声道。每秒钟存储声音容量的公式为：采样频率×采样精度×声道数/8=字节数例如，用44.10kHz的采样频率，16位的精度存储，则录制1秒钟的立体声节目，其WAV文件所需的存储量为：44100×16×2/8=176400（字节）第9章多媒体技术基础HefeiUniversityofTechnology303.数字音频的文件格式•Wave格式文件（.Wav）记录了真实声音的二进制采样数据，通常文件较大。•MIDI格式文件（.MID）数字音乐的国际标准.记录的是音符数字，文件小。•MPEG音频文件（.MP1/.MP2/.MP3）采用MPEG音频压缩标准进行压缩的文件。WAV文件MIDI文件第9章多媒体技术基础HefeiUniversityofTechnology319.3.2图形和图像•图形和图像图形：由点、线等组成的有边界画面，文件中存放描述图形的指令。图像：由图像设备输入的无边界画面，数字化后以位图形式存储。•图形与图像的数字化分辨率（行、列）和颜色深度真彩色每个像素点占3个字节，224=16777216种颜色。计算存储一秒图像公式：列数×行数×像素的颜色深度/8×帧/秒=字节数例：1280×1024分辨率的“真彩色”电视图像，按每秒30帧计算，显示1分钟，则需要：1280×1024×3×30×60≈6.6GB第9章多媒体技术基础HefeiUniversityofTechnology32常用图像文件格式：BMP和DIB格式文件♫与设备无关的位图格式文件，Win