多媒体通信技术.

多媒体通信课程类型专业选修开卷考试先修课信息论数字图像处理通信原理数字信号处理计算机网络参考书目《多媒体通信技术基础》（第二版）蔡安妮、孙景鳌编著电子工业出版社参考书目参考书目MultimediaCOMPUTINGCOMMUNICATIONS&APPLICATIONSRalfsteinmetz&KlaraNahrstedtPrenticeHall,Inc.参考书目编码与压缩存储网络音频图形图像视频数据库操作系统通信多媒体信息处理工具和应用文档人机交互编程制作多媒体应用层多媒体系统层多媒体设备层参考书目参考书目2020/1/3多媒体通信相关技术基础技术1、数字压缩技术（第3章4章5章）2、媒体同步技术（第6章）终端技术多媒体终端、软件（操作系统、创作工具和应用软件）、信息家电网络技术网络指标要求、网络协议（第7章、8章）、发展趋势应用系统多媒体会议、视频点播、虚拟现实（第1章）课程主要内容多媒体数据压缩多媒体同步多媒体传输网络多媒体通信系统多媒体技术概述多媒体的基本概念媒体一般指表达信息和传递信息的手段（中介）。信息的载体，也称为媒介。•人类传播学•信息媒体工程学广义，指的是能传播文字、声音、图形、图象、动画和电视等多种类型信息的手段、方式或载体。包括电影、电视、CD-ROM(compactdiscread-onlymemory)、VCD、DVD(digitalversatiledisc)、电脑、网络等。狭义，专指融合两种以上“传播手段、方式或载体”的、人机交互式信息交流和传播的媒体，或者说是指在计算机控制下把文字、声音、图形、影象、动画和电视等多种类型的信息，混合在一起交流传播的手段、方式或载体。如多媒体电脑、因特网等。多媒体技术概述多媒体的基本概念媒体•报纸刊物：第一媒体•广播：第二媒体•电视：第三媒体•互联网：第四媒体•移动网络：第五媒体•平面媒体•电波媒体•网络媒体多媒体技术概述多媒体的基本概念媒体分类（ITU-TI.374）存储(Storage)展现(Presentation)表示(Representation)感觉(Perception)信息交换(InformationExchange)传输(Transmission)多媒体技术概述多媒体的基本概念媒体分类（ITU-T）•感觉媒体(PerceptionMedium)直接作用于人的感官，使人能直接产生感觉的一类媒体，如人的语言、音乐，自然界的声音、图像等；多媒体技术概述多媒体的基本概念媒体分类（ITU-T）•表示媒体(RepresentationMedium)为加工、处理和传输感觉媒体而人为地研究、构造出来的一种媒体，包括声音、图像等媒体的各种编码；多媒体技术概述多媒体的基本概念媒体分类（ITU-T）•显示媒体(PresentationMedium)指感觉媒体与用于通信的电信号之间转换用的一类媒体，包括输入显示媒体与输出显示媒体；多媒体技术概述多媒体的基本概念媒体分类（ITU-T）•存储媒体(StorageMedium)用来存放表示媒体，以方便计算机处理、加工和调用，指与计算机相关的外部存储设备；多媒体技术概述多媒体的基本概念媒体分类（ITU-T）•传输媒体(TransmissionMedium)将媒体从一个地方传到另一个地方的物理载体，如双绞线、光纤等；多媒体技术概述多媒体的基本概念媒体分类（ITU-T）•信息交换媒体(Exchangeofinformationmedia)版权保护与媒体安全10110100(数字)视频编码压缩VideoCoding(Compression)10110100(数字)视频解码(解压缩)(Videodecoding)视频/图像(Video/Image)拍摄(摄像设备)媒体理解视觉/Vision视知觉(大脑)视感觉(眼睛)客观世界视觉信息/知识(VisualInfo./Knowledge)多媒体技术概述多媒体的基本概念多媒体概念在变化•1980s：幻灯片+同步声音；•1990s：计算机+声卡+CD-ROM•2000s：计算机、网络、大众传媒的结合多媒体技术概述多媒体的基本概念多媒体与数字媒体•Multimedia:文本、图形、图像、视频和音频的组合形式，使其内容更丰富，更便于交流。•DigitalMedia:以数字化的形式存储、处理和传播信息的媒体，以网络为主要传播载体。多媒体技术概述多媒体的基本概念多媒体与多媒体计算机由于计算机的数字化及交互能力，极大地推动了多媒体技术地发展；多媒体技术加速了计算机进入社会生活各个领域。多媒体计算机特征•数字信号的实时压缩和解压缩•多媒体同步多媒体技术概述多媒体的基本概念多媒体技术的定义•以数字化为基础，能够对多种媒体信息进行采集、编码、存储、传输、处理和表现，综合处理多种媒体信息并使之建立起有机的逻辑联系，集成为一个系统并能具有良好交互性的技术。多媒体技术关键特征•复合型复合数据•集成性业务集成•同步性声音图像的同步，实时性•交互性多媒体的技术背景图像压缩编码技术大规模集成电路技术（LSIVLSI）大容量数字存储技术（CD-ROMDVD）26MPEG-1视频压缩标准输入、输出指标MPEG视频编码器352×288×25×8×1.5352×240×30×8×1.530Mb/s1.15Mb/s26:1帧规格：352×28825帧8比特1.5表示4:2:0多媒体技术概述多媒体技术的产生与发展启蒙发展阶段1984年Apple公司，在Macintosh机上引入位图(bitmap)、窗口(Windows)和图标(icon)，后增加语音压缩、真彩色图形系统；1985年Philips和Sony公司联合推出黄皮书标准(CD-ROM)，1986年制定交互式光盘系统CD-I标准(CompactDiskInteractive)，解决了用光盘存储声音、图像和计算机数据的问题；多媒体技术概述多媒体技术的产生与发展启蒙发展阶段1987年RCA公司，开发出交互式数字视频系统DV-I(DigitalVideoInteractive)，开创了多媒体信息检索的先河；1989年IBM公司，开发AVC系统(AudioVisualConnection，音频可视连接)，开始了对多媒体信息的编辑；多媒体技术概述多媒体技术的产生与发展初期应用和标准化阶段1990年多媒体市场协会成立，制定了MPC1标准，确定了MPC部件；1993年5月MPC联盟制定MPC2，提高了五大部件的性能；1995年6月MPC联盟制定MPC3，提高了基本部件的性能，增加了视频播放；技术项目MPC标准1MPC标准2RAM2MB4MB处理器16MHz，386SX25MHz，486SX音频8位数字音频，8个音符合成器乐器数字接口(MIDI)再现16位数字音频，8个音符合成器MIDI再现视频640×480，256色在40%CPU频带的情况下每秒传输1.2M象素视频显示640×480，16色640×480，65536色CD-ROM驱动器150kB/s持续传送速率，平均最快查询时间为1s300kB/s持续传输速率，平均最快查询时间为400ms，CD-ROMXA能进行多种对话多媒体技术概述多媒体技术的产生与发展初期应用和标准化阶段1996年多媒体技术与通信技术开始融合；与此同时，多项标准，如CD-ROM/XA、JPEG、MPEG等颁布多媒体技术概述多媒体技术的产生与发展现状光盘CD-R,DVD,PhotoCD,蓝光;编码标准MPEG-4,MPEG-7,MPEG-21;TCP/IP,HTML/HTTP,Web,VRML,搜索引擎;三网合一，物联网，数字化时代;HDTV,Web/TV,IPhone,VR,无线计算，云计算;视频压缩标准发展历史ITUH.261→H.262→H.263→H.264→H.265H.263+ISO/IECMPEG1→MPEG2→MPEG4(part2)→MPEG4(part10)→MPEG7→MPEG21多媒体系统分类独立型岗亭式网络分布型人人交互多媒体会议与协同工作（MMC）多媒体即时通信（IM）人机交互多媒体信息检索查询（MIS）点播电视（VOD）融合多媒体技术应用多媒体技术的应用1）VCD、SVCD及DVD等家用电器产业的形成。2）各类电子出版物的蓬勃发展，如文献库、百科全书、字典等。3）计算机辅助教学软件（CAI）及各类视听教材、图书、培训材料等。4）各类多媒体演示、查询系统。5）多媒体信息管理系统，如病历库、音响库等多媒体技术应用多媒体技术的应用6）视频会议、可视电话、因特网电话7）数字电视、网络电视、手机电视8）远程监控9）数字图书馆多媒体技术技术热点若干技术热点人机交互与多通道用户界面语音输入，手写体输入，自然语言理解，人脸识别，动作捕捉虚拟现实及应用数字地球，分布式虚拟现实技术，基于图像绘制技术科学计算可视化及信息可视化多媒体技术概述若干技术热点基于内容的检索基于语义的检索多媒体网上传输的服务质量（QoS）数字媒体版权（DMR）三网融合计算机网IP网通信网广播电视网互联网的进展增加核心网和接入网的带宽设计有效的资源分配和管理机制，QoS保障机制IP多媒体子系统IMS多重服务与业务融合谢谢！