《数字媒体资产管理》第9章媒资管理系统架构与功能刘士军lsj@sdu.edu.cn数字媒体资产管理2数字媒体资产管理系统功能近几年,媒资系统的技术和功能越来越完善,对媒资系统的定位也基本达到统一:媒体资产管理系统通过对节目资料的数字化采集上载,利用海量存储和分级存储管理技术对数字化文件形式存在的节目资料进行长期、可靠的存储在计算机辅助编目技术帮助下对节目资料完成完善详细的编目,最终使用人员可以比较方便的从检索系统查找到精确到镜头的节目资料通过下载系统将所需资料输出到录像带上,或者直接以数字化文件的形式到其他系统中使用。总结起来说媒资系统的5大核心功能就是:采集上载、编目、节目存储管理、检索、下载再利用数字媒体资产管理3本章摘要媒资管理系统是由2个主要部分组成的:硬件基础设施和软件组件,通过一个统一的系统架构来表示硬件基础设施为内容的存储、处理和传送提供基本资源,加上它们的标准软件媒资管理系统是在这些基本软件和那些能执行特定任务的软件系统的基础上开发出来的系统架构须要考虑富内容组织的用户需求和工作流程系统架构还必须考虑各内容组件的特点和特征,要能够对素材以多种格式编码,以便在不同环境中服务于不同的目的;并对不同的内容表示方式加以支持介绍系统的基本设计原理、主要功能、软件架构、服务及应用等,并加以详细论述数字媒体资产管理4本章内容9.1媒资管理系统设计原理9.2媒资管理系统架构与功能9.3媒资管理系统中的服务9.4媒资管理系统中的应用9.5关键问题9.6媒资管理系统案例数字媒体资产管理51.软件设计原理通过分布式实现可扩展性媒资管理系统典型的任务是:服务大量的用户、管理大量的资产、存储海量的数据,因此必须具有很高的性能和可靠性若采用大型中心服务器和数据库加以实现,必然会产生瓶颈因此,媒资管理系统设计所依据的原则是:通过分布式实现可扩展性,以便在需要提高性能或存储空间时,可以方便地给系统增加资源数字媒体资产管理61.软件设计原理如何实现通过分布式实现可扩展性?架构的每个组件必须能在专用的服务器平台上运行,所有组件间的通信必须完全基于网络由于系统的组件可能被分布到在物理上相隔很远的服务器上,采用的网络协议应能够通过广域网实现组件间的通信系统的组件应该被设计成能够同时满足多个请求,并行地运行,通过负载分配提高可用性和性能系统的组件不应该有对特定硬件可用性的要求;应该能在系统硬件架构中的任何一个服务器平台上运行系统的组件应该能在其他媒资管理系统的组件没有响应或发生故障时,具有自身的弹性,即它们必须具有作为标准功能模块的多重连接策略和恢复方法数字媒体资产管理71.软件设计原理服务组服务是指在整个架构中自身包含的、用于执行特定任务的模块,可加强内容管理系统的功能。这种功能性模块包括上载、输入输出、素材分析、索引、转换、转码、对素材的修剪和拼接等在一个服务组中,每个服务实例在一个专用服务器上运行。借助服务和服务器平台,服务可提供一定量的资源(即可由它并行处理的任务)采用此概念,大量可用的资源通过增加服务实例的数量,可轻易地扩展服务实例服务器1n1资源服务器2n2资源服务器3n3资源服务器4n4资源服务器5n5资源服务器6n6资源数字媒体资产管理81.软件设计原理代理器一管理器一服务器在单一服务器层次上,建构对于特定服务组件的多个实例,以达到最优性能和可用性在组织中的单一位置,建构多存储簇,以达到最大的灵活性和可扩展性对组织的多位置进行集成,使之看上去像是单个的统一系统多组织之间的交互,使得它们能够无缝地共享选定的项目代理器管理器管理器代理器管理器管理器管理器代理器代理器代理器管理器管理器数字媒体资产管理92.系统架构与功能系统整体结构设计硬件设施系统构建在FC+以太的网络化平台之上上载工作站、下载工作站、MDC服务器、迁移服务器、转码服务器、流媒体服务器、高速磁盘阵列、数据流磁带库同时连接在FC网和以太网上主要的非结构化媒体数据对象(高码率、低码率视音频数据等)可以通过高速的千兆以太网或FC传输其它管理信息、数据索引信息、数据请求信息等结构化信息通过以太网支持数字媒体资产管理102.系统架构与功能软件系统结构面向信息服务、加工、存储等业务运行管理的数据管理平台;面向节目资料数字化的采集整理子系统;面向节目资料深入加工编目处理的编目子系统;面向内部用户服务的信息检索子系统;面向节目资料存储的存储管理子系统;面向数据转换的转码中心子系统;面向数据再利用的下载子系统;数字媒体资产管理112.系统架构与功能内容管理系统有3个主要的功能:内容创建:包括所有与生产有关的工作,比如节目策划、信号录制、编辑工作、后期制作、编排和播出文件编制:包括所有手工的编目和索引工作自动特征提取:它包括所有直接从素材自动获得索引信息的技术(如影像捕捉、关键帧提取、语音识别、说话人识别及声音分析等)素材管理数据管理标引内容创建文件自动特征创建分类摘要对象和时码参照数字媒体资产管理122.系统架构与功能——素材管理素材管理是以对素材存储、供应及操作为主要目的的工作素材管理的主要组件是:存储管理服务:该服务根据不同的可配置存储策略,自动、有效地将素材项目在存储层次结构中移动转码服务:该服务提供对文件格式和编码格式的转换传送服务:如文件传输和流服务,以便上载和供应素材数据库:其中保存了技术元数据(如格式、比特率、色彩深度等)和管理信息(如位置、文件大小等)数字媒体资产管理132.系统架构与功能——素材管理素材管理负责在一个分布式存储环境中存储、管理和提供素材对象,素材管理可处理以下内容:通过对存档管理服务器的引导,存取海量存储系统通过控制存档传输服务器,在在线和近线存储之间转移文件在存档中创造素材文件的多个备份通过对缓存服务器的引导,处理在线存储系统内容和完整性通过将客户端连接到流服务器,将内容传送至客户端通过连接到传输服务器,从远程存储系统接收或传送素材数字媒体资产管理142.系统架构与功能——素材管理素材管理系统可管理一个素材对象的多重版本。每个版本服务于特定的目的。例如:原始磁带拷贝:内容管理系统要能够管理原始拷贝,载体通常是传统模拟格式或数字视频磁带,并且在素材管理中必须存在一个该拷贝的引用参照高品质文件拷贝:原始拷贝的文件版本,信号质量与原始磁带拷贝没有区别,一般是在上载时编码产生,也可作为已经编码的文件输入。如果一个先进的数字压缩视频磁带格式被上载,高品质文件拷贝将保留原始编码格式(如算法、参数、比特率等)EDL浏览副本:中等品质文件拷贝,可在内容管理系统环境中用于剪辑和离线编辑,要求有必需的带宽内容浏览副本:素材的低品质版本,存在局域网和广域网环境中用于查看和择关键帧:静态帧,一般从素材中自动提取数字媒体资产管理152.系统架构与功能——素材管理素材管理的基本构建模块为:存档管理服务器档案传输管理器档案传输服务器高速缓存服务器流和传输管理器流服务器传输服务器在线存储近线存储数据库高速缓存服务器档案传输服务器档案传输管理器流和传输管理器存档管理器流和传输服务器素材移动内容管理系统素材请求请求数字媒体资产管理162.系统架构与功能——素材管理存档管理服务器存档管理服务器是素材存档管理部分的“大脑”,它跟踪海量存储系统(如磁带和磁带池)或磁盘池中的所有存储单元,从内容管理系统接收到对文件加以存档或恢复的请求在大多数情况下,内容管理系统的海量存储系统的核心是近线存储系统在线存储近线存储数据库高速缓存服务器档案传输服务器档案传输管理器流和传输管理器存档管理器流和传输服务器素材移动内容管理系统素材请求请求数字媒体资产管理172.系统架构与功能——素材管理档案传输管理器档案传输管理器从存档管理服务器接到存档和恢复文件的请求,在在线存储和近线存储之间拷贝文件由于从档案传输服务器传到档案传输管理器的请求的数量可能会超过可用的档案传输服务器所能处理的并发请求数量,因此,管理器不得不提供一个事务安全请求队列在线存储近线存储数据库高速缓存服务器档案传输服务器档案传输管理器流和传输管理器存档管理器流和传输服务器素材移动内容管理系统素材请求请求数字媒体资产管理182.系统架构与功能——素材管理档案传输服务器档案传输服务器处理近线和在线存储之间的数据移动一般来说,一个档案传输务器至少与一个磁带驱动器(磁带库)有连接,或和一个存档磁盘池有连接将数据从在线存储拷贝到磁带中,拷贝到磁盘池中,或者从磁带或磁盘池中读取数据并将其写入到在线存储上在线存储近线存储数据库高速缓存服务器档案传输服务器档案传输管理器流和传输管理器存档管理器流和传输服务器素材移动内容管理系统素材请求请求数字媒体资产管理192.系统架构与功能——素材管理高速缓存服务器高速缓存服务器管理在线存储系统,即在高速缓存区的素材可以在线存取高速缓存服务器总是试图使最频繁存取的资料保持在线,因为人们预测这些资料在生产时会被频繁存取根据用户定义的存储则,高速缓存服务器会决定保存哪些资料,清除哪些资料,以便使缓存区可装入新的内容在线存储近线存储数据库高速缓存服务器档案传输服务器档案传输管理器流和传输管理器存档管理器流和传输服务器素材移动内容管理系统素材请求请求数字媒体资产管理202.系统架构与功能——素材管理流管理器因为对内容流的并发请求的数量可能超过一个流服务器所能处理的流的最大数量,因此内容管理系统应允许安装可以共享存取同一内容的流服务器组流管理器被用来选择合适的流服务器,来执行到来的请求,并协调客户端与被选的流服务器之间的连接在线存储近线存储数据库高速缓存服务器档案传输服务器档案传输管理器流和传输管理器存档管理器流和传输服务器素材移动内容管理系统素材请求请求数字媒体资产管理212.系统架构与功能——素材管理流服务器流服务器能对媒体内容进行流式存取在大多数情况下,流服务器建在一个已经存在的、有效的音频或视频服务器周围,此视音频服务器必须能直接对存取素材进行在线存储。流服务器在一个客户端和该流产品之间协调、建立连接流解决方案通过流服务器存取位于在线存储系统上的素材,并将其以流形式传送至客户端在线存储近线存储数据库高速缓存服务器档案传输服务器档案传输管理器流和传输管理器存档管理器流和传输服务器素材移动内容管理系统素材请求请求数字媒体资产管理222.系统架构与功能——素材管理传输管理器对内容的文件传输并发请求的数量可能超过单个传输服务器所能处理的最大传输数量。因此,内容管理系统应该允许设置可共享存取同一内容的传输服管理器被用来选择合适的传输服务器来执行到来的请求传输服务器在与不受内容管理系统管理的远程内容服务器交换文件时,应该使用传输服务器这样一个内容服务器可以是任何一种提供或接受内容或素材的系统。例如编码器、解码器、制作系统、媒体自动点唱机、盒式磁带机、播出服务器或非线性编辑系统在线存储近线存储数据库高速缓存服务器档案传输服务器档案传输管理器流和传输管理器存档管理器流和传输服务器素材移动内容管理系统素材请求请求数字媒体资产管理232.系统架构与功能设备管理设备管理可以通过专门的设备服务器控制外部设备,该服务器对系统赋予了基于信息技术的连接,其基本建构模块是设备管理器、一个或多个设备服务器簇、大量专门设备服务器自动化设备管理器内容管理系统设备控制设备服务器簇自动化设备服务器磁带录像机磁带录像机设备服务器编码器解码器编码设备服务器档案管理系统档案设备服务器播出服务器播出设备服务器编辑系统非线性设备服务器信息访问文件交换信息访问文件交换信息访问文件交换信息访问文件交换信息访问文件交换信息访问文件交换数字媒体资产管理242.系统架构与功能——设备管理设备管理器设备管理器是在服务或应用需要对外部设备进行直接控制时,与内容管理系统交互的实体设备服务器设备服务器向各类外部设备(如磁带录像机、磁盘记录仪、视频服务器、档案案管理系统