由于毕业班原因,本专业选修课程提前到16周考试。

Slides:



Advertisements
Similar presentations
1 第一章:绪论 什么是信源编码? 为什么要信源编码 / 数据压缩? 为什么可以信源编码 / 数据压缩? 怎样进行信源编码?
Advertisements

——Windows98与Office2000(第二版) 林卓然编著 中山大学出版社
计算机网络课程总结 一、计算机网络基础 计算机网络定义和功能、基本组成 OSI/RM参考模型(各层的功能,相关概念, 模型中数据传输 等)
LSF系统介绍 张焕杰 中国科学技术大学网络信息中心
多媒体通信技术 主讲教师:黄玉兰                学时:16.
第三章 数据类型和数据操作 对海量数据进行有效的处理、存储和管理 3.1 数据类型 数据源 数据量 数据结构
UI(用户界面)集训班 Illustrator 高级班.
《多媒体应用基础》 第五章 数字视频处理技术 第5章 数字视频处理技术.
第八章 多媒体技术基础.
第四次大作业 登陆学校图书馆网站的电子数据库
C++中的声音处理 在传统Turbo C环境中,如果想用C语言控制电脑发声,可以用Sound函数。在VC6.6环境中如果想控制电脑发声则采用Beep函数。原型为: Beep(频率,持续时间) , 单位毫秒 暂停程序执行使用Sleep函数 Sleep(持续时间), 单位毫秒 引用这两个函数时,必须包含头文件
第5章、視訊媒體.
LSF系统介绍 张焕杰 中国科学技术大学网络信息中心
Hadoop I/O By ShiChaojie.
Overview of Python Visualization Tools
第5章 数字视频 (3).
多媒體元素.
Mpeg Family 簡介 第六組 B 呂孟庭 B 廖彥鈞.
視訊串流\Streaming Video Part-1 Multimedia on Computer Digital
SVN的基本概念 柳峰
面向对象建模技术 软件工程系 林 琳.
5.1 不同的視像屬性 5.2 常見的視像檔案格式 5.3 在視像檔案容量與質素之間取得平衡 5.4 按需要選擇視像檔案格式
张奇 复旦大学 计算机科学技术学院 2011年5月 多媒体技术基础(第3版) 第12章 MPEG视像 张奇 复旦大学 计算机科学技术学院 2011年5月.
存储系统.
SOA – Experiment 3: Web Services Composition Challenge
李杰 首都经济贸易大学 安全与环境工程学院 个人主页:
大学计算机基础 典型案例之一 构建FPT服务器.
管理信息结构SMI.
华为—E8372h- 155 外观设计 产品类型:数据卡 建议零售价格:299元 上市时间:2017年6月7日 目标人群:大众
第11章:一些著名开源软件介绍 第12章:服务安装和配置 本章教学目标: 了解当前一些应用最广泛的开源软件项目 搭建一个网站服务器
Visual Studio Team System 简介
第一单元 初识C程序与C程序开发平台搭建 ---观其大略
数 控 技 术 华中科技大学机械科学与工程学院.
第十章 IDL访问数据库 10.1 数据库与数据库访问 1、数据库 数据库中数据的组织由低到高分为四级:字段、记录、表、数据库四种。
第17章 网站发布.
DM8148与DM8127 ISS框架讲解 广州创龙电子科技有限公司
AM5728 视频输入端口VIP软件框架 广州创龙电子科技有限公司
数据挖掘工具性能比较.
中国科学技术大学计算机系 陈香兰(0551- ) Spring 2009
Windows 7 的系统设置.
多媒体技术 中南大学信息科学与工程学院 黄东军.
DevDays ’99 The aim of this mission is knowledge..
宁波市高校慕课联盟课程 与 进行交互 Linux 系统管理.
Unit 11.Operating System 11.1 What’s OS 11.2 Related Courses
程序设计工具实习 Software Program Tool
编程作业3:网页正文抽取 (10分).
录制回放工具使用说明 鲁晓宇
祝智庭 (代表教育部现代远程教育技术标准化委员会)
C语言程序设计 主讲教师:陆幼利.
微机系统的组成.
计算机及办公软件应用 ©2013 苏州工业园区职业技术学院
第四章 团队音乐会序幕: 团队协作平台的快速创建
VisComposer 2019/4/17.
Cassandra应用及高性能客户端 董亚军 来自Newegg-NESC.
2019/4/ /4/25 学习科研好助手 NoteExpress文献管理与检索系统 北京爱琴海乐之技术有限公司.
计算机网络与网页制作 Chapter 07:Dreamweaver CS5入门
第4章 Excel电子表格制作软件 4.4 函数(一).
JSP实用教程 清华大学出版社 第2章 JSP运行环境和开发环境 教学目标 教学重点 教学过程 2019年5月7日.
多媒体技术 中南大学信息科学与工程学院 黄东军.
计算机绘图 AutoCAD2016.
GIS基本功能 数据存储 与管理 数据采集 数据处理 与编辑 空间查询 空间查询 GIS能做什么? 与分析 叠加分析 缓冲区分析 网络分析
Python 环境搭建 基于Anaconda和VSCode.
基于列存储的RDF数据管理 朱敏
Copyright © 2004 HRBEU.605. All Rights Reserved
第8章 创建与使用图块 将一个或多个单一的实体对象整合为一个对象,这个对象就是图块。图块中的各实体可以具有各自的图层、线性、颜色等特征。在应用时,图块作为一个独立的、完整的对象进行操作,可以根据需要按一定比例和角度将图块插入到需要的位置。 2019/6/30.
本节内容 进程 视频提供:昆山爱达人信息技术有限公司 官网地址: 联系QQ: QQ交流群 : 联系电话:
第十七讲 密码执行(1).
FVX1100介绍 法视特(上海)图像科技有限公司 施 俊.
入侵检测技术 大连理工大学软件学院 毕玲.
第7章 数字视频广播系统 7.1 ATSC数字电视系统 7.2 DVB数字视频广播系统 7.3 ISDB-T数字电视系统.
Presentation transcript:

由于毕业班原因,本专业选修课程提前到16周考试。 2011/6/13 随堂考试 课程设计2011/ 6/17 24:00

张奇 复旦大学 计算机科学技术学院 qz@fudan.edu.cn 2011年4月 多媒体技术基础(第3版) 第10章 MPEG概要 张奇 复旦大学 计算机科学技术学院 qz@fudan.edu.cn 2011年4月

第10章 MPEG概要目录 10.1 MPEG简介 10.2 MPEG-1数字电视标准 10.3 MPEG-2数字电视标准 10.7 MPEG-A~MPEG-E 10.7.1 MPEG-A多媒体应用格式 10.7.2 MPEG-B 系统技术 10.7.3 MPEG-C视像技术 10.7.4 MPEG-D 声音技术 10.7.5 MPEG-E 多媒体中间件 2018年11月24日 第10章 MPEG概要

10.1 MPEG简介 MPEG是什么 Moving Picture Expert Group的缩写 MPEG专家组的任务 1988年5月由国际标准化组织(ISO)和国际电工委员会(IEC)联合成立的专家组 MPEG专家组的任务 负责开发视像数据和声音数据的编码、解码和它们之间的同步等标准 专家组开发的标准称为MPEG标准 ,见图10-1 图10-1 ISO/IEC联合成立的MPEG专家组 2018年11月24日 第10章 MPEG概要

10.1 MPEG简介(续1) MPEG标准 MPEG-1:1992年发布的数字电视标准,主要用在Video CD(VCD),MP3(MPEG-1 Layer 3)等产品 典型参数见表10-1 MPEG-2:1994年发布的数字电视标准,主要用在DVD,ATSC,DVB,ISDB等数字电视标准以及数字电视机顶盒等产品 MPEG-3:最初设想是开发HDTV标准,后来发现MPEG-2可满足HDTV的要求,于1992年7月终止 MPEG-4:1999年发布的多媒体应用标准,主要应用在多媒体通信、数字电视和人机互动系统等产品中。现改称为“视听对象编码”标准 MPEG-5:直至2007年9月还没有见到定义; MPEG-6:直至2007年9月还没有见到定义 2018年11月24日 第10章 MPEG概要

10.1 MPEG简介(续2) MPEG-7:2001年发布的多媒体内容描述接口标准,用于描述和搜索视听内容 MPEG-A:多媒体应用格式标准,集成多种MPEG技术以提供专用的格式 MPEG-B:为专用系统提供系统技术标准 MPEG-C:为专用电视提供电视技术标准 MPEG-D:为专用声音提供声音技术标准 MPEG-E:为应用程序提供下载和执行功能的多媒体中间件标准 这些标准的进程见图10-2。从图中可看到 2000年以前制定的标准主要是数据压缩 2000年开始制定的标准主要是针对内容管理 MPEG-4既含数据压缩又含内容管理 2018年11月24日 第10章 MPEG概要

10.1 MPEG简介(续3) 图10-2 MPEG标准的开发进程 2018年11月24日 第10章 MPEG概要

10.1 MPEG简介(续4) MPEG标准的重要性 标准是人类智慧的结晶,凝聚着人类认识世界和改造世界的历史经验。在有标准可循的情况下,开发软硬件产品要遵循标准,在还没有标准可循的情况下,要力争把我们的科研成果变成标准 2018年11月24日 第10章 MPEG概要

10.2 MPEG-1数字电视标准 MPEG-1是什么 MPEG专家组于1992年发布的第一个数字电视编码标准(ISO/IEC 11172),包括 图像数据的编码,针对1/4的NTSC制和1/4的PAL制视像,压缩比为30:1时,相当于家用录像系统(VHS)的视像质量。 声音数据的编码,针对采样频率为44.1kHz的声音数据,定义了3个层次的压缩比,压缩比约为6:1时,声音质量接近激光唱片上的声音质量 MPEG-1的主要应用 针对20世纪90年代初期CD-ROM 的数据传输能力只有1.4 Mb/s而开发的,MPEG-1的最高数据速率限定在1.5 Mb/s MPEG-1标准主要用于在CD光盘上存储数字影视、在网络上传输数字影视以及存放MP3格式的数字音乐节目 2018年11月24日 第10章 MPEG概要

10.2 MPEG-1数字电视标准(续1) MPEG-1的系统模型 MPEG-1的基本目标是规范视像压缩和声音数据的编码标准 MPEG-1Video支持子采样为4:2:0或4:1:1的视像 NTSC制彩色电视数字化后的CIF格式,它的分辨率为352像素/行×240行/帧×30帧/秒 PAL制彩色电视数字化后的CIF格式,它的分辨率为352像素/行×288行/帧×25帧/秒 经过压缩的视像输出速率为1.15 Mb/s 视像质量与VHS的视像质量相同 MPEG-1Audio支持的声音 采样频率最高为48 kHz,样本精度为16位 压缩后的声音数据速率分3个层次,最高速率分别为384, 256和192 kb/s 压缩后还原的声音质量接近于激光唱盘上的声音质量 MPEG-1的总数据率控制在1.5 Mb/s左右 2018年11月24日 第10章 MPEG概要

10.2 MPEG-1数字电视标准(续2) 系统模型 由编码系统和解码系统两大部分组成,见图10-3 图(a)是MPEG-1的编码系统,图(b)是MPEG-1的解码系统 编码系统由两个部分组成 (1) 视像编码和声音编码;(2) 系统层上的多路数据复合 图10-3 MPEG-1系统模型 2018年11月24日 第10章 MPEG概要

10.2 MPEG-1数字电视标准(续3) MPEG-1标准的文档 MPEG-1的标准号为ISO/IEC 11172,标准名称为Coding of moving pictures and associated audio for digital storage media at up to about 1.5 Mb/s MPEG-1标准定义的一套语法和语义规则由五个部分组成 Part 1 (MPEG-1 System):视像数据、声音数据及其他相关数据的同步 Part 2 (MPEG-1 Video):电视数据的编码和解码 Part 3 (MPEG-1 Audio):声音数据的编码和解码 Part 4 (MPEG-1 Conformance Testing):说明如何测试位流(bit stream)和解码器是否满足Part 1,Part 2和Part 3所规定的要求 Part 5 (MPEG-1 Software Simulation):1994年认可的包含C语言代码的参考软件(Reference Software),并给出了用参考软件执行前3个部分的结果 2018年11月24日 第10章 MPEG概要

10.3 MPEG-2数字电视标准 MPEG-2是什么 1990年开始于1994年完成的数字电视编码标准(ISO/IEC 13818) ,与数字电视广播和有线数字电视有直接关系 基本编码算法与MPEG‑1的相同,增加了许多MPEG‑1所没有的功能,如支持高分辨率的视像、大范围的数据速率、多声道的环绕声、多种视像分辨率、位速率可变(scalability)、隔行扫描等特性。由于增加了如此多的特性,再加MPEG-1的技术就形成了单独的MPEG-2标准 要达到的目标是电视数据压缩后的数据位速率最低为4 Mb/s,最高可达100 Mb/s 典型应用是DVD影视和广播级质量的数字电视,包括美国的ATSC DTV、欧洲的DVB以及日本的ISDB。MPEG-2也是在因特网上传输数字电视的标准 2018年11月24日 第10章 MPEG概要

10.3 MPEG-2数字电视标准(续1) MPEG-2的系统模型 主要由编码系统和解码系统两部分组成。见图10-4 图(a):编码系统,由两个部分组成:(1) 视像编码和声音编码;(2)数据打包和多路数据复合 图(b):解码系统 MPEG-2 Video规范支持的典型视像格式 来自NTSC制彩色电视数字化后的标准格式,它的分辨率为720像素/行×480行/帧×30帧/秒 来自PAL制彩色电视数字化后的标准格式,它的分辨率为720像素/行×576行/帧×25帧/秒。 MPEG-2 Audio规范支持的声音 MPEG-1声音规范 高质量的环绕声,如5.1声道的环绕声 2018年11月24日 第10章 MPEG概要

10.3 MPEG-2数字电视标准(续2) MPEG-2主要用来定义把视像、声音和其他数据组合成适合存储或传输的基本数据流。 数据流有两种类型 节目数据流(program stream,PS),由基本数据流(packetised elementary streams,PES)组合而成,用在出现错误相对比较少的环境,如DVD存储系统 (a) MPEG-2编码系统 2018年11月24日 第10章 MPEG概要

10.3 MPEG-2数字电视标准(续3) 传输数据流(transport stream,TS),由一个或多个PES组合而成,用在出现错误相对比较多的环境下,如数字电视广播、有损失或者有噪声的传输系统 (b) MPEG-2解码系统 图10-4 MPEG-2系统模型 2018年11月24日 第10章 MPEG概要

10.3 MPEG-2数字电视标准(续4) 视像类型和等级 支持的视像类型和等级见表10-5 2018年11月24日 第10章 MPEG概要

10.3 MPEG-2数字电视标准(续5) MPEG-2标准的文档 一套语法和语义规则由11个部分组成,见表10-7 2018年11月24日

10.4 MPEG-4视听对象编码 MPEG-4是什么 视听对象编码(Coding of audio-visual objects)标准(ISO/IEC 14496),始于1993年的多媒体应用标准 1998年10月发布了版本1 1999年底完成了版本2 2000年初正式成为国际标准 不断更新和完善…… 目标是为通信、广播、存储和其他应用提供数据速率低而视听质量高的数据编码方法和交互播放工具,见图10-6 吸收了MPEG-1、MPEG-2和其他相关标准的许多特性 引入了视听对象(audio-visual objects,AVO)编码的概念 2018年11月24日 第10章 MPEG概要

10.4 MPEG-4视听对象编码(续1) 扩充了编码类型,由自然对象扩展到合成对象 采用了合成对象与自然对象混合编码(Synthetic/Natural Hybrid Coding,SNHC)算法 引入了组合、合成和编排等重要概念,以实现交互功能和对象重用 图10-6 MPEG-4的应用前景 2018年11月24日 第10章 MPEG概要

10.4 MPEG-4视听对象编码(续2) MPEG-4的系统模型 信息编码操场 按MPEG资深专家的说法,MPEG-4期待为未来多媒体应用提供一个“信息编码操场(information coding playground)”。根据当时的技术和技术发展趋势,专家们引入了基于对象的视听表示模型,见图10-7 由编码和解码两大部分组成,为互动视听场景通信定义的主要功能包括 自然视听对象和人造视听对象、二维(2-D)和三维(3-D)视听对象的编码表示法,这些对象可以是摄像机摄制的、用麦克风录制的或用计算机生成的 视听对象及其行为的时间与空间的编码表示法 数据流管理信息的编码表示法,包括同步、标识、流媒体内容的描述、超链接和互动等信息的编码表示法 文件格式、数据流在网络上传输的接口及其规范 2018年11月24日 第10章 MPEG概要

10.4 MPEG-4视听对象编码(续3) 发送端 (b) 接收端 图10-7 MPEG-4基于对象的系统模型 2018年11月24日

10.4 MPEG-4视听对象编码(续4) MPEG-4系统分成3层,见图10-8 压缩层(Compression Layer) 视听数据流的编码和解码 称为“基本数据流(Elementary Stream)”编码和解码 定义在MPEG-4 Visual、MPEG-4 Audio和MPEG-4 AVC中 同步层(Sync Layer) 管理基本数据流的同步 定义在MPEG-4 System中 传递层(Delivery Layer,SL) 传递多媒体内容而不关心内容所在位置和内容传输技术 描述该层抽象功能的名称是“传递多媒体框架(Delivery Multimedia Integration Framework,DMIF)” 定义在MPEG-4 DMIF中 2018年11月24日 第10章 MPEG概要

10.4 MPEG-4视听对象编码(续5) 图10-8 MPEG-4分层模型 2018年11月24日 第10章 MPEG概要

10.4 MPEG-4视听对象编码(续6) 传递多媒体集成框架(DMIF) 传输和应用之间的接口,用来管理多媒体数据流传输的会话协议。突出了传输技术,隐藏了如图10-9所示的广播、存储和网络技术 从功能上来看,该协议与文件传输协议(File Transfer Protocol,FTP)类似,其差别是FTP返回的是数据,而DMIF返回的是指向到何处获取数据流的指针 图10-9 多媒体内容 传输集成框架(DMIF) 2018年11月24日 第10章 MPEG概要

10.4 MPEG-4视听对象编码(续6) 视听终端结构 传递层上有两个接口 DMIF网络接口(DMIF -Network Interface,DNI):在视听终端与传输媒体或存储媒体之间的接口规范,包含控制连接所需方法和命令 DMIF应用接口(DMIF Application Interface,DAI):在同步层和传递层之间交换打包的数据流(packetized stream)和相关控制信息的接口规范,包括会话信令(signaling)、通信信道的建立与释放等 FlexMux是灵活多路复合器(flexible multiplexer)的简写,用于管理同步层上打包的数据流的进出 2018年11月24日 第10章 MPEG概要

10.4 MPEG-4视听对象编码(续7) 在发送端,经过压缩后的视听场景描述信息连同同步信息一起发送到传递层。发送端的多路复合器将它们复合成一个或多个用于传输或存储的数据位流 在接收端,对接收到的数据流进行多路分解和解压缩,根据场景描述信息和同步信息来编排视听对象,然后呈现给终端用户。在通信过程中,终端用户可以与它互动,互动信息可在当地处理,也可传到发送端处理 图10-10 MPEG-4视听终端结构[1] 2018年11月24日 第10章 MPEG概要

10.4 MPEG-4视听对象编码(续8) MPEG-4的标准文档 信息技术 — 视听对象编码(Information technology - Coding of audio-visual objects)现由23个部分组成 大多数人比较关心的部分包括 Part 1 (MPEG-4 System)—系统标准,标准名是ISO/IEC 14496-1 Information technology - Coding of audio-visual objects— Part 1: Systems,描述视像和声音的同步和复合 Part 2 (MPEG-4 Visual)—可视对象编码标准,标准名是ISO/IEC 14496-2 Information technology - Coding of audio-visual objects — Part 2: Visual,描述自然视像、纹理、合成视像等可视对象的编码和解码 Part 3 (MPEG-4 Audio)—声音编码标准,标准名是ISO/IEC 14496-3 Information technology - Coding of audio-visual objects — Part 3: Audio,描述感知声音数据的编码和解码,包括高级声音编码(AAC) 、话音(speech)和其他声音(audio)编码 2018年11月24日 第10章 MPEG概要

10.4 MPEG-4视听对象编码(续9) Part 6 (MPEG-4 DMIF)—传送多媒体集成框架, 标准名是ISO/IEC 14496-6 Information technology - Coding of audio-visual objects— Part 6 Delivery Multimedia Integration Framework (DMIF), 管理多媒体数据流 Part 10 (MPEG-4 AVC)—高级视像编码,标准名是ISO/IEC 14496-10 Information technology - Coding of audio-visual objects — Part 10:Advanced Video Coding,描述视像编码和解码,技术上与H.264一致。通常写成MPEG-4 AVC/H.264 2018年11月24日 第10章 MPEG概要

10.5 MPEG-7多媒体内容描述接口标准 MPEG-7是什么 从1998年启动的多媒体内容描述接口标准(ISO/IEC 15938) 描述多媒体内容及它们之间的关系,便于多媒体信息检索 多媒体内容包括用文字、图像、图形、三维模型、声音和视像等传播媒体表示的内容,以及它们在多媒体演示中的组合关系 不是瞄准特定的应用,其应用领域极其广泛 如数字图书馆(如影视目录)、多媒体目录服务(如黄页)、广播媒体(如无线电频道,TV频道等)、多媒体编辑(如新闻服务、多媒体创作)等 注意:MPEG-7不是视听数据压缩标准 2018年11月24日 第10章 MPEG概要

10.5 MPEG-7多媒体内容描述接口标准(续1) MPEG-7标准化范围 内容描述的概念 对多媒体数据的特征进行描述。特征包括对图像、图形、 三维动画、声音和视像的特征。例如, 在图10-11中,一段AV(视听材料)可能包括多个镜头,为检索方便,需要对每个镜头进行描述,就是对镜头进行标注。 镜头(shot)是摄像机拍摄的描述某一场面或主题(subject)的一组连续图像。镜头是构成情节的基本单元,其持续时间取决于镜头表现的意图等因素 对镜头的描述可插在视听材料中间,也可以与镜头数据分开,构成带标注的视听材料 镜头(shot)是摄像机拍摄的描述某一场面或主题(subject)的一组连续图像。镜头是构成情节的基本单元,其持续时间取决于镜头表现的意图等因素 2018年11月24日 第10章 MPEG概要

10.5 MPEG-7多媒体内容描述接口标准(续2) 图10-11 MPEG-7的内容描述概念 2018年11月24日

10.5 MPEG-7多媒体内容描述接口标准(续3) 标准化的范围 MPEG-7的处理链(processing chain)见图10-12。包含三个部分: 特征抽取(feature extraction),MPEG-7的基础 标准描述(standard description) 搜索引擎(search engine),MPEG-7的应用 特征抽取和检索工具都不属于MPEG-7专家组制定标准的范畴,而是留给那些才华横溢的科学技术人员去竞争,以便得到最好的算法和工具 引擎(engine)的概念:(1) 具有特定功能的专用处理器(如图形处理器),但不能单独工作,就像发动机一样,处理器运行得越快,工作任务完成得越快。(2) 执行基本而又具有高度重复功能的专用软件,如搜索引擎;决定程序如何管理和操作数据的专用软件,如数据库引擎 2018年11月24日 第10章 MPEG概要

10.5 MPEG-7多媒体内容描述接口标准(续4) 图10-12 MPEG-7标准化的范围 2018年11月24日 第10章 MPEG概要

10.5 MPEG-7多媒体内容描述接口标准(续5) MPEG-7标准的文档 目前,大多数人比较关心的部分包括 Part 1 (MPEG-7 Systems) — 系统标准: 阐述MPEG-7标准的框架结构 Part 2 (MPEG-7 Description Definition Language)—描述定义语言:定义MPEG-7描述工具的语法和定义新的描述方案(Description Schemes) Part 3 (MPEG-7 Visual) — 可视内容描述:规范描述可视内容的描述工具 Part 4 (MPEG-7 Audio) — 声音内容描述:规范描述声音内容的描述工具 Part 5 (MPEG-7 Multimedia Description Schemes) — 多媒体描述方案:规范描述一般特性和描述多媒体的描述工具。 2018年11月24日 第10章 MPEG概要

10.6 MPEG-21 多媒体框架标准 MPEG-21是什么 开发背景 尽管有MPEG-1, MPEG-2, MPEG-4和MPEG-7标准,但在多媒体内容的发行和使用方面,要达到完全协调工作,还需要有能够把已有和正在开发的标准和技术融合在一起的标准,这就是MPEG专家组开发MPEG-21标准的出发点,俗称为“胶水标准(glue-standardization)”。 2000年启动开发的多媒体框架(Multimedia Framework)标准(ISO/IEC 21000) 试图描述多媒体的元数据(metadata),用于全球多媒体对象的集成、创建、使用、管理和传送等操作,便于不同人群在异构网络环境下使用各种多媒体资源,它的目标是为未来多媒体的应用提供一个完整的平台 2018年11月24日 第10章 MPEG概要

10.6 MPEG-21 多媒体框架标准(续1) 元数据(metadata)是描述数据本身特性的数据,如描述包含在数据流中的声音和视像数据的元数据,包括描述文件中的标题、主题、作者和大小等的元数据。 试图解决资源共享、知识产权和版权管理与保护,形象地用“数字条目”和一把锁来表示,见图10-13 图10-13 MPEG-21的远景规划[3] 2018年11月24日 第10章 MPEG概要

10.6 MPEG-21 多媒体框架标准(续2) 标准的结构 MPEG-21专家组将解决的关键技术问题归纳为7个 数字条目说明(Digital Item Declaration ,DID) 用于定义数字条目(DI)的模式。该模式应当对所有类型的媒体资源和描述模式都是开放和可以扩展的,并且应当支持分层结构以利于搜索和管理。 数字条目标识和描述(Digital Item Identification and Description,DIID) 为标识和描述任何实体提供所需的框架。 内容管理和使用(content management and usage) 为内容的创建、管理、搜索、访问、存储、传递和使用提供接口和协议,以便于跨越内容发行链和内容消费链。 2018年11月24日 第10章 MPEG概要

10.6 MPEG-21 多媒体框架标准(续3) 知识产权管理和保护(Intellectual Property Management and Protection,IPMP) 提供各种有效的方法,用于在跨越各种网络和设备时,能够持久可靠地管理和保护数字条目的完整性以及它们的版权 终端和网络(terminals and networks) 为在异构网络上共同操作和访问内容提供有效的工具 内容表示(content representation) 定义媒体资源如何表示 事件报告(event reporting) 提供可让用户管理事件的度量标准(metrics)和接口 2018年11月24日 第10章 MPEG概要

10.6 MPEG-21 多媒体框架标准(续4) 7个方面的关键技术由18个部分组成,各部分之间的关系见图10-17,其中 数字条目自适应(Digital Item AdaptationX,DIA) 数字条目通过“资源自适应引擎(resource adaptation engine)”或“描述自适应引擎(descriptor adaptation engine)”进行修改 版权数据词典(Rights Data Dictionary,RDD) 描述数字条目的版权时所需的关键条款的词典,其内容包括使用标准的语法规则明确表示的知识产权、授权范围等 版权表示语言(Rights Expression Language,REL) 用于说明版权和授权范围的机器可读的语言,使用版权数据词典(RDD)中定义的条款 2018年11月24日 第10章 MPEG概要

10.6 MPEG-21 多媒体框架标准(续5) 图10-17 MPEG-21标准的结构[5] 2018年11月24日

10.6 MPEG-21 多媒体框架标准(续6) 2018年11月24日 第10章 MPEG概要

10.7 MPEG-A~MPEG-E 前言 MPEG-A, -B, -C, -D和-E是专家组在2005年前后提议开发的标准,其目标是定义可跨越MPEG-1,MPEG-2,MPEG-4,-MPEG7和MPEG-21标准的规范,并把这些现有的或正在开发的MPEG-1, MPEG-2, MPEG-4, MPEG-7和MPEG-21标准称为“大标准(large/big standards)”,而MPEG-A~ MPEG-E称为“小标准” 2018年11月24日 第10章 MPEG概要

10.7 MPEG-A~MPEG-E(续1) MPEG-A 多媒体应用格式(Information technology – Multimedia Application Formats, MAF)标准(ISO/IEC 23000)[6][7] 从已有或正在开发的MPEG-1, MPEG-2, MPEG-4, MPEG-7和MPEG-21等标准中,抽出合适的技术组合成单个规范,以适应日益增长的服务需求,如传送音乐、图像或家庭电视等 文件格式可包含多媒体数据和元数据,如MPEG声音、JPEG图像和相关的MPEG-7元数据 MPEG-A的概念见图10-18,应用例子见图10-19 2018年11月24日 第10章 MPEG概要

10.7 MPEG-A~MPEG-E(续2) 图10-18 多媒体应用格式的概念[6] 2018年11月24日 第10章 MPEG概要

10.7 MPEG-A~MPEG-E(续3) (a) 学外语 (b) 音乐相簿 (c) 讲故事 图10-19 MPEG-A的应用举例 2018年11月24日 第10章 MPEG概要

10.7 MPEG-A~MPEG-E(续4) MPEG-B MPEG系统技术(Information technology – MPEG Systems Technologies)标准(ISO/IEC 23001) [8] 定义可跨越或不直接链接MPEG-1,MPEG-2,MPEG-4,MPEG7和MPEG-21标准的系统工具,提供一套标准化的通用技术,用于有效地压缩和传输XML文档 现有2部分,见表10-12。Binary MPEG format for XML (用于XML的二进制MPEG格式)简写为BiM 2018年11月24日 第10章 MPEG概要

10.7 MPEG-A~MPEG-E(续5) MPEG-C MPEG视像技术(Information technology – MPEG Video Technologies)”标准(ISO/IEC 23002) 定义可跨越或不直接链接MPEG-1,MPEG-2,MPEG-4标准的视像数据编码工具。目前,这个标准有3个部分,见表10-13 2018年11月24日 第10章 MPEG概要

10.7 MPEG-A~MPEG-E(续6) MPEG-D 声音技术 MPEG声音技术(Information technology – MPEG Audio Technologies)标准(ISO/IEC 23003) 定义可跨越或不直接链接MPEG-1,MPEG-2,MPEG-4,MPEG7和MPEG-21标准的声音编码工具。例如,目前正在开发的Part 1标准是MPEG Surround编码规范。目前,这个标准有1个部分,见表10-14 2018年11月24日 第10章 MPEG概要

10.7 MPEG-A~MPEG-E(续7) MPEG-E MPEG多媒体中间件(Information technology – MPEG Multimedia Middleware, M3W)标准(ISO/IEC 23004) 定义一套专门用于多媒体的应用程序接口(API),以改善多媒体应用的移植性和互操作性能 3个独立层:应用层、中间件层和计算平台层,见图10-20 图10-20 MPEG-E的M3W系统的软件结构[9] 2018年11月24日 第10章 MPEG概要

10.7 MPEG-A~MPEG-E(续8) 现有7个部分,见表10-15 2018年11月24日 第10章 MPEG概要

第10章 MPEG概要参考文献和站点 The MPEG Home Page, http://www.chiariglione.org/mpeg/ MPEG Industry Forum,http://www.mpegif.org/resources.php ISO/IEC 14496-1, Information technology - Coding of audio-visual objects— Part 1: Systems,MPEG-4 3rd Edition,March 2002 (1) ISO/IEC JTC 1/SC 29/WG 11/N7194, Introducing MPEG-21, An Overview of the Multimedia Framework with exhibition of developments, Busan, KR, April 2005; (2) Ian Burnett, Digital Items –the core concept and its Declaration,A brief intro to ISO/IEC 21000-2, http://www.chiariglione.org/mpeg/tutorials/seminars/mp21-2005/02_MPEG-21 DID tutorial.pdf ISO/IEC TC JTC1/SC 29/WG11/N 6269, Information Technology — Multimedia Framework (MPEG-21) — Part 1: Vision, Technology and Strategy, 2003-12-3 Harald Kosch, Distributed Multimedia Database Technologies Supported by MPEG-7 and MPEG-21, Auerbach Publications,2004 2018年11月24日 第10章 MPEG概要

第10章 MPEG概要参考文献和站点(续) MPEG-A: A New Kind of MPEG Standard,April 2005. http://www.m4if.org/resources/mpega.pdf ISO/IEC JTC1/SC29/WG11 MPEG2006/N8068, MAF Overview, Montreux April 2006 ISO/IEC 23001-1 (2006-03), Information technology - MPEG systems technologies - Part 1: Binary MPEG format for XML ISO/IEC JTC 1/SC 29/WG 11/N8152, White Paper on the Multimedia Middleware, April 2006, Montreux, http://www.chiariglione.org/mpeg/technologies/mpe-m3w/index.htm 知识产权保护:JI Ming (Panasonic),ISO/IEC JTC 1/SC 29/WG 11N7503,MPEG-2 IPMP white paper,July 2005, Poznan, http://www.chiariglione.org/MPEG/technologies/mp02-ipx/index.htm 知识产权保护:Information Technologies for IPR Protection, 2005, http://www.cmlab.csie.ntu.edu.tw/~ipr/ipr2005/data/material/Digital Rights Management.pdf 2018年11月24日 第10章 MPEG概要

END 第10章 MPEG概要