第 1章　绪论　1
1.1　多媒体的基本概念　1
1.1.1　媒体与多媒体　1
1.1.2　多媒体的关键特性　2
1.2　多媒体技术的产生与发展　4
1.2.1　多媒体是技术与应用发展的必然　4
1.2.2　多媒体改善了人类信息的交流　5
1.2.3　多媒体缩短了人类传递信息的路径　6
1.3　多媒体技术研究的主要内容　7
1.3.1　多媒体技术的基础　7
1.3.2　多媒体软硬件平台技术　8
1.3.3　多媒体操作系统技术　8
1.3.4　多媒体信息管理与处理技术　9
1.3.5　多媒体通信与分布应用技术　9
1.4　小结　9
习题与思考题　10

第 2章　媒体及媒体技术　11
2.1　媒体的种类和特点　11
2.1.1　常见的媒体元素　11
2.1.2　媒体的种类　15
2.1.3　媒体的性质和特点　16
2.2　听觉媒体技术　18
2.2.1　声音心理学　18
2.2.2　音频的数字化和符号化　21
2.2.3　音频媒体的三维化处理　24
2.3　视觉媒体技术　27
2.3.1　视觉心理学　27
2.3.2　模拟视频原理　28
2.3.3　视觉媒体数字化　29
2.3.4　视觉媒体的三维立体显示　32
2.4　触觉媒体技术　35
2.4.1　触觉媒体概述　35
2.4.2　简单指点设备与技术　36
2.4.3　位置跟踪　37
2.4.4　力反馈与触觉反馈　39
2.5　小结　40
习题与思考题　41

第3章　多媒体数据压缩　42
3.1　数据压缩的基本原理和方法　42
3.1.1　数据压缩技术的性能指标　42
3.1.2　数据冗余的类型与压缩方法分类　43
3.1.3　常用数据压缩方法的基本原理　44
3.1.4　音频压缩编码的基本方法　51
3.1.5　图像和视频压缩编码的基本方法　52
3.2　音频压缩标准　53
3.2.1　电话质量的语音压缩标准　54
3.2.2　调幅广播质量的音频压缩标准　54
3.2.3　高保真立体声音频压缩标准　55
3.3　图像压缩标准　56
3.3.1　JPEG压缩标准　56
3.3.2　JPEG 2000简介　62
3.4　视频压缩标准　64
3.4.1　MPEG压缩标准　64
3.4.2　H.26L视频编码标准　72
3.4.3　H.26L标准和MPEG-4标准特点的比较　77
3.5　小结　77
习题与思考题　78

第4章　多媒体硬件环境　79
4.1　光存储设备　79
4.1.1　光存储的类型　79
4.1.2　CD-ROM光存储系统　80
4.1.3　CD-R光存储系统　81
4.1.4　DVD光存储系统　82
4.2　音频接口　84
4.2.1　音频卡的工作原理　84
4.2.2　音乐合成和MIDI接口规范　88
4.2.3　语音合成　89
4.2.4　语音识别　90
4.3　视频接口　91
4.3.1　视频图像显示　91
4.3.2　视频卡　95
4.4　多媒体I/O设备　96
4.4.1　笔输入　96
4.4.2　触摸屏　98
4.4.3　扫描仪　101
4.4.4　数码相机　104
4.4.5　虚拟现实的三维交互工具　105
4.4.6　输入输出接口　109
4.5　小结　111
习题与思考题　111

第5章　多媒体软件基础　112
5.1　多媒体软件系统层次　112
5.2　多媒体素材制作软件　113
5.2.1　文本编辑与录入软件　114
5.2.2　图形与图像编辑与处理软件　115
5.2.3　音频编辑与处理软件　116
5.2.4　视频编辑　119
5.2.5　动画编辑　121
5.3　多媒体著作工具　123
5.3.1　多媒体著作工具概述　124
5.3.2　Authorware概述　126
5.3.3　Director概述　128
5.4　多媒体软件编程技术　129
5.4.1　媒体控制接口(MCI)　129
5.4.2　多媒体API函数　132
5.4.3　DirectShow　134
5.4.4　多媒体应用设计过程　138
5.5　小结　140
习题与思考题　140

第6章　多媒体的时间表示与同步　141
6.1　多媒体同步的基本概念　141
6.1.1　同步的基本概念　141
6.1.2　同步的种类　142
6.1.3　同步的分层服务模型　143
6.2　时间模型　144
6.2.1　时间依赖的定义　144
6.2.2　时间的概念模型　145
6.3　时间的规范与表示　146
6.3.1　时间规范　146
6.3.2　相对时间规范与绝对时间规范　146
6.4　多媒体同步的表示方法　149
6.4.1　基于图形的表示法　149
6.4.2　基于脚本的表示法　151
6.4.3　交互和同步　155
6.5　时间同步与系统支持　156
6.5.1　概述　156
6.5.2　系统支持的有关问题　157
6.6　小结　158
习题与思考题　159

第7章　多媒体操作系统　160
7.1　计算机操作系统的问题　160
7.1.1　操作系统的基本概念　160
7.1.2　多媒体的引入与操作系统的限制　163
7.2　操作系统对连续媒体的支持　166
7.2.1　体系结构的支持　166
7.2.2　资源管理的支持　167
7.2.3　程序设计的支持　169
7.2.4　实时IPC(进程间通信)　171
7.3　支持连续媒体的文件系统　171
7.3.1　单流情况　172
7.3.2　多流情况　173
7.3.3　介质调度　174
7.4　小结　178
习题与思考题　178

第8章　超媒体与Web系统　180
8.1　超媒体系统的组成　180
8.1.1　超媒体的概念和发展历史　180
8.1.2　超媒体的组成要素　183
8.1.3　超媒体系统的Dexter模型　188
8.2　Web超媒体系统　191
8.2.1　分布式超媒体系统WWW　191
8.2.2　WWW中的超媒体协议与标记语言　192
8.3　智能超媒体系统　198
8.3.1　智能超媒体的概念　198
8.3.2　智能超媒体的节点和链　199
8.3.3　智能超媒体的推理模型　200
8.4　小结　202
习题与思考题　202

第9章　多媒体数据库　203
9.1　多媒体数据管理的问题　203
9.1.1　概述　203
9.1.2　多媒体数据管理的问题　204
9.1.3　多媒体数据与数据库管理　206
9.2　多媒体数据库体系结构　208
9.2.1　多媒体数据库的一般结构形式　208
9.2.2　多媒体数据库的层次结构　209
9.3　多媒体数据模型　211
9.3.1　NF2数据模型　211
9.3.2　面向对象数据模型　212
9.3.3　其他数据模型　215
9.4　多媒体数据库的用户接口　216
9.4.1　字符数值型接口　216
9.4.2　示例型接口　218
9.4.3　用户表现接口　220
9.5　小结　222
习题与思考题　222

第 10章　多媒体信息分析与处理　223
10.1　基于内容检索的系统结构和方法　223
10.1.1　多媒体与媒体语义　223
10.1.2　基于内容检索系统的一般结构　224
10.1.3　基于内容检索的过程和指标　225
10.1.4　特征匹配：过程及方法　227
10.2　图像内容分析及检索方法　229
10.2.1　图像特征的提取与表达　230
10.2.2　图像相似性检索与匹配方法　233
10.2.3　图像检索中的相关反馈机制　235
10.3　视频结构化与视频摘要　236
10.3.1　视频媒体基本特性　236
10.3.2　镜头边界探测　238
10.3.3　关键帧提取　240
10.3.4　故事单元边界探测　241
10.3.5　视频摘要　243
10.4　基于内容的音频处理与检索　245
10.4.1　概述　245
10.4.2　音频结构化的概念模型　246
10.4.3　音频特征提取　247
10.4.4　音频分类　248
10.4.5　音频分割　249
10.4.6　基于内容的音频检索　250
10.5　多媒体融合分析与检索　252
10.5.1　多媒体特征融合　252
10.5.2　单媒体交叉索引　253
10.5.3　单媒体结果融合　254
10.5.4　融合多特征的新闻故事单元探测方法　254
10.6　小结　255
习题与思考题　256

第 11章　多媒体通信与网络　257
11.1　分布式多媒体应用的通信需求　257
11.1.1　多媒体数据流的基本特征　257
11.1.2　多媒体通信的性能需求　258
11.2　多媒体通信的服务质量　260
11.2.1　QoS的基本概念　260
11.2.2　QoS的管理　263
11.3　多媒体通信网络环境　265
11.3.1　局域网络　266
11.3.2　广域网络　269
11.3.3　ATM网络　271
11.3.4　多协议标签交换：MPLS　276
11.4　多媒体通信协议　278
11.4.1　IPv6　279
11.4.2　RSVP　280
11.4.3　RTP　282
11.5　流媒体技术　283
11.5.1　流式传输的基础　283
11.5.2　流媒体技术原理　284
11.5.3　流媒体应用　285
11.6　无线多媒体技术　286
11.6.1　无线多媒体通信网的系统结构　286
11.6.2　无线多媒体通信的关键技术　286
11.7　小结　287
习题与思考题　288

第 12章　分布式多媒体应用系统　289
12.1　引言　289
12.1.1　多媒体通信系统　289
12.1.2　分布式多媒体系统　290
12.2　多媒体会议系统　291
12.2.1　多媒体会议系统概述　291
12.2.2　多媒体会议系统结构与关键技术　293
12.2.3　多媒体会议系统的国际标准　297
12.2.4　虚拟空间会议系统(VST)　300
12.3　VOD与ITV系统　302
12.3.1　视频点播与交互电视的概念　302
12.3.2　VOD/ITV系统的结构　304
12.3.3　视频服务器　307
12.3.4　用户接入网技术　310
12.4　CSCW和群件　312
12.4.1　CSCW概述　312
12.4.2　群件系统　313
12.5　小结　316
习题与思考题　317

主要参考文献　319